物理服务器不重启分配raid

一、MegaCli 命令的安装及使用

目录

• 一、MegaCli 命令的安装及使用
  • 1.下载rpm包
  • 2.安装
  • 3.安装完，就会在/opt/下创建个MegaRAID目录，文件都在里面
  • 4.添加软连接
  • 5.查看帮助手册
  • 6.安装报错处理
• 二、命令的基本使用
  • 1.查看 RAID 卡信息：
  • 2.查看所有物理磁盘信息：
  • 3.查看所有虚拟磁盘信息：
  • 4.创建虚拟磁盘：
  • 5.删除虚拟磁盘：
  • 6.添加热备盘：
  • 7.查看事件日志：
  • 8.详细标注解释
  • #使用 MegaCli 命令来查看未分配的物理磁盘信息
  • #在 MegaCli 中，创建 RAID 1 的虚拟磁盘需要以下步骤：
• #问题：
  • 1.创建完虚拟磁盘后，需要重启物理机吗？

1.下载rpm包

wget http://mirror.cogentco.com/pub/misc/MegaCli-8.07.14-1.noarch.rpm

2.安装

rpm -ivh MegaCli-8.07.14-1.noarch.rpm

3.安装完，就会在/opt/下创建个MegaRAID目录，文件都在里面

[root@node3 MegaCli]# pwd
/opt/MegaRAID/MegaCli
[root@node3 MegaCli]# ll MegaCli64
-rwxr-xr-x. 1 root root 2720320 Dec 16  2013 MegaCli64
[root@node3 MegaCli]# 

4.添加软连接

ln -s /opt/MegaRAID/MegaCli/MegaCli64 /usr/bin/MegaCli

5.查看帮助手册

MegaCli -h

6.安装报错处理

如果出现一下报错，解决思路
./MegaCli64: error while loading shared libraries: libncurses.so.5: cannot open shared object file: No such file or directory
# 安装相关依赖即可
＃ yum install ncurses-compat-libs

二、命令的基本使用

MegaCli 是 LSI Logic 公司提供的一款 RAID 管理工具，可以用于管理 LSI Logic 的 RAID 卡，包括创建虚拟磁盘、添加热备盘、故障管理等。以下是 MegaCli 命令的基本使用方法：

1.查看 RAID 卡信息：

MegaCli -AdpAllInfo -aAll

2.查看所有物理磁盘信息：

MegaCli -PDList -aAll

3.查看所有虚拟磁盘信息：

MegaCli -LDInfo -Lall -aAll

4.创建虚拟磁盘：

MegaCli -CfgLdAdd -r0 [E:S] -a0
其中，-r0 表示创建 RAID 0 的虚拟磁盘，E:S 表示物理磁盘的位置，a0 表示操作的 RAID 卡号。

5.删除虚拟磁盘：

MegaCli -CfgLdDel -LX -a0
其中，-LX 表示删除虚拟磁盘号为 X 的虚拟磁盘，a0 表示操作的 RAID 卡号。
Virtual Drive ：表示虚拟盘号
Virtual Drive: 0 (Target Id: 0)
此处的虚拟盘号就是0

6.添加热备盘：

MegaCli -PDHSP -Set -PhysDrv [E:S] -a0
其中，-PDHSP 表示设置热备盘，[E:S] 表示物理磁盘的位置，a0 表示操作的 RAID 卡号。

7.查看事件日志：

 MegaCli -AdpEventLog -GetEvents -f events.log -aAll

其中，-GetEvents 表示获取事件日志，-f events.log 表示将事件日志输出到 events.log 文件中，aAll 表示操作所有 RAID 卡。
以上是 MegaCli 命令的基本使用方法，更多的命令和参数可以通过 MegaCli 帮助文档或手册查看。

8.详细标注解释

MegaCli -LDInfo -Lall -aAll
列出所有虚拟磁盘的信息，包括虚拟磁盘号、RAID 级别、容量等。
其中
#Adapter #0 表示 RAID 卡的 ID 为 0，可以在 MegaCli 命令中使用 a0 来代表该 RAID 卡的 ID
#虚拟磁盘号对应的字段为 Virtual Drive，
Adapter 0 -- Virtual Drive Information:
Virtual Drive: 1 (Target Id: 1)     #
Name                :
RAID Level          : Primary-1, Secondary-0, RAID Level Qualifier-0
Size                : 1.818 TB
Sector Size         : 512
Is VD emulated      : No
Mirror Data         : 1.818 TB
State               : Optimal
Strip Size          : 64 KB
Number Of Drives    : 2
Span Depth          : 1
Default Cache Policy: WriteBack, ReadAhead, Direct, No Write Cache if Bad BBU
Current Cache Policy: WriteBack, ReadAhead, Direct, No Write Cache if Bad BBU
Default Access Policy: Read/Write
Current Access Policy: Read/Write
Disk Cache Policy   : Disk's Default
Encryption Type     : None
Default Power Savings Policy: Controller Defined
Current Power Savings Policy: None
Can spin up in 1 minute: Yes
LD has drives that support T10 power conditions: Yes
LD's IO profile supports MAX power savings with cached writes: No
Bad Blocks Exist: No
Is VD Cached: No

#使用 MegaCli 命令来查看未分配的物理磁盘信息

MegaCli -PDList -aALL
1.该命令会列出所有的物理磁盘信息，包括编号、容量、型号、序列号等。
MegaCli -PDList -aALL
2. 找到未分配的物理磁盘，在输出信息中查找 Firmware state: Unconfigured(good) 的物理磁盘即为未分配的物理磁盘。例如：
Enclosure Device ID: 32
Slot Number: 6
Enclosure position: N/A
Device Id: 6
WWN: 5000C500F0445FD4
Sequence Number: 5
Media Error Count: 0
Other Error Count: 0
Predictive Failure Count: 0
Last Predictive Failure Event Seq Number: 0
PD Type: SAS

Raw Size: 7.277 TB [0x3a3812ab0 Sectors]
Non Coerced Size: 7.276 TB [0x3a3712ab0 Sectors]
Coerced Size: 7.276 TB [0x3a3700000 Sectors]
Sector Size:  512
Logical Sector Size:  512
Physical Sector Size:  4096
Firmware state: Unconfigured(good), Spun Up   #此处显示的是未分配的磁盘
Device Firmware Level: LS0A
Shield Counter: 0
Successful diagnostics completion on :  N/A
SAS Address(0): 0x5000c500f0445fd5
SAS Address(1): 0x0
Connected Port Number: 0(path0)
Inquiry Data: SEAGATE ST8000NM024B    LS0AWRQ12FEC
FDE Capable: Not Capable
FDE Enable: Disable
Secured: Unsecured
Locked: Unlocked
Needs EKM Attention: No
Foreign State: None
Device Speed: 12.0Gb/s
Link Speed: 12.0Gb/s
Media Type: Hard Disk Device
Drive Temperature :32C (89.60 F)
PI Eligibility:  No
Drive is formatted for PI information:  Yes
PI: PI with type 2
Port-0 :
Port status: Active
Port's Linkspeed: 12.0Gb/s
Port-1 :
Port status: Active
Port's Linkspeed: 12.0Gb/s
Drive has flagged a S.M.A.R.T alert : No
3. 如果需要进一步查看该物理磁盘的详细信息，可以使用以下命令：（S ：中的顺序是0开始计数的）
MegaCli -PDInfo -PhysDrv [E:S] -aALL

#在 MegaCli 中，创建 RAID 1 的虚拟磁盘需要以下步骤：

1.查看当前未分配的物理硬盘。
运行以下命令查看所有物理硬盘信息：
MegaCli -PDList -aALL
Firmware state: Unconfigured(good), Spun Up   #此处显示的是未分配的磁盘
找到两个未分配的物理硬盘，记录它们的位置信息 [E:S]。
2. 创建 RAID 1 的虚拟磁盘。
运行以下命令创建 RAID 1 的虚拟磁盘：
MegaCli -CfgLdAdd -r1 [E:S,E:S] -a0
其中，-r1 表示创建 RAID 1 的虚拟磁盘，[E:S,E:S] 表示两个未分配的物理硬盘的位置信息，a0 表示操作的 RAID 卡号。
#我的生产中是这样的：
MegaCli -CfgLdAdd -r1 [32:6,32:7] -a0

3. 等待虚拟磁盘创建完成。
创建虚拟磁盘需要一定时间，在此期间可以使用以下命令查看创建进度：
MegaCli -LDGetProp -ProgDsply -Lall -a0

创建完成后，RAID 1 的虚拟磁盘即可用于存储数据了。

#问题：

1.创建完虚拟磁盘后，需要重启物理机吗？

MegaCli -CfgLdAdd -r1 [E:S,E:S] -a0 创建完虚拟磁盘后，需要重启物理机吗？lsblk命令是否就可以看到可挂载的磁盘了？

在使用 MegaCli 命令创建虚拟磁盘后，无需重启物理机，虚拟磁盘即可使用。不过需要注意的是，在创建虚拟磁盘后，还需要进行以下操作：

使用以下命令重新扫描磁盘：
echo "- - -" > /sys/class/scsi_host/hosth/scan
其中，hosth 表示磁盘所在的 SCSI HBA 主机号。

[root@node2 scsi_host]# ll
total 0
lrwxrwxrwx. 1 root root 0 May 25 00:00 host0 -> ../../devices/pci0000:00/0000:00:01.0/0000:03:00.0/host0/scsi_host/host0
lrwxrwxrwx. 1 root root 0 May 25 00:00 host1 -> ../../devices/pci0000:00/0000:00:11.4/ata1/host1/scsi_host/host1
lrwxrwxrwx. 1 root root 0 May 25 00:00 host10 -> ../../devices/pci0000:00/0000:00:1f.2/ata10/host10/scsi_host/host10
lrwxrwxrwx. 1 root root 0 May 25 00:00 host2 -> ../../devices/pci0000:00/0000:00:11.4/ata2/host2/scsi_host/host2

[root@node2 scsi_host]# ll /sys/class/scsi_host/host0/scan
--w-------. 1 root root 4096 May 31 15:55 /sys/class/scsi_host/host0/scan
[root@node2 scsi_host]# ll /sys/class/scsi_host/host1/scan
--w-------. 1 root root 4096 May 31 15:55 /sys/class/scsi_host/host1/scan
[root@node2 scsi_host]# ll /sys/class/scsi_host/host2/scan
--w-------. 1 root root 4096 May 31 15:55 /sys/class/scsi_host/host2/scan

2. 使用 lsblk 命令查看可挂载的磁盘。可以看到新创建的虚拟磁盘已经被识别出来，例如：
NAME   MAJ:MIN RM  SIZE RO TYPE  MOUNTPOINT
sda      8:0    0   20G  0 disk
├─sda1   8:1    0  500M  0 part  /boot
└─sda2   8:2    0 19.5G  0 part
  ├─centos-root 253:0    0 17.7G  0 lvm   /
  └─centos-swap 253:1    0  1.9G  0 lvm   [SWAP]
sdb      8:16   0   20G  0 disk
└─sdb1   8:17   0   20G  0 part
sdc      8:32   0   20G  0 disk
└─sdc1   8:33   0   20G  0 part
sdd      8:112  0    2T  0 disk
└─sda    253:2  0    2T  0 mpath
  ├─VG1-root 253:0    0  100G  0 lvm   /
  ├─VG1-home 253:1    0  100G  0 lvm   /home
  └─VG1-data 253:2    0  1.8T  0 lvm   /data
可以看到新创建的虚拟磁盘已经被识别为 /dev/sdx 的形式。需要注意的是，如果该虚拟磁盘需要进行分区操作才能被挂载使用，则需要使用 fdisk 或 parted 等工具进行分区操作。

新建一个 osd 磁盘
ceph orch daemon add osd ceph-mon1:/dev/sdc