/etc/multipath.conf
Mar 10 19:18:28 | DM multipath kernel driver not loaded ----DM 模块
没有加载
如果模块没有加载成功请使用下列命初始化 DM,或重启系统 ---Use the following commands to initialize and start DM for the first time: # modprobe dm-multipath
在 Linux 主机中也必须安装 Dell PowerVault MD Storage Manager 软件，否则会造成 控制器自动切换问题。Linux 主机不需要配置同网段 IP，只要光纤连接后使用软件的自动搜 索即可。
RAID 控制器模块网络配置可使用 DHCP 服务器（默认设置）进行分配。但是，如果 DHCP 服 务器在 150 秒内不可用，RAID 控制器模块会分配静态 IP 地址。初次连接或每次断开后， 都需要等待 150 秒才能 ping 通。
Linux6.5_x64+oracle 11.2.0.4+RoseHA9.0
一、设备信息及规划
Dell R730 服务器： 2*E5-2643 v3 3.4GHz 6C/4*16G DDR4 memory/3* 300GB 15K RPM SAS/Raid /2*2Port1000M/dual power supply/DVD/2*single port FC HBA card/ 3year overseas warranty 其中磁盘 0、1 做 Raid1,磁盘 2 做热备 Dell MD3800f： 7*600GB 15K RPM SAS/2*16G FC,2U MD38xxF,8G CF cache,4*5m fiber/ 3year overseas warranty 其中磁盘 0、1、2、3、4、5 做 Raid10，磁盘 6 做热备 Lun1=1.7T 做数据存储,Lun2=3G 做 oracle 仲裁,Lun3=2G 预留 BOSS 仲裁。
开启服务 [root@sms01 Server]# service multipathd start
multipath 基本操作命令 # /etc/init.d/multipathd start # multipath -F # multipath -v2
#开启 mulitipath 服务 #删除现有没有使用的路径 #格式化路径，检测路径，合并路径
查看包的安装情况 [root@sms01 Server]# rpm -q device-mapper-* package device-mapper-1.02.63-4.el5.i386.rpm is not installed package device-mapper-1.02.63-4.el5.x86_64.rpm is not installed package device-mapper-event-1.02.63-4.el5.x86_64.rpm is not installed package device-mapper-multipath-0.4.7-46.el5.x86_64.rpm is not installed
为磁盘组分配热备用物理磁盘
6、添加主机和主机组
选择存储阵列，在右键选项中选择定义主机 填写主机名
选择 FC 接口类型和主机端口标识，可通过下列命令确定 FC HBA 卡的 WWN 号 [root@BOSS1 ~]# cat /sys/class/fc_host/host1/port_name 0x21000024ff1111ca [root@BOSS1 ~]# cat /sys/class/fc_host/host2/port_name 0x21000024ff1111d0
4、创建并初始化虚拟磁盘
创建 Lun1 用于数据存储，Lun2 用于 oracle 仲裁，Lun3 用于 jboss 仲裁，留出一部分容量 不分配。新的虚拟磁盘初始化需要大概 2 个小时，选中虚拟磁盘后可以在右侧看到进度。
5、创建热备盘
选择“硬件”标签，右键点击未使用的磁盘，选择“热备用容量”，选择“手动分配单个物 理盘”。
# modprobe dm-round-robin # service multipathd start # multipath -v2
初始化完了之后再通过 multipath -ll 命令查看是否加载成功
[root@liujing ~]# multipath -ll
Mar 10 19:21:14 | /etc/multipath.conf does not exist, blacklisting all
/etc/multipath.conf
DM multipath kernel driver not loaded ----这个提示没了说明 DM 模块已
加载成功。
从上面的提示可以看到，DM 模块是成功加载，但是/etc/下没有 multipath.conf
配置文件
编辑配置文件
[root@sms01 Server]# vi /etc/multipath.conf 在 linux6.5 中需要手动创建
高亮选中已创建的磁盘组，按 F2，选择弹出菜单里的“Manage Ded.HS”
选中对应的热备盘
热备盘添加成功 清除磁盘数据 将 Raid 信息清除，然后重建 Raid 信息，选中 ID:0 的虚拟磁盘后按 F2 在选项中 选择 Fast Init 就能清除数据。
2、HBA 卡安装注意事项
在安装 HBA 卡时就记住 WWN 号码和端口顺序，MD3800f 存储每次刷新时显示 顺序都会不一样。
双机中，如果映射 3 个卷，可能在主机是 dm-0，dm-1，dm-2 的顺序，而在另一 台是 dm-1，dm-0，dm-2 的顺序。为了保证双机的设备名一致，需在两台机器的 multipath.conf 配置文件中增加 wwid 对应名称的配置。
检测并查看 WWN 号 [root@BOSS1 Packages]# multipath -v2 [root@BOSS1 Packages]# multipath -ll mpathd (3600a0980009883c8000001fd574c51d9) dm-2 DELL,MD38xxf size=2.0G features='0' hwhandler='0' wp=rw |-+- policy='round-robin 0' prio=1 status=active | `- 1:0:0:3 sdd 8:48 active ready running `-+- policy='round-robin 0' prio=1 status=enabled
设置开机自启动 [root@sms01 Server]# chkconfig multipathd on
接着通过命令：multipath –ll 查看多路径状态查看模块是否加载成功
[root@liujing ~]# multipath –ll 查看多路径状态
Mar 10 19:18:28 | /etc/multipath.conf does not exist, blacklisting all
devices.
Mar 10 19:21:14 | A sample multipath.conf file is located at
Mar
10
19:21:14
|
/usr/share/doc/device-mapper-multipath-0.4.9/multipath.conf
Mar 10 19:21:14 | You can run /sbin/mpathconf to create or modify
此文件
#cp
/usr/share/doc/device-mapper-multipath-0.4.9/multipath.conf
/etc/multipath.conf
将 blacklist {
devnode "*"
}
注释掉
并确保下面不被注释 defaults {
user_friendly_names yes }
3、linux 6.5 安装（略）
三、Dell MD3800f 初始安装配置 1、连接管理网口
在电脑中安装 Dell PowerVault MD Storage Manager，开机并连接到管理网口，将电 脑的 IP 设置成与 192.168.129.101 同一网段的 IP，通过 Dell PowerVault MD Storage Manager 连接到 DELL MD3800f 测试。
100 headபைடு நூலகம், 62 sectors/track, 1014 cylinders
将 MD3800f 的卷映射到主机上以后，可以看到六块盘，需要通过 linux 自带的多 路径软件聚合成三块。 主要用到下面这两个包 device-mapper-1.02.63-4.el5.x86_64.rpm device-mapper-multipath-0.4.7-46.el5.x86_64.rpm
devices.
Mar 10 19:18:28 | A sample multipath.conf file is located at
Mar
10
19:18:28
|
/usr/share/doc/device-mapper-multipath-0.4.9/multipath.conf
Mar 10 19:18:28 | You can run /sbin/mpathconf to create or modify
二、R730 安装配置 1、开机设置 Raid1