RHEL6.5安装multipath多路径软件

1、划zone(以博科光纤交换机为例)css

①查看光纤交换机端口状态node

RAC_SW_01:admin> switchshow
Index Port Address Media Speed       State   Proto
==================================================
   0   0   010000   id    N8       Online      FC  F-Port  50:06:01:61:09:60:31:xx 
   1   1   010100   id    N8       Online      FC  F-Port  10:00:00:00:c9:83:76:xx 
   2   2   010200   id    N8       Online      FC  F-Port  10:00:00:00:c9:83:76:xx 
   3   3   010300   id    N8       No_Light    FC  
   4   4   010400   id    N8       Online      FC  F-Port  50:06:01:69:09:60:31:xx 
   5   5   010500   id    N8       No_Light    FC  
   6   6   010600   id    N8       No_Light    FC  
   7   7   010700   id    N8       No_Light    FC  
   8   8   010800   id    N8       No_Light    FC  

②对光纤交换机0、一、二、4号端口建立别名app

alicreate "vnx5200_spa1","1,0"
alicreate "node02_1","1,2"
alicreate "node01_1","1,1"
alicreate "vnx5200_spa1","1,4"
alishow能够查看对应端口的别名负载均衡

③建立zone并绑定对应端口ide

zonecreate "vnx5200_spa1_node01_1","vnx5200_spa1; node01_1"
zonecreate "vnx5200_spb1_node01_1","vnx5200_spb1; node01_1"
zonecreate "vnx5200_spa1_node02_1","vnx5200_spa1; node02_1"
zonecreate "vnx5200_spb1_node02_1","vnx5200_spb1; node02_1"oop

④建立配置文件ui

cfgcreate "sw01_cfg","vnx5200_spa1_node01_1;vnx5200_spb1_node01_1;vnx5200_spa1_node02_1;vnx5200_spb1_node02_1"this

若是是在现有的cfg配置文件中添加zone使用以下cfgadd "cfg_file", "zone_name"spa

cfgadd "sw01_cfg","vnx5200_spa1_node01_1;vnx5200_spb1_node01_1;vnx5200_spa1_node02_1;vnx5200_spb1_node02_1"code

⑤保存配置文件

cfgsave

⑥使配置文件生效(每台交换机当前只能一个配置文件生效)

cfgenable "sw01_cfg"

到这一步光纤交换机配置所有完成,另一台执行相同操做便可。

2、在SAN存储划分好LUN,设置好对应的HostGroup作好映射关系,不一样的厂商有不一样的作法,大同小异

3、主机上的相关操做

①查看映射的LUN信息

以RHEL6.5为例,默认作好上面两步以后,可使用fdisk -l或者cat /proc/partitions能够看到未作聚合前的物理盘(scisi盘通常以/dev/sd*显示),一个LUN有多条路径。

安装配置多路径软件后才能看到聚合盘(聚合后的盘在/dev/mapper/$name目录下),不一样厂商的多路径软件显示的聚合盘名称不同。

扩展:若是直接对未作多路径的物理盘作分区使用,会致使多条路径不能负载均衡且只有一块盘能够读写,因此都是对安装多路径软件后的聚合盘作分区来使用的。

RHEL6.5 multipath多路径显示以下:

EMC powerpath多路径显示以下:

②扫盘、安装multipath多路径软件及配置文件

在不重启主机的状况下扫盘

[root@yspay-node01 ~]# rpm -qa|grep sg3*
[root@yspay-node01 ~]# rpm -qa|grep sg3_utils
sg3_utils-1.28-12.el6.x86_64
sg3_utils-libs-1.28-12.el6.x86_64
[root@yspay-node01 ~]# rescan-scsi-bus.sh

安装multipath多路径软件
yum install device-mapper*

multipath经常使用命令
multipath -r (修改multipath.conf配置文件以后从新加载)
multipath -ll (查看多路径状态)
multipath -v2 (格式化路径,检测路径,合并路径)
multipath -v3 (查看多路径详情blacklist、whitelist和设备wwid)
multipath -F (删除现有链路)

[root@yspay-node02 ~]# multipath -v2
Sep 08 18:06:34 | /etc/multipath.conf does not exist, blacklisting all devices.
Sep 08 18:06:34 | A sample multipath.conf file is located at
Sep 08 18:06:34 | /usr/share/doc/device-mapper-multipath-0.4.9/multipath.conf
Sep 08 18:06:34 | You can run /sbin/mpathconf to create or modify /etc/multipath.conf
Sep 08 18:06:34 | DM multipath kernel driver not loaded ----DM模块没有加载
须要执行以下命令加载DM模块
---Use the following commands to initialize and start DM for the first time:
# modprobe dm-multipath
# modprobe dm-round-robin
# service multipathd start

# chkconfig --level 2345 multipathd on
# multipath –v2

[root@yspay-node02 ~]# multipath -v2
Sep 08 18:06:34 | /etc/multipath.conf does not exist, blacklisting all devices.
Sep 08 18:06:34 | A sample multipath.conf file is located at
Sep 08 18:06:34 | /usr/share/doc/device-mapper-multipath-0.4.9/multipath.conf
Sep 08 18:06:34 | You can run /sbin/mpathconf to create or modify /etc/multipath.conf
须要配置/etc/multipath.conf,能够从/usr/share/doc/拷贝,参照以下配置:

# multipath.conf written by anaconda

defaults {
        user_friendly_names yes
}
blacklist {
        devnode "^(ram|raw|loop|fd|md|dm-|sr|scd|st)[0-9]*"
        devnode "^hd[a-z]"
        devnode "^dcssblk[0-9]*"
        wwid "*" # 此处开启表示设置全部设备都不使用多路径软件管理
}

blacklist_exceptions {
        # 排除blacklist之外须要使用多路径软件管理的设备,映射到主机的LUN,可使用multipath -v3查看wwid
        wwid "360060160e2b042007a5ba6d44bece711"
        wwid "360060160e2b042000bd016064cece711"
        wwid "360060160e2b04200176ad7954cece711"
}

multipaths {
        multipath {
                 wwid 360060160e2b042007a5ba6d44bece711
          alias vnx5200_gi01_lun00 # 设置别名,命令multipath -ll看到的聚合盘显示的名字
        }
        multipath {
                 wwid 360060160e2b04200d0990bea4bece711
          alias vnx5200_gi01_lun01
     } 
}

4、针对重启以后磁盘标识符改变的解决办法(udev磁盘设备绑定)

一、在multipath.conf中设置alias别名绑定wwid
二、在/etc/udev/rule.d/中配置

5、针对大于2TB的GPT分区

一、首先相似fdisk同样,先选择要分区的硬盘,此处为/dev/hdd:
[root@10.10.90.97 ~]# parted /dev/hdd
GNU Parted 1.8.1
Using /dev/hdd
Welcome to GNU Parted! Type 'help' to view a list of commands.

二、选择了/dev/hdd做为咱们操做的磁盘,接下来须要建立一个分区表(在parted中可使用help命令打印帮助信息):
(parted) mklabel
Warning: The existing disk label on /dev/hdd will be destroyed and all data on this disk will be lost. Do you want to continue?
Yes/No?(警告用户磁盘上的数据将会被销毁,询问是否继续,咱们这里是新的磁盘,输入yes后回车) yes
New disk label type? [msdos]? (默认为msdos形式的分区,咱们要正确分区大于2TB的磁盘,应该使用gpt方式的分区表,输入gpt后回车)gpt

三、建立好分区表之后,接下来就能够进行分区操做了,执行mkpart命令,分别输入分区名称,文件系统和分区 的起止位置
(parted) mkpart
Partition name? []? dp1
File system type? [ext2]? ext3
Start? 0
End? 500GB
若是所有使用End输入(100%或-1)

四、分好区后可使用print命令打印分区信息,下面是一个print的样例
(parted) print
Model: VBOX HARDDISK (ide)
Disk /dev/hdd: 2199GB
Sector size (logical/physical): 512B/512B
Partition Table: gpt
Number Start End Size File system Name Flags
1 17.4kB 500GB 500GB dp1

五、若是分区错了,可使用rm命令删除分区,好比咱们要删除上面的分区,而后打印删除后的结果
(parted)rm 1 #rm后面使用分区的号码
(parted) print
Model: VBOX HARDDISK (ide)
Disk /dev/hdd: 2199GB
Sector size (logical/physical): 512B/512B
Partition Table: gpt
Number Start End Size File system Name Flags

六、按照上面的方法把整个硬盘都分好区,下面是一个分完后的样例
(parted) mkpart
Partition name? []? dp1
File system type? [ext2]? ext3
Start? 0
End? 500GB
(parted) mkpart
Partition name? []? dp2
File system type? [ext2]? ext3
Start? 500GB
End? 2199GB
(parted) print
Model: VBOX HARDDISK (ide)
Disk /dev/hdd: 2199GB
Sector size (logical/physical): 512B/512B
Partition Table: gpt
Number Start End Size File system Name Flags
1 17.4kB 500GB 500GB dp1
2 500GB 2199GB 1699GB dp2

七、因为parted内建的mkfs还不够完善,因此完成之后咱们可使用quit命令退出parted并使用 系统的mkfs命令对分区进行格式化了,此时若是使用fdisk -l命令打印分区表会出现警告信息,这是正常的
[root@10.10.90.97 ~]# fdisk -l
WARNING: GPT (GUID Partition Table) detected on '/dev/hdd'! The util fdisk doesn't support GPT. Use GNU Parted.
Disk /dev/hdd: 2199.0 GB, 2199022206976 bytes
255 heads, 63 sectors/track, 267349 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Device Boot Start End Blocks Id System
/dev/hdd1 1 267350 2147482623+ ee EFI GPT

[root@10.10.90.97 ~]# mkfs.ext3 /dev/hdd1
[root@10.10.90.97 ~]# mkfs.ext3 /dev/hdd2
[root@10.10.90.97 ~]# mkdir /dp1 /dp2
[root@10.10.90.97 ~]# mount /dev/hdd1 /dp1
[root@10.10.90.97 ~]# mount /dev/hdd2 /dp2