RHEL6.5安裝multipath多路徑軟件


一、划zone(以博科光纖交換機為例)

①查看光纖交換機端口狀態

RAC_SW_01:admin> switchshow
Index Port Address Media Speed       State   Proto
==================================================
   0   0   010000   id    N8       Online      FC  F-Port  50:06:01:61:09:60:31:xx 
   1   1   010100   id    N8       Online      FC  F-Port  10:00:00:00:c9:83:76:xx 
   2   2   010200   id    N8       Online      FC  F-Port  10:00:00:00:c9:83:76:xx 
   3   3   010300   id    N8       No_Light    FC  
   4   4   010400   id    N8       Online      FC  F-Port  50:06:01:69:09:60:31:xx 
   5   5   010500   id    N8       No_Light    FC  
   6   6   010600   id    N8       No_Light    FC  
   7   7   010700   id    N8       No_Light    FC  
   8   8   010800   id    N8       No_Light    FC  

②對光纖交換機0、1、2、4號端口創建別名

alicreate "vnx5200_spa1","1,0"
alicreate "node02_1","1,2"
alicreate "node01_1","1,1"
alicreate "vnx5200_spa1","1,4"
alishow可以查看對應端口的別名

③創建zone並綁定對應端口

zonecreate "vnx5200_spa1_node01_1","vnx5200_spa1; node01_1"
zonecreate "vnx5200_spb1_node01_1","vnx5200_spb1; node01_1"
zonecreate "vnx5200_spa1_node02_1","vnx5200_spa1; node02_1"
zonecreate "vnx5200_spb1_node02_1","vnx5200_spb1; node02_1"

④創建配置文件

cfgcreate "sw01_cfg","vnx5200_spa1_node01_1;vnx5200_spb1_node01_1;vnx5200_spa1_node02_1;vnx5200_spb1_node02_1"

如果是在現有的cfg配置文件中添加zone使用如下cfgadd "cfg_file", "zone_name"

cfgadd "sw01_cfg","vnx5200_spa1_node01_1;vnx5200_spb1_node01_1;vnx5200_spa1_node02_1;vnx5200_spb1_node02_1"

⑤保存配置文件

cfgsave

⑥使配置文件生效(每台交換機當前只能一個配置文件生效)

cfgenable "sw01_cfg"

到這一步光纖交換機配置全部完成,另外一台執行相同操作即可。

二、在SAN存儲划分好LUN,設置好對應的HostGroup做好映射關系,不同的廠商有不同的做法,大同小異

三、主機上的相關操作

①查看映射的LUN信息

以RHEL6.5為例,默認做好上面兩步之后,可以使用fdisk -l或者cat /proc/partitions可以看到未做聚合前的物理盤(scisi盤一般以/dev/sd*顯示),一個LUN有多條路徑。

安裝配置多路徑軟件后才能看到聚合盤(聚合后的盤在/dev/mapper/$name目錄下),不同廠商的多路徑軟件顯示的聚合盤名稱不一樣。

擴展:如果直接對未做多路徑的物理盤做分區使用,會導致多條路徑不能負載均衡且只有一塊盤可以讀寫,所以都是對安裝多路徑軟件后的聚合盤做分區來使用的。

RHEL6.5 multipath多路徑顯示如下:

EMC powerpath多路徑顯示如下:

②掃盤、安裝multipath多路徑軟件及配置文件

在不重啟主機的情況下掃盤

[root@yspay-node01 ~]# rpm -qa|grep sg3*
[root@yspay-node01 ~]# rpm -qa|grep sg3_utils
sg3_utils-1.28-12.el6.x86_64
sg3_utils-libs-1.28-12.el6.x86_64
[root@yspay-node01 ~]# rescan-scsi-bus.sh

安裝multipath多路徑軟件
yum install device-mapper*

multipath常用命令
multipath -r (修改multipath.conf配置文件之后重新加載)
multipath -ll (查看多路徑狀態)
multipath -v2 (格式化路徑,檢測路徑,合並路徑)
multipath -v3 (查看多路徑詳情blacklist、whitelist和設備wwid)
multipath -F (刪除現有鏈路)

[root@yspay-node02 ~]# multipath -v2
Sep 08 18:06:34 | /etc/multipath.conf does not exist, blacklisting all devices.
Sep 08 18:06:34 | A sample multipath.conf file is located at
Sep 08 18:06:34 | /usr/share/doc/device-mapper-multipath-0.4.9/multipath.conf
Sep 08 18:06:34 | You can run /sbin/mpathconf to create or modify /etc/multipath.conf
Sep 08 18:06:34 | DM multipath kernel driver not loaded ----DM模塊沒有加載
需要執行如下命令加載DM模塊
---Use the following commands to initialize and start DM for the first time:
# modprobe dm-multipath
# modprobe dm-round-robin
# service multipathd start

# chkconfig --level 2345 multipathd on
# multipath –v2

[root@yspay-node02 ~]# multipath -v2
Sep 08 18:06:34 | /etc/multipath.conf does not exist, blacklisting all devices.
Sep 08 18:06:34 | A sample multipath.conf file is located at
Sep 08 18:06:34 | /usr/share/doc/device-mapper-multipath-0.4.9/multipath.conf
Sep 08 18:06:34 | You can run /sbin/mpathconf to create or modify /etc/multipath.conf
需要配置/etc/multipath.conf,可以從/usr/share/doc/拷貝,參照如下配置:

# multipath.conf written by anaconda

defaults {
        user_friendly_names yes
}
blacklist {
        devnode "^(ram|raw|loop|fd|md|dm-|sr|scd|st)[0-9]*"
        devnode "^hd[a-z]"
        devnode "^dcssblk[0-9]*"
        wwid "*" # 此處開啟表示設置所有設備都不使用多路徑軟件管理
}

blacklist_exceptions {
        # 排除blacklist以外需要使用多路徑軟件管理的設備,映射到主機的LUN,可以使用multipath -v3查看wwid
        wwid "360060160e2b042007a5ba6d44bece711"
        wwid "360060160e2b042000bd016064cece711"
        wwid "360060160e2b04200176ad7954cece711"
}

multipaths {
        multipath {
                 wwid 360060160e2b042007a5ba6d44bece711
          alias vnx5200_gi01_lun00 # 設置別名,命令multipath -ll看到的聚合盤顯示的名字
        }
        multipath {
                 wwid 360060160e2b04200d0990bea4bece711
          alias vnx5200_gi01_lun01
     } 
}

四、針對重啟之后磁盤標識符改變的解決辦法(udev磁盤設備綁定)

1、在multipath.conf中設置alias別名綁定wwid
2、在/etc/udev/rule.d/中配置

五、針對大於2TB的GPT分區

1、首先類似fdisk一樣,先選擇要分區的硬盤,此處為/dev/hdd:
[root@10.10.90.97 ~]# parted /dev/hdd
GNU Parted 1.8.1
Using /dev/hdd
Welcome to GNU Parted! Type 'help' to view a list of commands.

2、選擇了/dev/hdd作為我們操作的磁盤,接下來需要創建一個分區表(在parted中可以使用help命令打印幫助信息):
(parted) mklabel
Warning: The existing disk label on /dev/hdd will be destroyed and all data on this disk will be lost. Do you want to continue?
Yes/No?(警告用戶磁盤上的數據將會被銷毀,詢問是否繼續,我們這里是新的磁盤,輸入yes后回車) yes
New disk label type? [msdos]? (默認為msdos形式的分區,我們要正確分區大於2TB的磁盤,應該使用gpt方式的分區表,輸入gpt后回車)gpt

3、創建好分區表以后,接下來就可以進行分區操作了,執行mkpart命令,分別輸入分區名稱,文件系統和分區 的起止位置
(parted) mkpart
Partition name? []? dp1
File system type? [ext2]? ext3
Start? 0
End? 500GB
如果全部使用End輸入(100%或-1)

4、分好區后可以使用print命令打印分區信息,下面是一個print的樣例
(parted) print
Model: VBOX HARDDISK (ide)
Disk /dev/hdd: 2199GB
Sector size (logical/physical): 512B/512B
Partition Table: gpt
Number Start End Size File system Name Flags
1 17.4kB 500GB 500GB dp1

5、如果分區錯了,可以使用rm命令刪除分區,比如我們要刪除上面的分區,然后打印刪除后的結果
(parted)rm 1 #rm后面使用分區的號碼
(parted) print
Model: VBOX HARDDISK (ide)
Disk /dev/hdd: 2199GB
Sector size (logical/physical): 512B/512B
Partition Table: gpt
Number Start End Size File system Name Flags

6、按照上面的方法把整個硬盤都分好區,下面是一個分完后的樣例
(parted) mkpart
Partition name? []? dp1
File system type? [ext2]? ext3
Start? 0
End? 500GB
(parted) mkpart
Partition name? []? dp2
File system type? [ext2]? ext3
Start? 500GB
End? 2199GB
(parted) print
Model: VBOX HARDDISK (ide)
Disk /dev/hdd: 2199GB
Sector size (logical/physical): 512B/512B
Partition Table: gpt
Number Start End Size File system Name Flags
1 17.4kB 500GB 500GB dp1
2 500GB 2199GB 1699GB dp2

7、由於parted內建的mkfs還不夠完善,所以完成以后我們可以使用quit命令退出parted並使用 系統的mkfs命令對分區進行格式化了,此時如果使用fdisk -l命令打印分區表會出現警告信息,這是正常的
[root@10.10.90.97 ~]# fdisk -l
WARNING: GPT (GUID Partition Table) detected on '/dev/hdd'! The util fdisk doesn't support GPT. Use GNU Parted.
Disk /dev/hdd: 2199.0 GB, 2199022206976 bytes
255 heads, 63 sectors/track, 267349 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Device Boot Start End Blocks Id System
/dev/hdd1 1 267350 2147482623+ ee EFI GPT

[root@10.10.90.97 ~]# mkfs.ext3 /dev/hdd1
[root@10.10.90.97 ~]# mkfs.ext3 /dev/hdd2
[root@10.10.90.97 ~]# mkdir /dp1 /dp2
[root@10.10.90.97 ~]# mount /dev/hdd1 /dp1
[root@10.10.90.97 ~]# mount /dev/hdd2 /dp2


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM