宏杉存儲(chǔ)Ubuntu環(huán)境下客戶(hù)端軟件安裝配置指南V1.3

1、 Ubuntu 環(huán)境下客戶(hù)端軟件安裝配置指南（僅供內(nèi)部使用） 杭州宏杉科技有限公司 版權(quán)所有 侵權(quán)必究目錄Ubuntu 環(huán)境下客戶(hù)端軟件安裝配置指南 . i 第1章 概述 . . 1-11.1 本文適用范圍 . 1-1 1.2 客戶(hù)端軟件 . 1-1 1.3 安裝說(shuō)明 . . 1-11.3.1 操作系統(tǒng)版本 . . 1-1 1.3.2 其他要求 . 1-1第2章 網(wǎng)絡(luò)配置 . 2-12.1 配置網(wǎng)卡信息 . 2-1第3章 安裝和配置iSCSI Initiator軟件 . 3-13.1 安裝iSCSI Initiator軟件 . . 3-1 3.2 卸載iSCSI Initiator軟件 . .

2、 3-2 3.3 配置iSCSI Initiator軟件 . . 3-2第4章 設(shè)置CHAP 認(rèn)證 . 4-14.1 單向CHAP 認(rèn)證 . . 4-1 4.2 雙向CHAP 認(rèn)證 . . 4-3第5章 安裝和配置multipath 軟件 . . 5-15.1 安裝multipath 軟件 . 5-1 5.2 卸載multipath 軟件 . 5-2 5.3 配置multipath 軟件 . 5-35.3.1 在生成多路徑設(shè)備時(shí)忽略邏輯磁盤(pán) . 5-3 5.3.2 編輯多路徑配置文件 . . 5-3 5.3.3 使用多路徑設(shè)備 . 5-5第6章 連接存儲(chǔ)設(shè)備 . 6-16.1 iSCSI單路徑

3、 . 6-1 6.2 iSCSI多路徑 . 6-2 6.3 FC單路徑 . . 6-5 6.4 FC多路徑 . . 6-7第7章 使用存儲(chǔ)資源 . 7-17.1 相關(guān)說(shuō)明 . . 7-17.1.1 設(shè)備名稱(chēng) . 7-1 7.1.2 分區(qū)方式 . 7-1 7.2 修改客戶(hù)端磁盤(pán)超時(shí)時(shí)間 . 7-2 7.3 創(chuàng)建分區(qū)和文件系統(tǒng) . 7-27.4 設(shè)置文件系統(tǒng)自動(dòng)掛載 . . 7-2 7.5 卸載文件系統(tǒng) . 7-3第8章 常見(jiàn)問(wèn)題 . 8-1修訂記錄 第1章 概述本章主要描述了以下內(nèi)容： 本文使用范圍 客戶(hù)端軟件 安裝說(shuō)明1.1 本文適用范圍1.2 客戶(hù)端軟件本文主要包括在ubuntu 系統(tǒng)下安裝

4、和配置下列軟件的詳細(xì)步驟： open-iscsi multipath-tools1.3 安裝說(shuō)明1.3.1 操作系統(tǒng)版本操作系統(tǒng)內(nèi)核版本及平臺(tái)信息： 操作系統(tǒng)版本號(hào)： 1.3.2 其他要求1. 以root 用戶(hù)登錄系統(tǒng)； 1-22. 確保系統(tǒng)及存儲(chǔ)設(shè)備運(yùn)行正常，且網(wǎng)絡(luò)互通；請(qǐng)參考 第2章 網(wǎng)絡(luò)配置。補(bǔ)充說(shuō)明：建議按照配置方法順序逐步操作，待配置完成后請(qǐng)使用ping 命令進(jìn)行查看，確保能夠連通且沒(méi)有丟包現(xiàn)象發(fā)生。3. 安裝iSCSI initiator和multipath 軟件時(shí)需要使用安裝光盤(pán)， 安裝之前請(qǐng)將對(duì)應(yīng)版本的光盤(pán)插入服務(wù)器中，并修改etc/apt/sources.list，將其中的本

5、地源取消注釋?zhuān)J(rèn)為注釋?zhuān)?，如下圖： 補(bǔ)充說(shuō)明：請(qǐng)使用與系統(tǒng)版本信息對(duì)應(yīng)的光盤(pán)。第2章 網(wǎng)絡(luò)配置本章節(jié)描述了在ubuntu12.04/ubuntu14.10環(huán)境下安裝及配置網(wǎng)絡(luò)的詳細(xì)步驟，主要包括以下內(nèi)容：配置網(wǎng)卡信息2.1 配置網(wǎng)卡信息1. 編輯/etc/network/interfaces 添加網(wǎng)卡信息，如本機(jī)需添加與存儲(chǔ)業(yè)務(wù)口同一網(wǎng)段的eth1的IP ：192.168.5.121，則在配置文件后添加如下內(nèi)容： 2. 重啟網(wǎng)絡(luò)服務(wù)編輯網(wǎng)卡信息后需要重啟與之對(duì)應(yīng)的網(wǎng)卡，如上文添加的eth1的信息，則需要重啟eth1，方法如下（在ubuntu14.10中不再支持service 重啟和停止網(wǎng)絡(luò)，

6、需通過(guò)使用ifdown & ifup來(lái)實(shí)現(xiàn)相應(yīng)的操作）： 2-23. 查看配置IP第3章 安裝和配置iSCSI Initiator軟件本章節(jié)描述了在ubuntu12.04/ubuntu14.10環(huán)境下安裝及配置iSCSI initiator 的詳細(xì)步驟，主要包括以下內(nèi)容： 安裝iSCSI initiator軟件 卸載iSCSI initiator軟件 配置iSCSI initiator軟件3.1 安裝iSCSI Initiator軟件1. 查詢(xún)是否安裝initiator 軟件 2. 安裝open-iscsi 3-2補(bǔ)充說(shuō)明： 3.2 卸載iSCSI Initiator軟件1. 卸載op

7、en-iscsi 2. 查詢(xún)是否卸載完成3.3 配置iSCSI Initiator軟件1. 編輯iscsid.conf 文件 3-3 補(bǔ)充說(shuō)明：?jiǎn)温窂竭B接時(shí)可不修改node.session.timeo.replacement_timeout。2. 重啟open-iscsi 服務(wù) 3. 查看initiator 名稱(chēng) 4. 修改initiator 名稱(chēng) 3-4補(bǔ)充說(shuō)明：initiator 名稱(chēng)是服務(wù)器的唯一身份標(biāo)識(shí)，建議使用默認(rèn)的initiator 名稱(chēng)； 在一個(gè)IP SAN網(wǎng)絡(luò)中，嚴(yán)禁兩臺(tái)或多臺(tái)服務(wù)器使用相同的initiator 名稱(chēng)。 5. 發(fā)現(xiàn)Target補(bǔ)充說(shuō)明：其中命令中輸入的192.1

8、68.71.88:3260是存儲(chǔ)的IP 和端口（端口可以省略，默認(rèn)即為3260），實(shí)際使用時(shí)改成所需的IP 。6. 連接target1）逐條登錄。 2）一次性連接指定Target 的所有路徑。 3）一次性連接所有Target 的所有路徑。3-5補(bǔ)充說(shuō)明：條目1）、2）、3）對(duì)應(yīng)的內(nèi)容為連接target 的三種方式，請(qǐng)根據(jù)實(shí)際需求使用相應(yīng)命令； 命令中iqn.2010-.macrosan.target:2是Target name，192.168.71.88表示存儲(chǔ)業(yè)務(wù)口的IP 。最后的-l （英文字母中小寫(xiě)的L ）是表示login 的意思。7. 新增target1 發(fā)現(xiàn)新增target 。2 連

9、接新增target 。8. 取消target 連接1）逐條取消。 2）取消指定target 連接。 3）取消所有target 連接。 補(bǔ)充說(shuō)明：條目1）、2）、3）對(duì)應(yīng)的內(nèi)容為取消連接target 的三種方式，請(qǐng)根據(jù)實(shí)際需求使用相應(yīng)命令。 9. 刪除target 信息1）永久刪除某條target 信息。 2）永久刪除所有Target 。補(bǔ)充說(shuō)明：條目1）、2）對(duì)應(yīng)的內(nèi)容為刪除target 的兩種方式，請(qǐng)根據(jù)實(shí)際需求使用相應(yīng)命令；刪除target 之前，需要先執(zhí)行第8步(取消target 連接 。第4章 設(shè)置CHAP 認(rèn)證本章節(jié)描述了在ubuntu12.04/ubuntu14.10環(huán)境下設(shè)置CH

10、AP 認(rèn)證的詳細(xì)步驟，主要包括以下內(nèi)容： 單向CHAP 認(rèn)證 雙向CHAP 認(rèn)證補(bǔ)充說(shuō)明：1、CHAP 認(rèn)證只適用于iSCSI 協(xié)議，不適用于FC 協(xié)議。iSCSI initiator和target 之間可以通過(guò)CHAP 協(xié)議相互認(rèn)證，從而提高安全性。2、CHAP 認(rèn)證的initiator/target用戶(hù)密碼必須滿(mǎn)足：有效字符范圍a-zA-Z0-9.-_:,!#&%*(，12-16個(gè)字符。initiator CHAP認(rèn)證和target CHAP認(rèn)證的用戶(hù)密碼不能相同。 3、如用戶(hù)無(wú)明確要求使用CHAP 認(rèn)證，則無(wú)需設(shè)置。4.1 單向CHAP 認(rèn)證1. 在服務(wù)器端，啟用CHAP 認(rèn)證，

11、并設(shè)置initiator 用戶(hù)名、密碼。 2. 在存儲(chǔ)端，開(kāi)啟initiator 的CHAP 認(rèn)證，并設(shè)置initiator 用戶(hù)名、密碼：1 選擇【客戶(hù)端】>>【管理Initiator 】。 4-22 選中對(duì)應(yīng)的Initiator ，單擊【修改】。3 啟用CHAP 認(rèn)證，并設(shè)置initiator 用戶(hù)名、密碼。 補(bǔ)充說(shuō)明：此處用戶(hù)名和密碼分別為iscsid.conf 中的node.session.auth.username 和 node.session.auth.password 對(duì)應(yīng)的內(nèi)容。3. 在服務(wù)器端，依次執(zhí)行發(fā)現(xiàn)target 、連接target 。如果設(shè)置CHAP 認(rèn)證

12、之前，已經(jīng)連接target ；那么需要依次執(zhí)行發(fā)現(xiàn)target 、取消target 連接、連接target ，從而使CHAP 認(rèn)證生效。詳細(xì)步驟請(qǐng)查看第3章 安裝和配置iSCSI Initiator軟件。4.2 雙向CHAP 認(rèn)證1. 在服務(wù)器端，啟用CHAP 認(rèn)證，并設(shè)置initiator 用戶(hù)名、密碼。 2. 在存儲(chǔ)端，開(kāi)啟initiator 的CHAP 認(rèn)證，并設(shè)置initiator 用戶(hù)名、密碼。1 選擇【客戶(hù)端】>>【管理Initiator 】。 2 選中對(duì)應(yīng)的Initiator ，單擊【修改】。 3 啟用CHAP 認(rèn)證，并設(shè)置initiator 用戶(hù)名、密碼。 補(bǔ)充說(shuō)明

13、：此處用戶(hù)名和密碼分別為iscsid.conf 中的node.session.auth.username 和node.session.auth.password 對(duì)應(yīng)的內(nèi)容。4 在存儲(chǔ)端，開(kāi)啟target 的CHAP 認(rèn)證，并設(shè)置target 用戶(hù)名、密碼。 補(bǔ)充說(shuō)明：此處用戶(hù)名和密碼分別為iscsid.conf 中的node.session.auth.username_in和node.session.auth.password_in對(duì)應(yīng)的內(nèi)容。3. 在服務(wù)器端，依次執(zhí)行發(fā)現(xiàn)target 、連接target 。如果設(shè)置CHAP 認(rèn)證之前，已經(jīng)連接target ；那么需要依次執(zhí)行發(fā)現(xiàn)target

14、 、取消target 連接、連接target ，從而使CHAP 認(rèn)證生效。詳細(xì)步驟請(qǐng)查看第3章 安裝和配置iSCSI Initiator軟件。第5章 安裝和配置multipath 軟件本章節(jié)描述了在ubuntu12.04/ubuntu12.04環(huán)境下安裝及配置multipath 的詳細(xì)步驟，主要包括以下內(nèi)容： 安裝multipath 軟件 卸載multipath 軟件 配置multipath 軟件5.1 安裝multipath 軟件1. 查詢(xún)是否安裝multipath 軟件 2. 安裝multipath-tools 補(bǔ)充說(shuō)明：5.2 卸載multipath 軟件1. 卸載multipath-t

15、ools 2. 查詢(xún)是否卸載完成 5.3 配置multipath 軟件5.3.1 在生成多路徑設(shè)備時(shí)忽略邏輯磁盤(pán)重要說(shuō)明：有些機(jī)器在其內(nèi)部磁盤(pán)中含有本地SCSI 卡。不建議在這些設(shè)備中使用DM-Multipath 。另外，盡管可以使用devnode 設(shè)置將/dev/sda等磁盤(pán)設(shè)備列入黑名單，但不能確保重啟后/dev/sda仍是同一個(gè)名稱(chēng)，可以使用對(duì)應(yīng)設(shè)備的WWID 并將其列入黑名單；特別地，當(dāng)設(shè)備中還有多個(gè)需要忽略的磁盤(pán)設(shè)備時(shí)，也要將其加入黑名單中。其他情況：如虛擬機(jī)環(huán)境中不能查詢(xún)到系統(tǒng)磁盤(pán)的WWID 名稱(chēng)，設(shè)置時(shí)請(qǐng)使用設(shè)備名稱(chēng)，如：blacklist devnode "sda$&

16、quot;以下步驟顯示如何在配置多路徑時(shí)修改多路徑配置文件來(lái)忽略對(duì)應(yīng)的磁盤(pán)。1. 查看非多路徑設(shè)備的WWID 5.3.2 編輯多路徑配置文件 product "LU"path_grouping_policy group_by_prioprio aluarr_min_io 1getuid_callout "/lib/udev/scsi_id -whitelisted -device=/dev/%n" path_checker turpath_selector "round-robin 0"hardware_handler "0

17、"failback 15rr_weight prioritiesno_path_retry 30multipathsmultipathwwid 3600b3423ba8b21cd733bdeadcd0000dcalias mpatha補(bǔ)充說(shuō)明：如果沒(méi)有multipath.conf 文件，直接使用# vi /etc/multipath.conf創(chuàng)建即可，也可以使用# cp /usr/share/doc/multipath-tools/examples/multipath.conf.synthetic /etc/multipath.conf從系統(tǒng)中復(fù)制。其中：user_friendly_

18、names：顯示存儲(chǔ)設(shè)備廠商polling_interval：路徑監(jiān)測(cè)間隔時(shí)間，全局參數(shù)，對(duì)每條路徑都有效checker_timeout： 超時(shí)檢查queue_without_daemon：指定 在關(guān)閉multipathd 守護(hù)進(jìn)程后，是否禁用對(duì)所有設(shè)備的查詢(xún) flush_on_last_del：指定 在刪除某設(shè)備的最后一條路徑后，multipathd 守護(hù)進(jìn)程是否禁用對(duì)該設(shè)備的查詢(xún)vendor ：LUN 的制造商product ：產(chǎn)品的IDpath_grouping_policy：選擇路徑的方式prio ： 獲取路徑的優(yōu)先級(jí)rr_min_io：當(dāng)前路徑組中的切換I/O閾值getuid_cal

19、lout：獲取LUN 的scsi_idpath_checker：檢查路徑的方式path_selector：路徑的工作方式hardware_handler：指定當(dāng)路徑切換或I/O錯(cuò)誤時(shí)的行為failback ：路徑切換的時(shí)間（秒）rr_weight：設(shè)置路徑權(quán)限no_path_retry：路徑丟失時(shí)，一直等待直到路徑恢復(fù)注意：multipath.conf 文件中的prio 值必須為alua ，rr_min_io值必須為1。5.3.3 使用多路徑設(shè)備1. 加載dm-multipath 模塊 2. 查看加載的dm-multipath 模塊 3. 重啟multipath-tools 服務(wù) 4. 查看多

20、路徑狀態(tài)第6章 連接存儲(chǔ)設(shè)備本章節(jié)描述了在ubuntu12.04/ubuntu14.10環(huán)境下連接存儲(chǔ)設(shè)備的詳細(xì)步驟，主要包括以下內(nèi)容： iSCSI 單路徑 iSCSI 多路徑 FC 單路徑 FC 多路徑6.1 iSCSI單路徑1. 查看open-iscsi 狀態(tài) 如果open-iscsi 沒(méi)有運(yùn)行，請(qǐng)參考第3章 安裝和配置iSCSI Initiator軟件。2. 使用GUI 配置存儲(chǔ)端使用GUI 建立客戶(hù)端、關(guān)聯(lián)initiator 、創(chuàng)建默認(rèn)的target 以及關(guān)聯(lián)LUN 。詳細(xì)步驟略。 補(bǔ)充說(shuō)明：關(guān)聯(lián)initiator 時(shí)需要使用initiator 名稱(chēng)，請(qǐng)參考3.3 配置iSCSI In

21、itiator軟件。3. 發(fā)現(xiàn)Target 4. 建立I-T 連接 6-25. 查看登錄狀態(tài)補(bǔ)充說(shuō)明：此步驟非必須，如需要求存儲(chǔ)資源隨服務(wù)器重啟自動(dòng)掛載，需要使用此步驟檢查iscsi 是否隨開(kāi)機(jī)自動(dòng)登陸，當(dāng)node.startup = automatic時(shí)iscsi 能夠自動(dòng)登陸，否則將造成存儲(chǔ)不能正常掛 載。6. 查看存儲(chǔ)資源 6.2 iSCSI多路徑1. 查看open-iscsi 狀態(tài) 6-3如果open-iscsi 沒(méi)有運(yùn)行，請(qǐng)參考第3章 安裝和配置iSCSI Initiator軟件。2. 使用GUI 配置存儲(chǔ)端使用GUI 建立客戶(hù)端、關(guān)聯(lián)initiator 、創(chuàng)建默認(rèn)的target 以

22、及關(guān)聯(lián)LUN 。詳細(xì)步驟略。 補(bǔ)充說(shuō)明：關(guān)聯(lián)initiator 時(shí)需要使用initiator 名稱(chēng)，請(qǐng)參考3.3 配置 iSCSI Initiator軟件。3. 發(fā)現(xiàn)Target4. 建立I-T 連接 5. 查看登錄狀態(tài) 6-4補(bǔ)充說(shuō)明：此步驟非必須，如需要求存儲(chǔ)資源隨服務(wù)器重啟自動(dòng)掛載，需要使用此步驟檢查iscsi 是否隨開(kāi)機(jī)自動(dòng)登陸，當(dāng)node.startup = automatic時(shí)iscsi 能夠自動(dòng)登陸，否則將造成存儲(chǔ)不能正常掛載。6. 查看存儲(chǔ)資源7. 安裝配置多路徑詳見(jiàn)第5章 安裝和配置multipath 軟件。6-5 8. 查看多路徑狀態(tài)補(bǔ)充說(shuō)明：如果沒(méi)有正常顯示上述內(nèi)容，請(qǐng)使

23、用# multipath -F清除多路徑設(shè)備映射緩存，然后使用multipath v 3重新登陸。9. 故障切換時(shí)間 6.3 FC單路徑1. 檢查HBA 卡 補(bǔ)充說(shuō)明：目前HBA 卡大部分為“Qlogic ”和“Emulex ”出品，另外HBA 卡設(shè)備通常還包括“Fibre Channel ”字樣，上面例子中列出的是Qlogic HBA卡。 如果沒(méi)有安裝，請(qǐng)參考HBA 卡原廠相關(guān)文檔安裝。2. 查詢(xún)WWN 號(hào) 6-6補(bǔ)充說(shuō)明：通常Emulex 的HBA 的WWN 的第一個(gè)數(shù)字為1，Qlogic 的HBA 的WWN 的第一個(gè)數(shù)字為2。3. 配置ZONE在FC 交換機(jī)上，將存儲(chǔ)控制器上與交換機(jī)相連

24、的端口，和服務(wù)器上與交換機(jī)相連的端口劃分到同一個(gè)ZONE 中，并在存儲(chǔ)端使用/odsp/bin/odsp-cli進(jìn)入CLI ，在CLI 中使用“client target queryportlist ”命令查看配置是否正確。 4. 使用GUI 配置存儲(chǔ)端使用GUI 建立客戶(hù)端、關(guān)聯(lián) initiator 、創(chuàng)建默認(rèn)的target 以及關(guān)聯(lián)LUN ，詳細(xì)步驟省略。5. 查看存儲(chǔ)資源 6-76.4 FC多路徑 1. 檢查HBA 卡補(bǔ)充說(shuō)明：目前HBA 卡大部分為“Qlogic ”和“Emulex ”出品，另外HBA 卡設(shè)備通常還包括“Fibre Channel ”字樣，上面例子中列出的是Qlogic

25、 HBA卡。 如果沒(méi)有安裝，請(qǐng)參考HBA 卡原廠相關(guān)文檔安裝。2. 查詢(xún)WWN 號(hào) 6-8補(bǔ)充說(shuō)明：通常Emulex 的HBA 的WWN 的第一個(gè)數(shù)字為1，Qlogic 的HBA 的WWN 的第一個(gè)數(shù)字為2。3. 配置ZONE在FC 交換機(jī)上，將存儲(chǔ)控制器上與交換機(jī)相連的端口，和服務(wù)器上與交換機(jī)相連的端口劃分到同一個(gè)ZONE 中，并在存儲(chǔ)端使用/odsp/bin/odsp-cli進(jìn)入CLI ，在CLI 中使用“client target queryportlist ”命令查看配置是否正確。 4. 使用GUI 配置存儲(chǔ)端 使用GUI 建立客戶(hù)端、關(guān)聯(lián)initiator 、創(chuàng)建默認(rèn)的target

26、以及關(guān)聯(lián)LUN ，詳細(xì)步驟省略。5. 查看存儲(chǔ)資源 6-96. 安裝配置多路徑詳見(jiàn)第5章 安裝和配置multipath 軟件。 7. 查看多路徑狀態(tài)補(bǔ)充說(shuō)明：如果沒(méi)有正常顯示上述內(nèi)容，請(qǐng)使用# multipath F 清除多路徑設(shè)備映射緩存，然后使用multipath v 3重新登陸。8. 故障切換時(shí)間 第7章 使用存儲(chǔ)資源本章節(jié)描述了在ubuntu12.04/ubuntu14.10環(huán)境下使用存儲(chǔ)資源的詳細(xì)步驟，主要包括以下內(nèi)容： 相關(guān)說(shuō)明 創(chuàng)建分區(qū)和文件系統(tǒng) 設(shè)置文件系統(tǒng)自動(dòng)掛載 卸載文件系統(tǒng)7.1 相關(guān)說(shuō)明7.1.1 設(shè)備名稱(chēng)1. sda-z 使用單路徑連接時(shí)的設(shè)備名稱(chēng)，其路徑為/dev/

27、sda-z 。2. mpatha-z|0-9使用多路徑連接時(shí)的設(shè)備名稱(chēng)，其路徑為/dev/mapper/mpatha-z|0-9，本章節(jié)以該設(shè)備名稱(chēng)為例。 補(bǔ)充說(shuō)明：用multipath 生成映射后，會(huì)在/dev目錄下產(chǎn)生多個(gè)指向同一條鏈路的設(shè)備引用： /dev/mapper/mpathn /dev/dm-n它們的來(lái)源是完全不同的：/dev/mapper/mpathn是multipath 虛擬出來(lái)的多路徑設(shè)備，我們應(yīng)該使用這個(gè)設(shè)備。 /dev/dm-n是軟件內(nèi)部自身使用的，不能被軟件以外使用，不可掛載。簡(jiǎn)單來(lái)說(shuō)，就是我們應(yīng)該使用/dev/mapper/下的設(shè)備符。對(duì)該設(shè)備即可用fdisk 進(jìn)行

28、分區(qū)，或創(chuàng)建為pv 。另外需要注意的是，分區(qū)完成后需要用kpartx 命令同步設(shè)備文件，才能看到分區(qū)對(duì)應(yīng)的設(shè)備文件。7.1.2 分區(qū)方式本文采取fdisk 分區(qū)方式，其他分區(qū)方式不做單獨(dú)介紹。 7-27.2 修改客戶(hù)端磁盤(pán)超時(shí)時(shí)間1. 上傳腳本將以下附件上傳到服務(wù)器的/etc/udev/rules.d目錄下，然后重啟服務(wù)器或者斷開(kāi)服務(wù)器與存儲(chǔ)的連接后重連生效。說(shuō)明：附件文件的MD5值：3f2e391576456001e2fbcfea85ce6b622. 確認(rèn)腳本是否生效 執(zhí)行如下命令，查看返回值是否為120。 說(shuō)明：如果結(jié)果中sda 對(duì)應(yīng)的值為30，可以忽略。7.3 創(chuàng)建分區(qū)和文件系統(tǒng)1. 磁

29、盤(pán)分區(qū) 7-3 2. 同步設(shè)備文件補(bǔ)充說(shuō)明：此步驟僅適用于多路徑形式連接存儲(chǔ)，單路徑連接的情況下跳過(guò)此步驟。3. 創(chuàng)建文件系統(tǒng) 4. 掛載文件系統(tǒng) 5. 查看掛載狀態(tài) 6. 取消分區(qū)自動(dòng)檢查 7-2補(bǔ)充說(shuō)明：使用ext 文件系統(tǒng)時(shí)，當(dāng)對(duì)某個(gè)分區(qū)mount 次數(shù)達(dá)到閥值或者間隔一段時(shí)間后，系統(tǒng)重啟時(shí)將會(huì)對(duì)該分區(qū)強(qiáng)制自檢，對(duì)于大容量的分區(qū)（T 級(jí)別）將消耗幾十分鐘甚至幾個(gè)小時(shí)，自檢期間業(yè)務(wù)無(wú)法運(yùn)行，此處必須取消該特性。7.4 設(shè)置文件系統(tǒng)自動(dòng)掛載1. 獲取磁盤(pán)分區(qū)的UUID 及文件系統(tǒng)類(lèi)型 2. 備份/etc/fstab文件3. 編輯/etc/fstab 文件卸載文件系統(tǒng)重要說(shuō)明：必須先停止業(yè)務(wù)，

30、再執(zhí)行卸載文件系統(tǒng)操作。1. 卸載文件系統(tǒng) 2. 備份/etc/fstab文件 3.編輯/etc/fstab文件 第8章常見(jiàn)問(wèn)題1. 文件系統(tǒng)不能隨開(kāi)機(jī)自動(dòng)掛載。檢查open-iscsi 此時(shí)的運(yùn)行狀態(tài)。 使用cat /etc/iscsi/nodes/targetname /IP ,port ,0/default命令檢查登陸target 的每條路徑是否都為node.startup = automatic，如果是node.startup = manual，則需要按照第3章 配置iSCSI重新配置，并重新建立I-T 連接。 如果涉及多路徑，請(qǐng)使用multipath -ll檢查multipath 狀

31、態(tài)；查看自動(dòng)掛載設(shè)置，請(qǐng)參考7.4 設(shè)置文件系統(tǒng)自動(dòng)掛載。2. 在FC 環(huán)境中不能發(fā)現(xiàn)新增磁盤(pán)。掃描新增的存儲(chǔ)資源可以采用如下操作： 或直接重啟服務(wù)器。3. 不能自動(dòng)切換回優(yōu)化路徑。一般情況下，iscsi和FC 多路徑都能自動(dòng)切換；如果重新插回之前斷開(kāi)的優(yōu)化路徑，I/O未能從非優(yōu)化路徑切換回優(yōu)化路徑，則可以嘗試手動(dòng)執(zhí)行如下命令，實(shí)現(xiàn)從非優(yōu)化路徑換回優(yōu)化路徑。 4. 修改iscsid.conf 文件后配置未生效。如果修改iscsid.conf 之前未連接target ，那么修改iscsid.conf 文件后，需要依次執(zhí)行發(fā)現(xiàn)target 、連接target 。如果修改iscsid.conf 之前

32、已經(jīng)連接target ，那么修改之后需要依次執(zhí)行發(fā)現(xiàn)target 、取消target 連接、連接target ，以使修改的配置生效。請(qǐng)參考。5. 多路徑環(huán)境中，刪除不存在的多路徑設(shè)備。服務(wù)器中存在其他多路徑設(shè)備信息且對(duì)應(yīng)設(shè)備已不存在，此時(shí)重新映射多路徑設(shè)備時(shí)，設(shè)備名并不是從mpath0開(kāi)始，需要進(jìn)行如下操作清除不存在的多路徑設(shè)備。 查看當(dāng)前多路徑設(shè)備# multipath -llmpath1 (36001405aae27ab7d123adc32ed0000d8 dm-2 MacroSAN,LUsize=10Gfeatures=0hwhandler=0rw_ round-robin 0 prio

33、=50active_ 2:0:0:0 sdb 8:16 activeready_ round-robin 0 prio=10enabled_ 1:0:0:0 sdc 8:32 activeready刪除多路徑設(shè)備綁定文件中的記錄# vi /var/lib/multipath/bindings# alias wwid#重新加載多路徑映射# service multipathd reloadReloading multipathd: OK 查看多路徑設(shè)備# multipath -llmpath0 (36001405aae27ab7d123adc32ed0000d8 dm-2 MacroSAN,LU

34、size=10Gfeatures=0hwhandler=0rw_ round-robin 0 prio=50active_ 2:0:0:0 sdb 8:16 activeready_ round-robin 0 prio=10enabled_ 1:0:0:0 sdc 8:32 activeready6. 多路徑環(huán)境中，刪除不存在的多路徑設(shè)備分區(qū)。在服務(wù)器A 上創(chuàng)建分區(qū)：# fdisk /dev/mapper/mpath0，并同步設(shè)備文件：# kpartx -a /dev/mapper/mpath0。在服務(wù)器A 上查看：# ll /dev/mapper/，生成mpath0p1；在服務(wù)器B 上查看

35、，沒(méi)有這個(gè)文件。重啟服務(wù)器B ，啟動(dòng)后會(huì)有mpath0p1這個(gè)文件。在服務(wù)器A 上刪掉分區(qū)：# fdisk /dev/mapper/mpath0，然后用：# multipath -f mpath0清除映射緩存，再# multipath -v0重新登錄，服務(wù)器A 這個(gè)mpath0p1會(huì)消失但服務(wù)器B 上mpath0p1文件依舊存在，需要進(jìn)行如下操作清除不存在的多路徑設(shè)備分區(qū)。 # ll /dev/mapper/total 0crw- 1 root root 10, 63 Apr 18 02:14 controlbrw-rw- 1 root disk 253, 2 Apr 17 22:01 mpa

36、th0brw-rw- 1 root disk 253, 3 Apr 18 09:36 mpath1brw-rw- 1 root disk 253, 4 Apr 18 09:29 mpath1p1brw-rw- 1 root disk 253, 5 Apr 18 09:29 mpath1p2brw-rw- 1 root disk 253, 0 Apr 17 18:14 VolGroup00-LogVol00brw-rw- 1 root disk 253, 1 Apr 18 02:14 VolGroup00-LogVol01# multipath -f mpath1mpath1: map in u

37、se# ll /dev/mapper/total 0crw- 1 root root 10, 63 Apr 18 02:14 controlbrw-rw- 1 root disk 253, 2 Apr 17 22:01 mpath0brw-rw- 1 root disk 253, 3 Apr 18 09:36 mpath1brw-rw- 1 root disk 253, 4 Apr 18 09:29 mpath1p1brw-rw- 1 root disk 253, 0 Apr 17 18:14 VolGroup00-LogVol00brw-rw- 1 root disk 253, 1 Apr

38、18 02:14 VolGroup00-LogVol01補(bǔ)充說(shuō)明：命令# multipath -f mpath*（*代表設(shè)備號(hào)）同樣適用于服務(wù)器不能正常發(fā)現(xiàn)多路徑設(shè)備的情形。如群集環(huán)境中，其中一個(gè)節(jié)點(diǎn)可正常發(fā)現(xiàn)多路徑設(shè)備而其他節(jié)點(diǎn)不能發(fā)現(xiàn)的，可在未發(fā)現(xiàn)設(shè)備的節(jié)點(diǎn)上使用# multipath -f mpath*（*代表設(shè)備號(hào)）清除映射緩存，再使用# multipath -v0命令重新映射。7. IP-SAN 多路徑環(huán)境中，當(dāng)服務(wù)器中已掛載LUN 時(shí)，如何在線添加新的存儲(chǔ)空間。使用# iscsiadm -m session -R命令刷新當(dāng)前在線會(huì)話(huà)即可，然后使用# fdisk -l查看新增存儲(chǔ)資源

39、。8. 如何正確刪除存儲(chǔ)分配的資源。 取消文件系統(tǒng)掛載# df -h/dev/mapper/datavg-datalv9.9G 151M 9.2G 2% /mnt# umount /dev/mapper/datavg-datalv檢查/etc/fstab等文件的引用，并刪除相關(guān)記錄# vi /etc/fstabUUID=6e033b0e-602b-4599-8600-28636a6815c8 /mnt/ ext3 _netdev 0 0刪除或?qū)С鼍斫M信息# vgchange -a n datavg0 logical volume(s in volume group "datavg&q

40、uot; now active# vgexport datavgVolume group "datavg" successfully exported清除多路徑映射# multipath -F斷開(kāi)連接，F(xiàn)C-SAN 環(huán)境可在確保無(wú)其他業(yè)務(wù)連接時(shí)，拔掉光纖線，存儲(chǔ)端取消關(guān)聯(lián)。IP-SAN 環(huán)境步驟如下：# iscsiadm -m session# iscsiadm -m node -T iqn.2010-.macrosan.target:macrosan-1.6941 -uLogging out of session sid: 5, target:iqn.2010-.macr

41、osan.target:macrosan-1.6941, portal: 172.0.0.82,3260杭州宏杉科技有限公司 文檔密級(jí)：內(nèi)部公開(kāi) sdc 清除/etc/fstab 文件中的引用（有則適用） # more /etc/fstab #UUID=947f98d4-9887-47e7-9ee6-57792a6b1c62 /mnt/ ext3 _netdev 0 0 2）多路徑環(huán)境 刷新 iSCSI 會(huì)話(huà) # iscsiadm -m session -R 查看丟失的設(shè)備名稱(chēng) # multipath -ll mpath1 (36001405a166c95fd1a7eda4fdd0000d8 dm-2 MacroSAN,LU /sbin/mpath_prio_alua exitted with 3 error calling out /sbin/mpath_prio_alua /dev/sdc /sbin/mpath_prio_alua exitted with 3 error calling out /sbin/mpath_prio_alua /dev/sde /sb