PowerVM配置文檔及原理

1、VIO配置文檔一、創(chuàng)建VIO SERVER2二、安裝VIO系統(tǒng)7三、配置映射關(guān)系（原理參考SG247940）91、VSCSI映射關(guān)系92、SEA映射關(guān)系13四、創(chuàng)建VIO CLIENT16五、雙VIO原理211、存儲冗余實現(xiàn)原理221.1內(nèi)部存儲：221.2外部存儲：222、網(wǎng)絡(luò)冗余實現(xiàn)原理232.1SEA_Failover方式232.2NIB方式24六、雙VIO配置步驟251、創(chuàng)建兩個VIO Server端252、存儲冗余252.1 內(nèi)置硬盤冗余：252.2外置硬盤冗余：272.3 多鏈路冗余測試323、網(wǎng)卡冗余（以SEA_failover為例）334、測試網(wǎng)卡（以SEA_failover為

2、例）38附：431、雙VIO網(wǎng)卡注意事項432、以下情況觸發(fā)網(wǎng)卡切換（SEA_failover方式）433、MPIO參數(shù)調(diào)優(yōu)及解釋：434、鏈路優(yōu)先級查看與修改44一、創(chuàng)建VIO Server1、在HMC中創(chuàng)建VIO server.2、前面與創(chuàng)建Lpar過程類似（步驟略）到創(chuàng)建I/O選項時，選擇此VIO server需要的設(shè)備，并設(shè)置為Required。3、創(chuàng)建Virtual Adapters (虛擬適配器)3.1、創(chuàng)建Ethernet Adapter (虛擬網(wǎng)卡)3.2、配置虛擬網(wǎng)卡參數(shù)Ø Adapter ID：虛擬網(wǎng)卡的系統(tǒng)LocationØ VLAN ID：虛擬交換機

3、編號（相同VLAN ID指向同一個交換機，相同VLAN ID才能通信）Ø IEEE 802.1q compatible adapter：多個VLAN ID并存。Ø Access external network：連接外部網(wǎng)絡(luò)，在Server端做SEA時必選。Trunk Priority（優(yōu)先級別）：多個VIO server中選擇優(yōu)先激活的SEA設(shè)備（多VIO時只能同時激活一條網(wǎng)絡(luò)通路，需要優(yōu)先級別告訴系統(tǒng)誰最先被激活，后面搭建雙VIO會提到）。3.3 創(chuàng)建SCSI Adapter (虛擬SCSI卡)3.4 配置虛擬SCSI卡參數(shù)Ø Adapter：虛擬vhost的

4、系統(tǒng)Location（虛擬SCSI卡在VIO系統(tǒng)中被識別為vhost）Ø Any client partition can connect：可以分配給任意一個LPARØ Only selected client partition can connect：只能分配給指定LPAR4、完成二、安裝VIO系統(tǒng)1、 與安裝AIX操作系統(tǒng)類似，大約45分鐘完成用戶名和密碼都為padmin，進(jìn)入系統(tǒng)后輸入命令license accept。2、 無需人工干預(yù)，安裝成功：三、配置映射關(guān)系（原理參考sg247940）1、VSCSI映射關(guān)系A(chǔ)、原理：VIO server端創(chuàng)建的VSCSI，在V

5、IO系統(tǒng)中被識別成vhost設(shè)備，先將Server中的一個或多個PV和LV映射到vhost上，再將Vhost分配給Client端（在雙VIO時會出現(xiàn)多個Vhost對應(yīng)同一個client，盡量一個vhost分給一個client）B、步驟：（以劃分LV舉例）1)建VG、LV：命令：mkvg f vg viovg hdisk1mklvf lv vhost0_lv00 viovg 20G2)查看LV信息：命令：lslv vhosts0_lv00 3) 將LV映射到vhost：命令：mkvdev vdev vhost0_lv00 vadapter vhost0 dev vhost0_dev004)查看L

6、V與vhost的映射關(guān)系命令：lsmap all （下圖中Backing device為LV）2、SEA映射關(guān)系原理：VIO server端創(chuàng)建的Virtual Ethernet Adapter（虛擬網(wǎng)卡），在VIO系統(tǒng)中會被識別成一個虛擬網(wǎng)卡設(shè)備（描述為Virtual I/O Ethernet Adapter l-lan），通過創(chuàng)建SEA卡，先將物理網(wǎng)卡與虛擬網(wǎng)卡映射在一起（SEA卡=物理網(wǎng)卡+虛擬網(wǎng)卡），再將SEA卡映射到一個虛擬網(wǎng)絡(luò)交換機上（SEA卡PVID(default id)要與虛擬網(wǎng)絡(luò)交換機的Vlan ID一致）。在HMC上創(chuàng)建Server端虛擬網(wǎng)卡時會指定Vlan ID，因為虛

7、擬網(wǎng)卡的鏈接是創(chuàng)建在OSI Model layer_2，所以在Server端創(chuàng)建了一個虛擬網(wǎng)卡相當(dāng)于創(chuàng)建了一個相同Vlan ID的虛擬網(wǎng)絡(luò)交換機）步驟：1) 查看VIO系統(tǒng)中的物理網(wǎng)卡和虛擬網(wǎng)卡命令：lsdev |grep ent下圖中：ent0為物理網(wǎng)卡，ent1、ent2為虛擬網(wǎng)卡2) 創(chuàng)建SEA卡，將虛擬網(wǎng)卡（ent1）映射到物理網(wǎng)卡（ent0）：命令：mkvdev sea ent0 vadapter ent1 default ent1 defaultid 13) 查看網(wǎng)卡映射關(guān)系命令：lsmap all net下圖中的Backing device為物理網(wǎng)卡四、創(chuàng)建VIO Client1

8、、 通過HMC創(chuàng)建VIO Client2、 前面與創(chuàng)建Lpar相似（步驟略）在I/O選擇時不要選擇物理設(shè)備(啥都不選，直接下一步)。3、 創(chuàng)建虛擬適配器（Virtual Adapter），最大虛擬網(wǎng)卡數(shù)改為100（<1024）3.1 創(chuàng)建虛擬網(wǎng)卡（Ethernet Adapter）3.2 虛擬網(wǎng)卡參數(shù)設(shè)置Ø Adapter ID：虛擬網(wǎng)卡LocationØ VLAN ID：虛擬交換機編號（Client端VLAN ID要與Server端VLAN ID一致，兩個虛擬網(wǎng)卡指向同一個虛擬網(wǎng)絡(luò)交換機）Ø Client端不需要選擇Access external netw

9、ork3.3 創(chuàng)建VSCSI3.4 VSCSI卡參數(shù)設(shè)置Adapter: VSCSI Location（填寫31，便與Server Adapter ID 30相關(guān)聯(lián)）點擊System VIOS Info.按鈕，選擇映射的Server adapter ID選擇后點擊OK4、 完成五、雙VIO原理Ø 雙VIO原因：排除VIOServer單點故障（單VIO Server一旦失效，整個VIO Client癱瘓）Ø 雙VIO結(jié)構(gòu)原理：內(nèi)部存儲做Mirror、外部存儲通過多鏈路管理（MPIO）聚合、網(wǎng)卡配SEA failover（需要做網(wǎng)卡心跳）或NIB。Ø 下圖為雙VIO結(jié)

10、構(gòu)圖：1、存儲冗余實現(xiàn)原理1.1內(nèi)部存儲：在VIOS1端，內(nèi)部硬盤上創(chuàng)建LV并映射給Client端；同理在VIOS2端創(chuàng)建LV（與VIOS1的LV等大?。┎⒂成浣o同一個Client端。映射完成后，在Client端將看到兩塊PV，將兩塊盤做Mirror，實現(xiàn)冗余。1.2外部存儲：SAN網(wǎng)絡(luò)硬盤在VIO Server端通過MPIO聚合，并將識別出的PV映射給Client端。在Client端通過Multi-pathing（調(diào)節(jié)多鏈路軟件參數(shù)）實現(xiàn)鏈路均衡或鏈路聚合（VSCSI只能同時激活一條鏈路）。Ø 內(nèi)部存儲安裝AIX操作系統(tǒng)，外部存儲存放客戶數(shù)據(jù)。Ø 下圖為存儲冗余結(jié)構(gòu)圖：2

11、、網(wǎng)絡(luò)冗余實現(xiàn)原理網(wǎng)絡(luò)冗余方式分為 SEA_Failover和NIB（Network Interface Backup）。2.1SEA_Failover方式Ø SEA_Failover原理：每一個Server端創(chuàng)建兩個虛擬網(wǎng)卡，一個虛擬網(wǎng)卡用于對外通信（Vlan ID=1，需要與物理網(wǎng)卡映射，生成SEA），另一個虛擬網(wǎng)卡做Server間的網(wǎng)卡心跳（Vlan ID=99，無需與物理網(wǎng)卡映射，只需要與對應(yīng)的SEA卡關(guān)聯(lián)）；兩個Server端中的對外虛擬網(wǎng)卡和Client端的虛擬網(wǎng)卡都指向同一個虛擬網(wǎng)絡(luò)交換機（即：三個虛擬網(wǎng)卡的Vlan ID相同），實現(xiàn)Client端虛擬網(wǎng)卡對外冗余。&#

12、216; 下圖為SEA_Failover結(jié)構(gòu)圖：2.2NIB方式Ø NIB原理：每個VIO Server端各創(chuàng)建一個虛擬網(wǎng)卡，兩個Server端的虛擬網(wǎng)卡Vlan ID不同。在Client端創(chuàng)建兩個虛擬網(wǎng)卡，分別映射到兩個Server端的虛擬網(wǎng)卡上，再將Client端的兩個虛擬網(wǎng)卡聚合。Ø 下圖為NIB結(jié)構(gòu)圖：六、雙VIO配置步驟1、創(chuàng)建兩個VIO Server端通過HMC，在服務(wù)器上創(chuàng)建兩個VIO server（vio_server1、vio_server2），每個VIO server包含一塊物理網(wǎng)卡，一塊物理HBA卡和一塊內(nèi)置硬盤。創(chuàng)建完成后，啟動VIO Server并

13、安裝VIO操作系統(tǒng)。2、存儲冗余原則：內(nèi)置硬盤做鏡像、外置硬盤通過多鏈路軟件聚合2.1 內(nèi)置硬盤冗余：A、從兩個Server端分別映射等大小的LV（也可以是hdisk，根據(jù)需求）給同一個Client（映射方法見第三節(jié)）.B、在Client端創(chuàng)建兩個VSCSI總線，與Server端的兩個LV相映射。在Client端可以看到兩塊PV分別來自兩個VIO Server.C、將兩塊PV做mirror，方法與AIX做mirror一樣（步驟略）。注意mirrorvg結(jié)束后修改bosboot和bootlist.2.2外置硬盤冗余：下圖為MPIO參數(shù)設(shè)置圖：A、 從VIO Server端識別出外置盤陣（LUN）

14、。如圖：hdisk4-hdisk6為外置盤陣。B、 修改鏈路參數(shù)和硬盤訪問參數(shù)，兩個VIO Server都需要修改。命令：chdev -dev fscsi0 -attr fc_err_recov=fast_fail dyntrk=yes perm（fscsi1也要配置）chdev -dev hdisk1 -attr reserve_policy=no_reservechdev -dev hdisk1 -attr algorithm=round_robinC、 將外置盤陣映射給Client端（映射方法見第三節(jié)），兩個Server端的Vhost對應(yīng)同一個Client端的兩個Vscsi.注意：將兩個

15、Server端中PVID相同的外置硬盤映射給同一個Client.D、 從兩個Server端映射過來的外置硬盤在Client端被自動識別出，并自動聚合為一塊硬盤?？梢杂胠spath l hdiskn查看多鏈路狀態(tài)。E、在Client端修改外置硬盤參數(shù)（不需要全都配置，部分屬性沒有）。 命令：chdev -l hdisk2 -a hcheck_interval=50 P chdev -l vscsi3 -a vscsi_path_to=30 P（vscsi4也要設(shè)置） chdev -l vscsi3 -a vscsi_err_recov=fast_fail P（vscsi4也要設(shè)置）2.3 多鏈路

16、冗余測試測試內(nèi)置/外置硬盤多鏈路冗余是否生效。關(guān)閉一個VIO Server，Client端不受影響。3、網(wǎng)卡冗余（以SEA_failover為例）A、在VIO Server端創(chuàng)建兩個虛擬網(wǎng)卡，一個Vlan=1作為對外網(wǎng)卡（對外網(wǎng)卡需要選擇Access external network，并指定優(yōu)先級，優(yōu)先級高的先被激活，1為最高），另一個Vlan=99作為心跳網(wǎng)卡（心跳網(wǎng)卡不需要選擇Access external network）B、將Vlan=1的虛擬網(wǎng)卡映射給物理網(wǎng)卡，作為對外網(wǎng)卡。defaultid為1。C、將Vlan=99的虛擬網(wǎng)卡（ent2）指定為心跳網(wǎng)卡與SEA卡（ent3）關(guān)聯(lián)。命

17、令：chdev dev ent3 attr ha_mode=auto ctl_chan=ent2D、查看SEA卡的心跳屬性，Control Channel為ent2，ha_mode為auto.命令：lsdev dev ent3 attrE、同理，在另一個VIO Server上重復(fù)B、C、D步驟，建立映射關(guān)系和網(wǎng)卡心跳，物理上將兩個網(wǎng)卡連通。F、在Client端創(chuàng)建虛擬網(wǎng)卡，Vlan ID=1.G、啟動Client端，進(jìn)入系統(tǒng)，看到虛擬網(wǎng)卡（ent0）為available。4、測試網(wǎng)卡（以SEA_failover為例）A、在VIO Server1上查看SEA卡狀態(tài)為True（Server1的SE

18、A卡被激活）命令：entstat all ent6|grep ActiveB、強制SEA卡的ha_mode狀態(tài)為standby命令：chdev dev ent6 attr ha_mode=standbyC、在VIO Server1上查看SEA卡的狀態(tài)為FalseD、在VIO Server2上查看SEA卡的狀態(tài)為True（Server2的SEA卡被激活），切換成功。E、將VIO Server1上的SEA卡ha_mode屬性改為auto，SEA卡激活狀態(tài)還原（Server1的SEA卡被激活）。多鏈路存儲測試與網(wǎng)卡Fail-Over測試成功，雙VIO配置成功。附：1、雙VIO網(wǎng)卡注意事項雙VIO時，

19、同一Vlan的兩個SEA卡之間沒有設(shè)置心跳（即兩塊網(wǎng)卡都為Active），如果將兩塊網(wǎng)卡同時接入網(wǎng)絡(luò)后，它們將大量發(fā)送廣播，產(chǎn)生廣播風(fēng)暴，致使整個網(wǎng)絡(luò)癱瘓。2、以下情況觸發(fā)網(wǎng)卡切換（SEA_failover方式）Ø Standby網(wǎng)卡無法收到Active網(wǎng)卡的心跳信息。Ø Active網(wǎng)卡無法對外通信。Ø Active網(wǎng)卡被強迫置為Standby狀態(tài)。Ø Active網(wǎng)卡無法對指定IP地址通信。3、MPIO參數(shù)調(diào)優(yōu)及解釋：Client端：a. 修改硬盤鏈路優(yōu)先級：命令：chpath -l hdisk0 -p vscsi0 -a priority=2解釋：

20、-p Parent、a Attribute、priority=2優(yōu)先級為2（1為最高）b. 修改硬盤心跳間隔時間：命令：chdev -l hdisk0 -a hcheck_interval=50 -a hcheck_mode=nonactive P解釋：hcheck_interval=60時間間隔為50秒。hcheck_mode=nonactive將hcheck指令送到狀態(tài)為nonactive的鏈路上。-P Permanent（修改ODM庫屬性，重啟后生效）c. 修改硬盤請求字段長度：命令：chdev -l hdisk0 -a queue_depth=20 P解釋：queue_depth=20一個時間片的VSCSI請求隊列長度為20，數(shù)值要與Server端對應(yīng)硬盤數(shù)值一致。d修改路徑Timeout值：命令：chdev -l vscsi0 -a vscsi_path_to=30 P解釋：vscsi_path_to=30單條路徑無響應(yīng)的最大時