聯(lián)想HX超融合平臺部署手冊

1、 91/91聯(lián)想HX超融合平臺部署手冊（AHV）目錄 TOC o 1-3 h z u HYPERLINK l _Toc503472470 1前言 PAGEREF _Toc503472470 h 4 HYPERLINK l _Toc503472471 1.1培訓目的 PAGEREF _Toc503472471 h 4 HYPERLINK l _Toc503472472 1.2測試環(huán)境 PAGEREF _Toc503472472 h 4 HYPERLINK l _Toc503472473 2聯(lián)想HX綜合功能測試 PAGEREF _Toc503472473 h 7 HYPERLINK l _Toc5

2、03472474 2.1簡易安裝部署 PAGEREF _Toc503472474 h 7 HYPERLINK l _Toc503472475 2.1.1安裝準備 PAGEREF _Toc503472475 h 7 HYPERLINK l _Toc503472476 2.1.2使用Foundation快速部署AHV &CVM PAGEREF _Toc503472476 h 10 HYPERLINK l _Toc503472477 2.1.3快速初始化配置 PAGEREF _Toc503472477 h 20 HYPERLINK l _Toc503472478 2.1.4集群健康檢查 PAGERE

3、F _Toc503472478 h 21 HYPERLINK l _Toc503472479 2.1.5創(chuàng)建虛機 PAGEREF _Toc503472479 h 22 HYPERLINK l _Toc503472480 2.2Prism統(tǒng)一管理運維工具 PAGEREF _Toc503472480 h 31 HYPERLINK l _Toc503472481 2.2.1Prism主頁信息概覽 PAGEREF _Toc503472481 h 31 HYPERLINK l _Toc503472482 2.2.2查看存儲空間使用情況 PAGEREF _Toc503472482 h 32 HYPERLI

4、NK l _Toc503472483 2.2.3系統(tǒng)健康檢查 PAGEREF _Toc503472483 h 34 HYPERLINK l _Toc503472484 2.2.4硬件狀態(tài)檢查及查看硬件利用率 PAGEREF _Toc503472484 h 35 HYPERLINK l _Toc503472485 2.2.5直觀和豐富的報表功能 PAGEREF _Toc503472485 h 37 HYPERLINK l _Toc503472486 2.2.6統(tǒng)計分析和告警界面 PAGEREF _Toc503472486 h 38 HYPERLINK l _Toc503472487 2.2.7一

5、鍵式不間斷系統(tǒng)升級 PAGEREF _Toc503472487 h 40 HYPERLINK l _Toc503472488 2.2.8查看Controller VM 配置 PAGEREF _Toc503472488 h 40 HYPERLINK l _Toc503472489 2.2.9命令行交互界面 PAGEREF _Toc503472489 h 40 HYPERLINK l _Toc503472490 2.2.10增加節(jié)點，擴展集群（可選） PAGEREF _Toc503472490 h 41 HYPERLINK l _Toc503472491 2.3其他聯(lián)想HX功能測試 PAGEREF

6、 _Toc503472491 h 41 HYPERLINK l _Toc503472492 2.3.1硬件故障輔助定位（LED） PAGEREF _Toc503472492 h 41 HYPERLINK l _Toc503472493 2.3.2REST API Explorer - 查詢所有Rest API接口 PAGEREF _Toc503472493 h 42 HYPERLINK l _Toc503472494 2.3.3Support Portal - 打開技術支持中心網(wǎng)站 PAGEREF _Toc503472494 h 43 HYPERLINK l _Toc503472495 2.3

7、.4Licensing - 更新集群License PAGEREF _Toc503472495 h 44 HYPERLINK l _Toc503472496 2.3.5Authentication Configuration - 添加AD域管理驗證 PAGEREF _Toc503472496 h 46 HYPERLINK l _Toc503472497 2.3.6Create User - 創(chuàng)建用戶 PAGEREF _Toc503472497 h 47 HYPERLINK l _Toc503472498 2.3.7SMTP Server - 配置郵件服務器地址 PAGEREF _Toc5034

8、72498 h 48 HYPERLINK l _Toc503472499 2.3.8Alert Email Configuration - 配置告警郵件 PAGEREF _Toc503472499 h 49 HYPERLINK l _Toc503472500 2.3.9Alert Policies - 告警策略配置 PAGEREF _Toc503472500 h 50 HYPERLINK l _Toc503472501 2.3.10Filesystem Whitelists - 文件系統(tǒng)白名單 PAGEREF _Toc503472501 h 50 HYPERLINK l _Toc5034725

9、02 2.3.11創(chuàng)建Volume Group PAGEREF _Toc503472502 h 51 HYPERLINK l _Toc503472503 2.3.12虛機在線遷移 PAGEREF _Toc503472503 h 53 HYPERLINK l _Toc503472504 2.3.13定制虛機并創(chuàng)建通用鏡像 PAGEREF _Toc503472504 h 55 HYPERLINK l _Toc503472505 2.3.14收集集群日志用于售后服務 PAGEREF _Toc503472505 h 58 HYPERLINK l _Toc503472506 2.3.15停止集群及關機操

10、作 PAGEREF _Toc503472506 h 60 HYPERLINK l _Toc503472507 2.3.16從Esxi的windows 虛機遷移到AHV PAGEREF _Toc503472507 h 61 HYPERLINK l _Toc503472508 2.3.17修改CVM/AHV IP 地址（可選） PAGEREF _Toc503472508 h 68 HYPERLINK l _Toc503472509 2.3.18備份與災備功能(可選) PAGEREF _Toc503472509 h 68 HYPERLINK l _Toc503472510 2.4小結 PAGEREF

11、 _Toc503472510 h 69 HYPERLINK l _Toc503472511 3聯(lián)想HX可靠性及冗余測試 PAGEREF _Toc503472511 h 70 HYPERLINK l _Toc503472512 3.1冗余性測試 PAGEREF _Toc503472512 h 70 HYPERLINK l _Toc503472513 3.1.1CVM冗余測試 PAGEREF _Toc503472513 h 70 HYPERLINK l _Toc503472514 3.1.2電源冗余測試 PAGEREF _Toc503472514 h 71 HYPERLINK l _Toc5034

12、72515 3.1.3鏈路冗余測試 PAGEREF _Toc503472515 h 72 HYPERLINK l _Toc503472516 3.1.4節(jié)點冗余測試 PAGEREF _Toc503472516 h 73 HYPERLINK l _Toc503472517 3.1.5磁盤冗余測試 PAGEREF _Toc503472517 h 75 HYPERLINK l _Toc503472518 3.2小結 PAGEREF _Toc503472518 h 80 HYPERLINK l _Toc503472519 4聯(lián)想HX平臺性能測試 PAGEREF _Toc503472519 h 81 H

13、YPERLINK l _Toc503472520 4.1基本I/O性能測試 PAGEREF _Toc503472520 h 83 HYPERLINK l _Toc503472521 4.1.14K隨機讀寫性能 PAGEREF _Toc503472521 h 83 HYPERLINK l _Toc503472522 4.1.24K隨機70%讀30%寫性能測試 PAGEREF _Toc503472522 h 84 HYPERLINK l _Toc503472523 4.1.38K隨機70%讀30%寫性能測試 PAGEREF _Toc503472523 h 85 HYPERLINK l _Toc50

14、3472524 4.1.4512K連續(xù)100%寫性能測試 PAGEREF _Toc503472524 h 87 HYPERLINK l _Toc503472525 4.1.5512K連續(xù)100%讀性能測試 PAGEREF _Toc503472525 h 88 HYPERLINK l _Toc503472526 4.2小結 PAGEREF _Toc503472526 h 89 HYPERLINK l _Toc503472527 5更多參考資料 PAGEREF _Toc503472527 h 89前言培訓目的此次測試需要達到以下目的：驗證聯(lián)想HX超融合架構的綜合功能驗證聯(lián)想HX基于KVM的虛擬化管

15、理套件Acropolis Hypervisor的功能特性驗證聯(lián)想HX融合架構的可靠性及冗余特性驗證在聯(lián)想HX系統(tǒng)應用的性能表現(xiàn)測試環(huán)境聯(lián)想HX 融合虛擬化平臺配置:型號每節(jié)點（共三個節(jié)點）CPU內存硬盤網(wǎng)絡HX-3500E5-2650v3128GBSSD: 2 x 480GBHDD: 6 x 1TB2x 10GB SFP+4 x 1GB 10BaseT1 x 100M IMPI實際可用容量：8TB (RF=2)打開EC，可用容量可提高至12TB節(jié)點安裝AHV 20160217NOS版本：網(wǎng)絡拓撲及地址信息：每個節(jié)點各有2個萬兆端口，使用個兩個萬兆口連接G8264交換機萬兆口，每個節(jié)點IPMI連

16、接G8052交換機千兆口。上聯(lián)到用戶測試環(huán)境。IP地址信息如下：第一組IP 使用范圍 0第二組IP 使用范圍1 0第三組IP 使用范圍1 0第四組IP 使用范圍1 0舉例如下：節(jié)點CVM IPAHV IPIPMI IP（無分配靜態(tài)IP 地址，保留原有IP）Node-A582Node-B693Node-C704GatewayDNSNTP00虛擬化環(huán)境用戶名口令：用戶名口令連接方式Prismadminadminhttps:/:9440CVMnutanixnutanix/4usshAVHrootnutanix/4usshIPMIUSERIDPASSW0RDhttp:/聯(lián)想HX綜合功能測試簡易安裝部署

17、安裝準備準備NTP 服務器（用于同步cluster 時間， 如果出現(xiàn)不一致，比如可能會看到比我們的實際時間+8個小時，prism的性能圖表會顯示不出來。如果沒有NTP，最簡單的方法是把登錄prism管理界面的桌面電腦時間，調成和cluster 一樣）。 DNS 服務器（可選）。去Nutanix官方網(wǎng)站上注冊賬戶，地址 HYPERLINK / /，用郵箱去注冊，注冊完成后直接可以登錄使用，以下所有從官網(wǎng)下載的文件，建議用md5sum算一下md5值，確保下載的完整性，以防后面使用過程中出現(xiàn)問題。 選擇Support Portal，找到Download選項，選擇Foundation頁面，如下：選擇下

18、載紅色圈起來的文件，iso_whitelist 文件包含了合法通過的iso文件。 除了中間的Foundation源文件，聯(lián)想HX 系列還需要下載第三個foundation-3.1.1-HX-series.tar.gz 更新包。切換到Acropolis (NOS)的下載界面，選擇4.x的版本。 按照iso_whitelist.json的內容準備hypervisor的ISO文件，如果ISO的md5碼與該文件中的不一致，則不能正常安裝。該文檔是安裝esxi， 可以使用lenovo customized esxi iso，自行下載 HYPERLINK /us/en/products/servers/l

19、enovo-x86-servers/lenovo-converged-hx-series /us/en/products/servers/lenovo-x86-servers/lenovo-converged-hx-series可以看到下載的iSO md5 和whilelist 文件的內容一致。如果是希望集群創(chuàng)建之后，跑diagnostics test， 切換到tools and firmware， 下載diagnostic 文件。硬件設備到位后，需要準備一個千兆/萬兆接入交換機，將網(wǎng)線/光纖線插入到板載一個千兆口或者x520一個萬兆口。 一般使用萬兆口。然后與接入交換機連通； HX系列硬件設

20、備到位后，需要準備一個千兆/萬兆電口接入交換機，將網(wǎng)線插入到IMM及第一個萬兆口（安裝AHV必須使用萬兆口，安裝VMware可以使用千兆口），然后與接入交換機連通；同時記下System X前面板顯示屏里IMM的IPMI的MAC地址，每個節(jié)點一個地址，在后面安裝配置的時候使用；在安裝之前需要考慮網(wǎng)絡的規(guī)劃，Nutanix每個節(jié)點需要三個IP地址，包括了IPMI、Hypervisor和CVM；Nutanix集群也需要一個IP地址，同時需要設置DNS、NTP服務器等；同時Foundation和安裝筆記本或臺式機也各需要一個IP地址；如果有VLAN的設置，需要提前規(guī)劃好，并且要在接入交換機上做Trun

21、k端口；具體的網(wǎng)絡規(guī)劃和配置參考第一章節(jié)。在安裝之前需要安裝桌面端的虛擬化軟件，安裝virtual box 或者vmware workstation在PC或者筆記本上，將Foundation_VM-3.1.1_Release.tar.gz解壓縮，然后通過桌面端的虛擬化軟件導入，開啟VM。Virtualbox Foundation 虛機網(wǎng)絡設置如下圖，該本地網(wǎng)卡需要通過網(wǎng)線連接到和萬兆交換機使用Foundation快速部署AHV &CVM 設備是出廠并且安裝過的帶有ahv 的設備，需要執(zhí)行以下步驟destroy cluster（注意：該步驟將清除所有數(shù)據(jù)）。首選打開三節(jié)點任意的控制臺，看到ahv

22、 終端界面，使用root用戶登錄，密碼是nutanix/4u，然后ssh到cvm， ssh HYPERLINK mailto:nutanix nutanix， 密碼也是nutanix/4u。 重啟三個節(jié)點，進入UEFI 界面配置IMM IP， 根據(jù)第一章節(jié)的環(huán)境手冊。 開啟Foundation虛機， 用nutanix 用戶登錄之后， 可以看到桌面兩個文件一個是set_foundation_ip_address，另外一個是Nutanix Foundation。點擊set_foundation_ip_address，設置Foundation VM的IP、子網(wǎng)掩碼、網(wǎng)關及DNS等信息，然后選擇保存；

23、 如果是HX系列，需要將foundation-3.1.1-HX-series.tar.gz使用scp復制到虛擬機內部tmp下，使用tar -xzvf foundation-3.1.1-HX-series.tar.gz解壓縮，將現(xiàn)有nutanix用戶目錄下的foundation目錄改名為foundation_old，將解壓縮產生的foundation目錄mv到該位置（/home/nutanix）。并確保以下權限。選擇所要安裝的Hypervisor，這里選擇ahv，然后選擇NOS的Package和Hypervisor ISO Image，點擊下一步：注釋：NOS的安裝包需要提前將安裝包nutani

24、x_installer_package-danube-.tar上傳到Foundation的/home/nutanix/foundation/nos下面Hypervisor的安裝ISO需要提前上傳到Foundation的/home/nutanix /foundation/isos/hypervisor/esxhypervkvm下面如果是希望集群創(chuàng)建之后，跑diagnostics test， 把diagnostic test files 放到合適的位置注意因為當前是nutanix用戶登錄，上面的文件用戶和組用戶都應該是nutanix，如果是root請修改。2.2.7點擊Nutanix Founda

25、tion，啟動Nutanix安裝配置過程，進入到全局配置界面，需要根據(jù)事先規(guī)劃好的網(wǎng)絡配置填寫，包括IPMI、Hypervisor和CVM信息；填寫完成點擊下一步；會自動偵測到node配置ipIso選擇點擊創(chuàng)建一個Cluster，輸入Cluster Name、Cluster外部IP地址、CVM DNS服務器、CVM NTP服務器、Hypervisor NTP服務器、最大冗余數(shù)，當前3節(jié)點， RF只能選擇2.0 在核對信息完成后，選擇run installation1 安裝過程大概需要1小時，安裝完最終效果2 （可選）安裝完成后如果有VLAN的配置，需要在Hypervisor和CVM上進行配置；

26、首先通過命令行工具SSH登錄到Hypervisor的主機上，例如ssh root給Hypervisor設置VLANovs-vsctl set port br0 tag=host_vlan_tag然后執(zhí)行命令查看現(xiàn)有虛擬網(wǎng)絡端口ovs-vsctl list port br0在Hypervisor下登錄到CVMssh nutanix54然后執(zhí)行命令修改VLAN設置change_cvm_vlan=vlan_tag3 完成安裝，使用cvm ip 地址登錄prism管理界面，第一次登錄提示修改admin 密碼。4 （可選）腳本刪除集群過程登錄某個節(jié)點CVM 控制臺， 使用如下方式可以刪除之前創(chuàng)建clus

27、ternutanixNTNX-J30VL52-A-CVM:4:$ cluster destroy2016-05-31 03:57:17 INFO cluster:2073 Executing action destroy on SVMs 4,5,62016-05-31 03:57:17 INFO cluster:2082 * CLUSTER NAME *esxtestThis operation will completely erase all data and all metadata, and each node will no longer belong to a cluster. D

28、o you want to proceed? (Y/N): y5 （可選）腳本創(chuàng)建集群登錄某個節(jié)點CVM 控制臺nutanixNTNX-J30VL52-A-CVM:4:$ cluster -s 4,5,6 create2016-05-30 20:03:20 INFO cluster:2073 Executing action create on SVMs 4,5,62016-05-30 20:03:24 INFO cluster:795 Discovered node: ip: 4rackable_unit_serial: J30VL52node_position: Anode_uuid: 0

29、ccbf565-558d-4b62-b0ad-fe4a5e7722cf2016-05-30 20:03:24 INFO cluster:795 Discovered node: ip: 6rackable_unit_serial: J30VL4Znode_position: Anode_uuid: 53feb2f9-0570-4e2c-8967-412e2a9b02332016-05-30 20:03:24 INFO cluster:795 Discovered node: ip: 5rackable_unit_serial: J30VL4Ynode_position: Anode_uuid:

30、 db1f1d9e-c25d-4e0b-a9e3-2694be98ba676 （可選）檢查集群狀態(tài)登錄某個節(jié)點CVM 控制臺nutanixNTNX-J30VL52-A-CVM:4:$ ncc health_checks run_allncc_version: 2.2.3-550ddc51cluster id: 7488932666122431736cluster name: esxtestnode with service vm id 4快速初始化配置集群創(chuàng)建好， 默認創(chuàng)建了一個default storage pool和default container可以手動創(chuàng)建新的Container，并掛

31、載到所有節(jié)點集群健康檢查創(chuàng)建完集群之后， 可以通過NCC 工具檢查集群狀態(tài)創(chuàng)建虛機linux虛機可以正常安裝。如果是windows虛機， 請參考以下步驟安裝。首選需要上傳系統(tǒng)鏡像點擊upload接下來創(chuàng)建windows虛機， 如果是windows 2012 系統(tǒng)， 則需要安裝VirtIO提供的驅動。VirtIO提供了scsi驅動（在添加磁盤的時候，BUS type如果選擇IDE，在系統(tǒng)安裝過程中，可以直接識別該磁盤。 如果BUS type選擇SCSI，則需要在系統(tǒng)安裝過程中，加載virtio內置的scsi驅動，才可以識別分配的磁盤）， 網(wǎng)卡驅動。如果虛機系統(tǒng)是win2008R2或者win7系統(tǒng)

32、，在添加磁盤的時候，BUS type只可以選擇IDE，安裝完系統(tǒng)之后， 則需要先安裝SHA-2 code signing support，這個升級文件從微軟獲得。接下來安裝VirtIO提供的網(wǎng)卡驅動和SCSI 驅動。關于VirtIO 的使用，具體參考 HYPERLINK /#/page/docs/details?targetId=AMF_Guide-Acr_v4_6:vm_vm_virtio_ahv_c.html /#/page/docs/details?targetId=AMF_Guide-Acr_v4_6:vm_vm_virtio_ahv_c.html安裝windows 2008 虛機DI

33、SK 選項里面的CDROM 選擇添加的鏡像iso文件。 同時把virtIO 文件（該文件從nutanix 下載，iso格式），sha-2升級文件“Windows6.1-KB3033929-x64.msu” 制作成iso格式（可以使用ultraiso），這兩個文件掛載到虛機（前提也是要先上傳到image configuration）. 最后添加一個30G 的磁盤安裝系統(tǒng)，注意磁盤BUS type選擇IDE。 接下來添加虛擬網(wǎng)卡，在添加虛擬網(wǎng)卡之前， 需要創(chuàng)建network 接口。 創(chuàng)建完后，添加虛擬網(wǎng)卡最后點擊save，保存該虛機配置。對剛創(chuàng)建的虛機開機。選擇launch console 打開控

34、制臺，發(fā)現(xiàn)在下面階段可以看到添加的磁盤。往下繼續(xù)安裝，安裝完后，安裝sha-2 簽名升級文件。安裝完重啟。打開設備管理器，使用virtIO對以下設備安裝驅動。安裝windows 2012不走和windows2008 類似，cdrom除了掛載window2012 鏡像， 還有ViriIO 驅動， 添加磁盤，bus type選擇SCSI。還有添加網(wǎng)絡，保存該設置。 對該虛機power on， 在下面階段提示找不到硬盤。選擇加載驅動把以下驅動加上。加完驅動可以識別添加的硬盤。往下安裝，直到系統(tǒng)完成安裝。Prism統(tǒng)一管理運維工具Prism主頁信息概覽聯(lián)想HX自帶的管理控制臺Prism，不僅可以提供所

35、有服務器、存儲等基礎架構硬件的管理，還可以管理所有虛擬機，完成虛擬機的日常監(jiān)控維護。使用方便，用戶不在需要在多個管理界面之間進行切換，從而實現(xiàn)統(tǒng)一管理，降低日常管理維護成本。查看存儲空間使用情況Nutanix將服務器中的所有存儲匯聚為一個統(tǒng)一的存儲池（Storage Pool），并在存儲池中為虛擬機劃分相應的存儲空間（Container）。切換為storage 頁面我們可以通過Storage頁面的訪問來獲取Nutanix系統(tǒng)存儲使用情況的統(tǒng)計信息。通過概覽頁面（Overview），我們可以獲得有關存儲的（從左至右）：信息匯總，性能圖表，告警事件和存儲事件，整個頁面的布局與首頁相仿，如下圖：通過

36、圖示頁面（Diagram），我們可以獲得關于存儲的使用率，性能，告警和事件，這些內容通過圖示或表單的形式進行展示，非常直觀，并且通過鼠標懸停，即可獲得管理需要的各類信息的具體數(shù)值，如下圖：通過表單頁面（Table），我們可以獲得相應存儲空間或是存儲池的統(tǒng)計信息，如下圖可以看到storage pool 物理可用大小為16.02TB。可以看到contaniner 最大可用容量為8.01TB，這是由于RF=2 ，雙副本策略。所以實際可用大小是物理storage pool大小的一半。系統(tǒng)健康檢查通過Health頁面的訪問我們可以統(tǒng)一查看集群中所包含的所有虛擬機（VMs），主機（Hosts），磁盤（Di

37、sks）等的使用狀況，這里是集群的健康檢查中心，如下圖：當系統(tǒng)出現(xiàn)故障時，健康監(jiān)測中心會予以告警提示，而管理人員能夠通過簡單的鼠標點擊就發(fā)現(xiàn)具體故障點，方便問題的排查，這里我們示例cluster 旁邊紅色的1，事件顯示說明是power supply check出現(xiàn)問題，如下圖點擊右上角manage check，會提示cause of failure， resolution硬件狀態(tài)檢查及查看硬件利用率通過硬件狀態(tài)頁查看當前硬件版本、配置及運行情況，一旦出現(xiàn)問題時，可借助Turn On Led功能來輔助定位故障點。通過概覽頁面（Overview），我們可以獲得系統(tǒng)硬件配置的（從左至右）：信息匯總，

38、性能表單，告警事件和硬件事件，整個頁面的布局與首頁相仿，如下圖：Nutanix硬件圖示頁面（Diagram）分為上下兩個部分：上半部分是一個直觀的Nutanix硬件平面圖，這幅圖與具體的硬件部件相關聯(lián)，如發(fā)生相關告警或事件會在平面圖的相應位置予以標識；通過圖示頁面（Diagram）下半部分的圖表，我們可以獲得關于硬件的使用性能，告警和事件，同樣的，各類信息通過圖示或表單的形式進行直觀的展示，并且通過鼠標懸停，即可獲得管理需要的各類信息的具體數(shù)值，如下圖通過表單頁面（Table），我們可以獲得系統(tǒng)中所有節(jié)點（Node）的相關硬件信息，包括主機（Host）和磁盤（Disk），如下圖：直觀和豐富的報

39、表功能可對監(jiān)控指標項進行報表展示，并且可將不同節(jié)點的同一監(jiān)控項在一個報表界面中呈現(xiàn)，如下圖：也可以在同一個界面中呈現(xiàn)同一節(jié)點的不同監(jiān)控項。統(tǒng)計分析和告警界面Nutanix Web Console除了前面展示的一些默認統(tǒng)計圖表外，我們還可以通過Analysis頁面的訪問來具體定制我們需要的分析報表，如下圖通過Alerts頁面的訪問我們可以詳細查看所有的告警和事件信息，并且通過鼠標懸停，能夠獲得對于該告警或事件的解釋和建議，如下圖：針對不同告警，可以配置響應的告警策略通知管理員，避免發(fā)生告警風暴，如下圖：也可以創(chuàng)建alert email congiuration一鍵式不間斷系統(tǒng)升級通過一鍵式升級快

40、速完成NOS、Hypervisor和磁盤firmware的升級，且不中斷業(yè)務的運行 具體操作請看操作演示視頻 “2.NOS_Upgrade”查看Controller VM 配置可以通過Prism web管理界面查看CVM 的當前配置。包括vCPUs， MEMORY命令行交互界面通過SSH遠程連接到CVM，以命令行方式查看集群當前狀態(tài)。增加節(jié)點，擴展集群（可選）參考視頻“3.Add Node”其他聯(lián)想HX功能測試硬件故障輔助定位（LED）REST API Explorer - 查詢所有Rest API接口Support Portal - 打開技術支持中心網(wǎng)站 當需要尋求技術支持時，可以直接從Pr

41、ism界面中打開技術支持中心網(wǎng)站，并登陸即可Licensing - 更新集群License 點擊License來為集群添加新的License許可以下是手工更新集群license的頁面：更多關于licence 的操作， 參考文檔附件 “l(fā)icense處理”Authentication Configuration - 添加AD域管理驗證添加AD域名和驗證的IP地址端口可以使用AD進行用戶驗證，但前提需提前創(chuàng)建AD 域服務器，當前環(huán)境沒有AD， 略過Create User - 創(chuàng)建用戶可以創(chuàng)建其他管理員用戶或者非管理員用戶SMTP Server - 配置郵件服務器地址配置郵件服務器地址用于發(fā)送告警郵

42、件Alert Email Configuration - 配置告警郵件 配置發(fā)送告警郵件給管理員或者聯(lián)想HX SupportAlert Policies - 告警策略配置針對不同告警，可以配置響應的告警策略通知管理員，避免發(fā)生告警風暴Filesystem Whitelists - 文件系統(tǒng)白名單 允許特定網(wǎng)段的IP訪問聯(lián)想HX存儲創(chuàng)建Volume Group 創(chuàng)建volume group， 名稱為VG1， 磁盤大小為30G。同時添加iscsi initiator 的iqn白名單。該iscsi initiator可以是集群內或者集群外的虛機/ 物理機。我們把上一節(jié)創(chuàng)建的windows 虛機的iq

43、n號的添加進去。 打開windows 虛機的iscsi initiator， 點擊刷新，可以看到創(chuàng)建的VG1。（前提條件是該虛機和集群在同一網(wǎng)絡）選擇連接，確定已經是連接的狀態(tài)。除此之外， 該VG 可以共享給AHV 集群里面的虛機。虛機在線遷移集群內虛機可實現(xiàn)主機之間的遷移Win2012-1 虛機從主機7遷移到主機6遷移虛機ping測試持續(xù)，另外一臺虛機ping測試掉兩個包，符合正常測試遷移完成定制虛機并創(chuàng)建通用鏡像在AHV集群，可以使用Cloud-init 去定制Linux VMs，Sysprep工具定制windows VMs.Sysprep通常用來一般化windows 安裝，Sysprep

44、 移除了windows系統(tǒng)特別的信息，比如SID （Security Identifier），并且不影響安裝的程序應用。你可以使用一般化的windows 鏡像，并通過answer file 去定制在別的系統(tǒng)安裝windows 。 Answer file 包含了Sysprep 需要的信息去完成無人值守的安裝，更多信息參考 HYPERLINK 本測試使用Sysprep 工具，該工具是windows 自帶的工具。一般化該虛機之后，在CVM console下，使用acli 命令行模式，找到該虛機系統(tǒng)磁盤uuid創(chuàng)建通用鏡像使用該鏡像模版部署虛機部署成功收集集群日志用于售后服務Nutanix Clust

45、er Check (NCC) introduces the Log Collector plugin. AOS implements many logs and configuration information files that are useful for troubleshooting issues and finding out details about a particular node or cluster.Log Collector examines the cluster and collects:Logs and configuration information fo

46、r one or more Controller VMsConfiguration information for hypervisorslogs generated by sysstats utilitiesInformation about alertsTo use the log collector, run the following command from a Controller VM.nutanixcvm$ ncc log_collector plugin_nameReplace plugin_name with one of the following plugin name

47、s.Log Collector stores the output in a zipped tar file named log_collector_logs.tar.gz in the /home/nutanix/data/log_collector directory on the Controller VM where the NCC command was issued.例子：停止集群及關機操作停止集群的方法：登錄任意節(jié)點CVM 控制臺，執(zhí)行以下命令停止集群。 集群停止之后，無法登錄PRISM。關機的步驟：正常關閉虛機登錄到每個節(jié)點的CVM 控制臺，關閉CVM 。 完成2才能往下進行第

48、3 步. 登錄到每個節(jié)點AHV 控制臺， 關閉AHV 從Esxi的windows 虛機遷移到AHV安裝Nutanix VM mobility到windows VM 上， 該工具可以到nutanix 官網(wǎng)下載。下載鏈接： HYPERLINK /ntnx-portal/mobility/1.0.1/Nutanix-VmMobility-1.0.1.msi /ntnx-portal/mobility/1.0.1/Nutanix-VmMobility-1.0.1.msi遷移vm disk 到ahv 存儲（Acropolis Distributed Storage Fabirc）在Prism web c

49、onsole， 添加esxi Hypervisor host IP 到AHV 集群文件系統(tǒng)白名單。 在esxi主機上添加nfs存儲添加完成把該虛機Storage vmotion到添加的NFS 存儲遷移完成之后，關閉該虛擬機。轉換遷移的磁盤到AHV format（Create Image）在prism web 打開image configuration， 選擇upload image.在url 輸入該遷移磁盤所在的路徑。上傳成功在AHV創(chuàng)建windows 虛機選擇創(chuàng)建虛機，添加disk， 選擇clone from image service 創(chuàng)建完成之后選擇開機Windows虛機正常啟動修改CV

50、M/AHV IP 地址（可選）具體參考附件文檔“修改CVM和AHV（KVM）的IP地址” 備份與災備功能(可選)請參考附件 “Section8 集成的備份與容災功能”小結聯(lián)想HX產品融合計算與存儲，管理運維簡單，數(shù)據(jù)集中存儲安全、快速部署、擴展方便，具有高可用性，減碳節(jié)能。聯(lián)想HX快速部署的特性，可以在20分鐘內完成節(jié)點初始化和配置工作，用戶隨即可以開始部署虛擬機；統(tǒng)一的Prism管理界面允許用戶在單個界面中管理所有服務器、存儲等基礎架構硬件和所有虛擬機，實現(xiàn)日常性能監(jiān)控和維護操作。并且Prism自帶的Health Check功能可以快速定位和發(fā)現(xiàn)故障，簡化用戶的日常運維管理；聯(lián)想HX集群管理

51、所有基礎架構硬件和虛擬機，并且可以監(jiān)控包括CPU、內存、磁盤空間、IOPS、吞吐帶寬、讀寫延遲等多項指標，并且可以和傳統(tǒng)監(jiān)控軟件進行有效集成，不會額外增加用戶監(jiān)控復雜度；針對性能數(shù)據(jù)可以方便的通過Prism界面進行報表展示，靈活的監(jiān)控項定義是的報表功能更具適用性，同時可以導出報表數(shù)據(jù)供詳細分析使用。聯(lián)想HX可靠性及冗余測試冗余性測試CVM冗余測試 測試描述：每個節(jié)點上的CVM虛擬機負責本節(jié)點上其他虛擬機的IO操作，當CVM節(jié)點故障時，節(jié)點上所有其他虛擬機的IO操作將自動重定向到另一個節(jié)點的CVM上，保證虛擬機正常運行。在集群中有虛機正在運行的情況下，關閉節(jié)點J30VL54（7）上的控制器CVM

52、, SSH,通過登錄該節(jié)點的CVM， 執(zhí)行命令：sudo shutdown, 該操作直接關閉CVM。經測試，節(jié)點上正在運行的VM并未受到影響， Ping未發(fā)生斷續(xù)。CVM 恢復相關節(jié)點上正在運行的虛機并未受到影響：電源冗余測試 測試描述：任意關閉一個電源，Prism界面有報警信息，聯(lián)想HX設備工作正常。鏈路冗余測試測試描述：任意一根uplink鏈路失效，節(jié)點工作正常。首先對集群每個節(jié)點萬兆網(wǎng)卡兩個網(wǎng)口都要接通在任一臺CVM 控制臺下，可以看到當前節(jié)點的橋接設備br0 的uplink鏈路接口是eth0和eth1.斷開一種其中一跟鏈路， eth0 down。不影響該節(jié)點上運行的虛機，該節(jié)點正常工作

53、節(jié)點冗余測試 通過對主機重啟，模擬節(jié)點故障Prism界面出現(xiàn)節(jié)點失效的提示，并開始在其他節(jié)點上恢復受影響VM，表示HA正在起作用主面板當前狀態(tài)，數(shù)據(jù)彈性狀態(tài)是critical，因為一個節(jié)點故障。虛機HA 遷移到其他兩個主機節(jié)點。該主機恢復，動態(tài)回遷虛機主面板的數(shù)據(jù)彈性狀態(tài)恢復正常。磁盤冗余測試當聯(lián)想HX在工作時，將一塊SSD硬盤拔出，系統(tǒng)工作正常，Prism界面有告警：移除開始同步在硬件管理界面可以看到L54 這個節(jié)點少了一個硬盤。同步完成將磁盤插回去之后，系統(tǒng)恢復正常，記錄重建時間。將一塊磁盤撥出插入后，在hareware 管理界面，點擊重新分區(qū)和添加重新分區(qū)完成。當HX在工作時，將一塊SA

54、S硬盤拔出，系統(tǒng)工作正常，Prism界面有告警。移除硬盤重建完成重新插回該SAS 盤，選擇repartioin and add.通過插拔SSD / SAS 硬盤測試，重建階段虛擬機可ping通和正常運行，業(yè)務并不會造成影響。小結主動防護層面，在聯(lián)想HX架構中所有硬件均不存在單點故障，冗余測試包括CVM故障、單個節(jié)點故障、單個磁盤故障、單個電源故障、單鏈路故障等操作，均對業(yè)務沒有影響，系統(tǒng)可以保證在發(fā)生單點失效時仍然可用。被動防護層面，當有磁盤發(fā)生故障時，系統(tǒng)能在第一時間感知并于空余資源上迅速重建缺失的數(shù)據(jù)，以降低數(shù)據(jù)丟失的風險。聯(lián)想HX平臺性能測試性能測試將涵蓋兩部分內容，Nutanix自帶的

55、性能測試工具，另外一個是基于IOmeter的基本I/O性能測試。測試場景測試點測試目標測試條目/步驟結果基礎I/O測試測試隨機讀寫的性能，同時觀察CPU和內存的使用情況（觀察對象CVM和主機）測試順序讀寫的性能，同時觀察CPU和內存的使用情況（觀察對象CVM和主機）設置條件：每節(jié)點2個windows 2012 虛機（每個虛機4個Vcpu, 8G 內存），各運行IOmeter(4 worker同時測試)，為了更好的測試性能。每個虛擬機掛6個5g的scsi類型裸盤。超融合帶來更好的性能和延展性,全隨機，50%讀50%寫，IO大小4K持續(xù)測試5分鐘，記錄IOPS111660全隨機，70%讀30%寫，

56、IO大小4K持續(xù)測試5分鐘，記錄IOPS92109全隨機，70%讀30%寫，IO大小8K持續(xù)測試5分鐘，記錄IOPS99948全順序，100%寫，IO大小512K持續(xù)測試5分鐘，記錄MB/s1246全順序，100%讀，IO大小512K持續(xù)測試5分鐘，記錄MB/s3528Nutanix自帶的性能測試工具測試方法：登錄任意cvm，使用nutanix平臺自帶的測試工具測試，測試命令diagnostics.py run; 測試截圖如下：連續(xù)寫帶寬為1186MBps連續(xù)讀帶寬為3108 MBps隨機讀IOPS為124590隨機寫IOPS 為95282基本I/O性能測試4K隨機讀寫性能配置前提：2 VM/

57、Node, 1 IOmeter/VM, 4 Worker/IOmeterIOmeter: Max Disk Size Sectors: 8000000IOmeter: # of outstanding I/Os: 32IOmeter: Access Spec Transfer Request Size: 4 KBIOmeter: Access Spec Percent Random/Sequential Distribution: 100% RandomIOmeter: Access Spec Percent Read/Write Distribution: 50% Read 50% Writ

58、e配置說明：每個節(jié)點上建2個Windows虛機，每個虛機里運行一個IOmeter，每個IOmeter中跑4個Worker，測試的磁盤最大值為4GB。除此以外，測試的I/O大小為4k，全隨機50%讀50%寫。測試過程：同時打開每個節(jié)點上VM中的IOmeter，運行測試至少5分鐘，記錄IOPS測試結果：4K隨機70%讀30%寫性能測試本測試模擬數(shù)據(jù)庫實際運行的I/O特性，來評測數(shù)據(jù)庫讀寫的性能。配置前提：2 VM/Node, 1 IOmeter/VM, 4 Worker/IOmeterIOmeter: Max Disk Size Sectors: 8000000IOmeter: # of outstanding I/Os: 4IOmeter: Access Spec Transfer Request Size: 4 KBIOmeter: Access Spec Percent Random/Sequential Distribution: 100% RandomIOmeter: Access Spec Percent Read/Write Distribution: 70%Read 30%Write配置說明：每個節(jié)點上建2個Windows虛機，每個虛機里運行一個IOmeter，每個IOmeter中跑4個Worker，測試的磁盤最大值為4GB。除此以外，測試的I/O大