FusionCompute日常維護與故障處理介紹

1、FusionCompute日常維護與故障處理介紹技術創(chuàng)新，變革未來FusionCompute是華為云計算解決方案的基石，了解和掌握FusionCompute的日常維護和故障處理方法，可以更好的部署和維護企業(yè)云計算環(huán)境。通過本章學習，您將能夠掌握FusionCompute系統(tǒng)的日常運維能力。學完本課程后，您將能夠：描述日常維護操作區(qū)分FusionCompute告警分析常見故障處理步驟描述FusionCompute常見故障處理方法維護管理日常監(jiān)控配置管理用戶管理FusionCompute備份與恢復故障管理日常維護操作為了保證系統(tǒng)長期正常、穩(wěn)定的運行，維護工程師需要定期對系統(tǒng)進行檢查，并根據檢查出的

2、異常結果排除故障。維護項目檢查項正常狀態(tài)維護周期查看系統(tǒng)告警FusionCompute上的告警無新增告警每天檢查FusionCompute健康狀態(tài)健康檢查報告無“不合格”檢查項每天檢查設備運行狀態(tài)服務器、交換機和存儲設備的指示燈狀態(tài)指示燈顯示正常每天檢查設備運行環(huán)境溫濕度符合運行環(huán)境對溫度和濕度的要求。每周空氣質量符合運行環(huán)境對空氣質量的要求每周防塵情況無明顯塵土附著每周查看預警整改公告“/enterprise”，選擇“公告產品公告預警公告IT云計算數據中心FusionSphereFusionSphere”，查看預警整改公告。滿足預警通知的要求每月查看告警告警級別圖標說明緊急已經影響業(yè)務、需要

3、立即采取糾正措施的告警為緊急告警。重要已經影響業(yè)務，如果不及時處理會產生較為嚴重后果的告警為重要告警。次要目前對業(yè)務沒有影響，但需要采取糾正措施，以防止更為嚴重的故障的發(fā)生，這種情況下的告警為次要告警。提示檢測到潛在的或即將發(fā)生的影響業(yè)務的故障，但是目前對業(yè)務還沒有影響，這種情況下的告警為提示告警。實時監(jiān)控管理員可以查看集群、主機以及虛擬機的監(jiān)控信息，以便于了解集群在指定時間段內的運行狀態(tài)維護管理日常監(jiān)控配置管理用戶管理FusionCompute備份與恢復故障管理系統(tǒng)配置 (1)管理員可以根據業(yè)務需求對FusionCompute系統(tǒng)配置參數作出調整。配置域認證信息更新License修改系統(tǒng)Lo

4、go配置登錄超時時間配置資源調度周期配置SNMP管理站VRM單節(jié)點擴展為主備部署系統(tǒng)配置 (2)任務管理管理員可以通過FusionCompute查看操作任務的進度維護管理日常監(jiān)控配置管理用戶管理FusionCompute備份與恢復故障管理FusionCompute賬戶FusionCompute賬戶分為：本地用戶、域用戶、接口對接用戶。本地用戶用于登錄、管理系統(tǒng)；在配置域后可用域用戶登錄系統(tǒng)；接口對接用戶用于其他用戶對接。FusionCompute登錄賬戶如下表：登錄模式默認賬戶/密碼賬戶權限普通模式admin/IaaSPORTAL-CLOUD8!具有系統(tǒng)管理員權限三員分立模式系統(tǒng)管理員： sy

5、sadmin/Sysadmin#安全管理員： secadmin/Secadmin#安全審計員： secauditor/Secauditor#系統(tǒng)管理員：僅具有系統(tǒng)業(yè)務操作維護權限，以及創(chuàng)建、刪除用戶的權限安全管理員：僅具有用戶、角色的權限管理權，但不能創(chuàng)建用戶。安全審計員:僅有日志查看和日志導出權限，用于對其他用戶的操作進行審查。維護管理日常監(jiān)控配置管理用戶管理FusionCompute備份與恢復故障管理備份與恢復策略維護工程師在對系統(tǒng)進行重大操作(如升級、重大數據調整等)前，為了保證FusionCompute在出現(xiàn)異?；蛭催_到預期結果時可以及時進行數據恢復，將對業(yè)務的影響降到最低，需要提前對

6、VRM節(jié)點的數據進行備份。FusionCompute同時支持對關鍵數據進行自動備份和手工備份。在對系統(tǒng)部件進行重大操作(如升級、重大數據調整等)后，系統(tǒng)有可能出現(xiàn)異常或未達到預期結果。此時，需要對其進行回退，回退過程中需要進行數據恢復操作。本節(jié)介紹了FusionCompute系統(tǒng)的日常管理內容，包括監(jiān)控管理、配置管理、用戶管理和管理數據備份等內容。維護管理故障處理主機和集群故障處理存儲故障處理網絡故障處理虛擬機和模板故障處理主機和集群創(chuàng)建流程FusionCompute主機和集群的故障處理，可以參考該流程順序進行檢查。主機和集群的故障可能會涉及到如下關鍵故障點：站點故障集群故障主機故障系統(tǒng)接口故

7、障創(chuàng)建集群向集群添加主機設置主機時鐘同步添加主機存儲接口修改主機存儲多路徑存儲設備廠商其他否華為存儲類型為SAN？是主機和集群故障點站點故障不能使用FusionCompute不能配置級聯(lián)集群故障不能創(chuàng)建、修改、移除集群集群配置故障主機故障不能添加、修改、移除主機主機配置故障系統(tǒng)接口故障網口綁定異常業(yè)務管理接口異常存儲接口異常站點、集群故障點分析故障點不能使用FusionCompute不能配置級聯(lián)不能創(chuàng)建、修改、移除集群集群配置故障可能的故障原因網絡異常VRM節(jié)點異常站點配置異常集群配置異常排除故障排除網絡故障排除VRM節(jié)點故障修復站點配置修復集群配置FusionCompute使用VRM節(jié)點對資

8、源統(tǒng)一調度管理，站點、集群故障和VRM節(jié)點強相關。站點、集群故障案例 - VRM虛擬機無法啟動收集信息FusionCompute服務異常，無法啟動VRM虛擬機定位故障可能在FusionCompute中對VRM虛擬機執(zhí)行過關機操作可能在VRM虛擬機上執(zhí)行過關機命令可能VRM操作系統(tǒng)異常而引發(fā)VRM自動關機排除故障使用“PuTTY”，登錄VRM節(jié)點所在主機切換至“root”用戶: su - root查找VRM虛擬機id啟動虛擬機: virsh start 虛擬機ID檢查確認告警消失業(yè)務正常主機故障點分析故障點不能添加、修改、移除主機主機配置故障可能的故障原因網絡異常代理服務異常系統(tǒng)異常排除故障排除

9、網絡故障修復代理服務重裝系統(tǒng)主機上的計算資源經過虛擬化后，形成計算資源池，并分配給虛擬機使用。如果主機出現(xiàn)故障，將影響上層的虛擬機和業(yè)務。主機故障案例 - 添加主機失敗收集信息在FusionCompute界面上添加主機失敗定位故障VRM與CNA節(jié)點網絡鏈路不通添加主機失敗后，主機上可能殘留網絡配置數據，導致再次添加主機失敗排除故障檢查VRM與故障CNA節(jié)點網絡連接刪除故障CNA節(jié)點殘留網絡數據檢查確認告警消失業(yè)務正常系統(tǒng)接口管理FusionCompute管理如下幾類系統(tǒng)接口：綁定網口綁定主機的網口，以提高網絡的可靠性。存儲接口在主機中添加存儲接口，實現(xiàn)主機與存儲設備對接。添加多個存儲接口，可以

10、實現(xiàn)存儲的多路徑傳輸。業(yè)務管理接口承載一些特殊業(yè)務流量的系統(tǒng)接口，這些特殊業(yè)務包括熱遷移虛擬機、虛擬機主機容災、虛擬化SAN存儲心跳檢測等。系統(tǒng)接口故障點分析故障點網口綁定異常業(yè)務管理接口異常存儲接口異?？赡艿墓收显蚓W絡異常主機異常VRM異常排除故障排除網絡故障修復主機修復VRM系統(tǒng)接口涉及到底層網絡硬件，主機和VRM節(jié)點，排除故障時可自頂向下快速定位故障層次，然后再自底向上逐步排除故障點。系統(tǒng)接口故障案例 - 刪除存儲接口路由導致異常收集信息刪除存儲接口路由后，提示存儲鏈路中斷，關聯(lián)虛擬機不能使用定位故障主機與存儲設備通過三層網絡連接，主機的存儲接口和存儲設備的存儲IP地址不在同一網段，需

11、要設置靜態(tài)路由，使存儲平面能夠互通排除故障登錄主機為主機存儲接口配置靜態(tài)路由檢查確認告警消失業(yè)務正常維護管理故障處理主機和集群故障處理存儲故障處理網絡故障處理虛擬機和模板故障處理存儲資源池配置流程FusionCompute存儲池的故障處理，可以參考該流程順序進行檢查。存儲池可能會涉及到如下關鍵故障點：存儲資源故障存儲設備故障數據存儲故障虛擬磁盤故障添加站點的存儲資源判斷存儲設備類型Advanced SANFusionStorage向主機關聯(lián)存儲資源掃描存儲設備添加數據存儲創(chuàng)建磁盤NASFC/IP SAN本地存儲存儲資源池故障點存儲資源故障不能添加、修改、刪除存儲資源不能關聯(lián)存儲資源存儲設備故障

12、掃描不到存儲設備數據存儲故障添加、修改、移除數據存儲異常關聯(lián)、解關聯(lián)主機異常數據存儲異常虛擬磁盤故障創(chuàng)建、綁定、解綁定、刪除虛擬磁盤異常調整容量異?？煺债惓＿w移異常存儲資源、存儲設備故障點分析故障點不能添加、修改、刪除存儲資源不能關聯(lián)存儲資源掃描不到存儲設備可能的故障原因存儲網絡鏈路異常對端存儲設備異常主機存儲接口異常排除故障排除存儲網絡鏈路故障排除對端存儲設備故障修復主機存儲接口配置FusionCompute存儲資源、存儲設備故障涉及到對端存儲設備配置，存儲鏈路，存儲接口等，需要逐步排錯。存儲資源故障案例 - 存儲資源管理鏈路中斷收集信息FusionCompute上報告警信息：存儲資源管理鏈

13、路中斷定位故障網絡異常存儲資源網口故障排除故障查看故障的存儲資源的名稱及出現(xiàn)故障的存儲資源管理IP登錄VRM節(jié)點查看VRM與故障的管理鏈路的IP能否正常通信網絡排查、修復檢查確認告警消失業(yè)務正常數據存儲故障點分析故障點不能添加、修改、移除數據存儲關聯(lián)、解關聯(lián)主機異常數據存儲異?？赡艿墓收显虼鎯W絡故障虛擬化的本地存儲文件系統(tǒng)損壞對應存儲設備損壞排除故障排除存儲網絡故障修復文件系統(tǒng)損壞修復磁盤損壞FusionCompute數據存儲涉及到虛擬化和非虛擬化數據存儲，也就是文件系統(tǒng)和塊存儲，需要重點關注這兩類故障。數據存儲故障案例 - VIMS文件系統(tǒng)損壞收集信息共享存儲的VIMS文件系統(tǒng)損壞定位故

14、障系統(tǒng)文件元數據損壞或用戶文件元數據損壞超級塊損壞或文件系統(tǒng)根目錄損壞排除故障停止故障存儲設備上的業(yè)務運行fsck修復只讀卷恢復故障存儲設備上的業(yè)務運行檢查確認告警消失業(yè)務正常虛擬磁盤故障點分析故障點不能創(chuàng)建、綁定、解綁定、刪除虛擬磁盤調整容量異?？煺债惓４疟P遷移異常可能的故障原因數據存儲異常磁盤類型限制磁盤配置模式限制虛擬機狀態(tài)限制排除故障修復數據存儲更改磁盤類型更改磁盤配置模式更改虛擬機狀態(tài)FusionCompute上的虛擬機，如果綁定的虛擬磁盤出現(xiàn)故障，會影響到業(yè)務和數據，故障排除時需提前備份數據。虛擬磁盤故障案例 - 磁盤無法在線擴容收集信息虛擬機磁盤不能在線擴容定位故障磁盤所屬的數據

15、存儲類型不支持擴容磁盤配置模式不支持在線擴容虛擬機操作系統(tǒng)不支持在線擴容排除故障遷移磁盤到支持擴容的數據存儲上更改磁盤配置模式重啟虛擬機檢查確認磁盤擴容成功，業(yè)務正常維護管理故障處理主機和集群故障處理存儲故障處理網絡故障處理虛擬機和模板故障處理網絡池創(chuàng)建流程FusionCompute網絡池的故障處理，可以參考該流程順序進行檢查。網絡池可能會涉及到如下關鍵故障點：分布式交換機故障上行鏈路故障VLAN池故障子網故障端口組故障因網絡池的各個組件關聯(lián)緊密，可以統(tǒng)一概括成如下故障：虛擬機之間通訊故障虛擬機和外部網絡通訊故障創(chuàng)建分布式交換機已有可用的分布式交換機？否添加上行鏈路添加VLAN池 (可選)添加

16、子網 (可選)配置VTEP (可選)是創(chuàng)建端口組虛擬機之間通訊故障故障點同一主機上，虛擬機之間通訊故障不同主機上，虛擬機之間通訊故障可能的故障原因端口組配置異常分布式交換機配置異常VLAN池配置異常子網配置異常排除故障修復端口組配置修復分布式交換機配置修復VLAN池配置修復子網配置虛擬機可能分別屬于不同分布式交換機，歸屬于不同端口組，使用不同上行鏈路，需要逐一進行故障排除。虛擬機之間通訊故障案例 - 兩臺虛擬機無法通訊收集信息同一主機上的兩臺虛擬機無法通訊定位故障虛擬機自身網絡異常虛擬機所屬的端口組不同虛擬機所屬的分布式交換機不同排除故障修復故障虛擬機自身網絡配置更改故障虛擬機所屬端口組檢查所

17、屬的分布式交換機檢查確認網絡正常，業(yè)務正常虛擬機和外部網絡通訊故障故障點虛擬機不能訪問外部網絡虛擬機訪問外部網絡慢可能的故障原因上行鏈路異常主機網絡服務異常外部交換機配置異常硬件故障排除故障修復上行鏈路修復主機網絡服務修復外部交換機配置排除硬件故障虛擬機和外部網絡通訊涉及到底層主機、網卡、外部交換機等，需要逐一進行故障排除。網絡通訊故障案例 - 綁定網口后網絡不通收集信息FusionCompute綁定網口后網絡不通定位故障上行鏈路綁定模式外部交換機鏈路匯聚模式排除故障修改上行鏈路綁定模式修改外部交換機端口匯聚模式檢查確認網絡正常，業(yè)務正常維護管理故障處理主機和集群故障處理存儲故障處理網絡故障處

18、理虛擬機和模板故障處理虛擬機創(chuàng)建方式創(chuàng)建空虛擬機創(chuàng)建空虛擬機時，可選擇創(chuàng)建在主機或集群上，并可自定義CPU、內存、磁盤、網卡等規(guī)格?？仗摂M機創(chuàng)建完成后，需要在上面安裝操作系統(tǒng)。使用模板創(chuàng)建虛擬機按模板部署虛擬機或模板導入虛擬機時，以下屬性繼承自模板，其他屬性可自定義。虛擬機的操作系統(tǒng)類型和操作系統(tǒng)版本號虛擬機磁盤的數量和容量虛擬機的網卡數使用虛擬機創(chuàng)建虛擬機克隆虛擬機過程中，以下屬性繼承自原虛擬機，其他屬性可自定義。虛擬機的操作系統(tǒng)類型和操作系統(tǒng)版本號虛擬機磁盤的數量和容量虛擬機的網卡數如果有一個要經?？寺〉奶摂M機，可以將該虛擬機轉換為模板。虛擬機創(chuàng)建流程FusionCompute三種虛擬機創(chuàng)建方式都需要經過“選擇創(chuàng)建位置”、“設置虛擬機屬性”、“設置網卡和磁盤”和“創(chuàng)建虛擬機”四個過程。虛擬機創(chuàng)建、調整、回收、操作和虛擬機模板轉換、管理等故障都可以參考該流程逐一檢查。選擇創(chuàng)建位置集群 or 主機設置虛擬機屬性虛擬機名稱操作系統(tǒng)類型、版本號硬件規(guī)格 (CPU內存磁盤數網卡數)虛擬機藍屏策略設置網卡和磁盤網卡所屬的分布式交換機和端口組磁盤屬性 (數據存儲、配置模式、容量、是否受