_iMC智能管理中心使用規(guī)范與常見故障排除

1、業(yè)務(wù)軟件產(chǎn)品使用規(guī)范業(yè)務(wù)軟件產(chǎn)品使用規(guī)范日期：杭州華三通信技術(shù)有限公司 版權(quán)所有，未經(jīng)授權(quán)不得使用與傳播n 為了最大程度地避免人為因素引起的故障，對(duì)規(guī)范為了最大程度地避免人為因素引起的故障，對(duì)規(guī)范性的要求貫穿網(wǎng)絡(luò)管理系統(tǒng)的整個(gè)建設(shè)和運(yùn)維過程。性的要求貫穿網(wǎng)絡(luò)管理系統(tǒng)的整個(gè)建設(shè)和運(yùn)維過程。引入引入課程目標(biāo)課程目標(biāo)學(xué)習(xí)完本課程，您應(yīng)該能夠：學(xué)習(xí)完本課程，您應(yīng)該能夠：n 理解產(chǎn)品使用規(guī)范的重要性理解產(chǎn)品使用規(guī)范的重要性n 掌握業(yè)務(wù)軟件產(chǎn)品的使用規(guī)范掌握業(yè)務(wù)軟件產(chǎn)品的使用規(guī)范n 產(chǎn)品部署規(guī)范產(chǎn)品部署規(guī)范n 服務(wù)器配置規(guī)范服務(wù)器配置規(guī)范n 產(chǎn)品運(yùn)維規(guī)范產(chǎn)品運(yùn)維規(guī)范目錄目錄5iMC服務(wù)器整體要求服務(wù)器整體

2、要求l服務(wù)器專機(jī)專用，除必要的軟件之外，不再安裝其他應(yīng)用軟件服務(wù)器專機(jī)專用，除必要的軟件之外，不再安裝其他應(yīng)用軟件l服務(wù)器的操作系統(tǒng)和數(shù)據(jù)庫(kù)軟件為合法版本（不允許使用盜版軟件）服務(wù)器的操作系統(tǒng)和數(shù)據(jù)庫(kù)軟件為合法版本（不允許使用盜版軟件）l服務(wù)器需要安裝防病毒軟件并確保病毒庫(kù)及時(shí)更新服務(wù)器需要安裝防病毒軟件并確保病毒庫(kù)及時(shí)更新l建議不允許建議不允許iMC服務(wù)器訪問服務(wù)器訪問Internetl對(duì)于關(guān)鍵業(yè)務(wù)，要求必須使用雙機(jī)備份機(jī)制，避免服務(wù)器單點(diǎn)故障對(duì)于關(guān)鍵業(yè)務(wù)，要求必須使用雙機(jī)備份機(jī)制，避免服務(wù)器單點(diǎn)故障l對(duì)于單臺(tái)對(duì)于單臺(tái)iMC服務(wù)器，要求必須開啟本機(jī)的數(shù)據(jù)庫(kù)定期備份功能服務(wù)器，要求必須開啟本機(jī)

3、的數(shù)據(jù)庫(kù)定期備份功能l建議服務(wù)器僅開放建議服務(wù)器僅開放iMC產(chǎn)品相關(guān)端口，并使用防火墻、入侵檢測(cè)等產(chǎn)品相關(guān)端口，并使用防火墻、入侵檢測(cè)等安全設(shè)備保護(hù)安全設(shè)備保護(hù)iMC服務(wù)器服務(wù)器6iMC產(chǎn)品整體部署建議產(chǎn)品整體部署建議l為了使得為了使得iMC系統(tǒng)能夠達(dá)到基本的運(yùn)行環(huán)境要系統(tǒng)能夠達(dá)到基本的運(yùn)行環(huán)境要求，需根據(jù)各組件的特點(diǎn)結(jié)合現(xiàn)網(wǎng)環(huán)境，采用求，需根據(jù)各組件的特點(diǎn)結(jié)合現(xiàn)網(wǎng)環(huán)境，采用合理的分布式部署方案合理的分布式部署方案liMC Platform獨(dú)立服務(wù)器liMC UAM/EAD推薦獨(dú)立服務(wù)器liMC UBA/NTA獨(dú)立服務(wù)器（可分布式多臺(tái)服務(wù)器）liMC WSM獨(dú)立服務(wù)器7iMC產(chǎn)品升級(jí)規(guī)范產(chǎn)品升

4、級(jí)規(guī)范l升級(jí)前基本步驟和操作規(guī)范升級(jí)前基本步驟和操作規(guī)范閱讀待升級(jí)版本的版本說明書制定正確的升級(jí)順序?qū)⑸?jí)包以原始的.zip格式上傳至服務(wù)器手工停止iMC的所有進(jìn)程備份數(shù)據(jù)庫(kù)以及客戶化的配置文件按順序執(zhí)行升級(jí)操作升級(jí)完畢后重新啟動(dòng)iMC并檢查各進(jìn)程運(yùn)行情況n 產(chǎn)品部署規(guī)范產(chǎn)品部署規(guī)范n 服務(wù)器配置規(guī)范服務(wù)器配置規(guī)范n 產(chǎn)品運(yùn)維規(guī)范產(chǎn)品運(yùn)維規(guī)范目錄目錄9iMC系統(tǒng)對(duì)服務(wù)器的整體要求系統(tǒng)對(duì)服務(wù)器的整體要求liMC系統(tǒng)對(duì)服務(wù)器的整體要求系統(tǒng)對(duì)服務(wù)器的整體要求CPU系統(tǒng)物理內(nèi)存iMC Web server的Java進(jìn)程占用的內(nèi)存iMC的安裝路徑所在磁盤空間iMC的部署路徑所在磁盤空間10iMC平臺(tái)服務(wù)

5、器配置平臺(tái)服務(wù)器配置l配置配置iMC平臺(tái)服務(wù)器需要考慮的關(guān)鍵因素平臺(tái)服務(wù)器需要考慮的關(guān)鍵因素管理設(shè)備數(shù)量設(shè)備輪詢間隔性能采集單元數(shù)量在線操作員數(shù)量11UBA/NTA服務(wù)器配置服務(wù)器配置l配置配置UBA/NTA服務(wù)器需要考慮的關(guān)鍵因素服務(wù)器需要考慮的關(guān)鍵因素待分析流量中包含的會(huì)話數(shù)（NetStream或DIG日志）日志設(shè)備產(chǎn)生流記錄的速率（NetStream日志）使能日志采集的網(wǎng)絡(luò)設(shè)備接口數(shù)（SFlow日志）待分析的流量大?。―IG日志）n 產(chǎn)品部署規(guī)范產(chǎn)品部署規(guī)范n 服務(wù)器配置規(guī)范服務(wù)器配置規(guī)范n 產(chǎn)品運(yùn)維規(guī)范產(chǎn)品運(yùn)維規(guī)范目錄目錄13iMC系統(tǒng)每日巡檢規(guī)范系統(tǒng)每日巡檢規(guī)范l外部環(huán)境檢查外部環(huán)境

6、檢查外部狀況（供電、火警、煙塵、雷擊等）溫度濕度機(jī)房清潔度l檢查服務(wù)器操作系統(tǒng)環(huán)境檢查服務(wù)器操作系統(tǒng)環(huán)境網(wǎng)絡(luò)連接正常操作系統(tǒng)中不存在無(wú)用賬號(hào)操作系統(tǒng)中不存在與iMC產(chǎn)品無(wú)關(guān)的軟件操作系統(tǒng)是否存在可用的補(bǔ)丁更新服務(wù)器上的防病毒軟件是否存在可用更新操作系統(tǒng)的時(shí)區(qū)和時(shí)間配置正確14iMC系統(tǒng)每日巡檢規(guī)范（續(xù)）系統(tǒng)每日巡檢規(guī)范（續(xù)）l通過通過iMC部署監(jiān)控代理檢查部署監(jiān)控代理檢查服務(wù)器CPU利用率是否正常服務(wù)器內(nèi)存利用率是否正常服務(wù)器磁盤空間使用情況iMC各進(jìn)程的狀態(tài)及啟動(dòng)時(shí)間liMC平臺(tái)及各組件的平臺(tái)及各組件的License顯示正常顯示正常liMC服務(wù)器的操作日志中無(wú)異常記錄服務(wù)器的操作日志中無(wú)異常

7、記錄l檢查服務(wù)器冗余備份的工作情況檢查服務(wù)器冗余備份的工作情況15iMC系統(tǒng)定期巡檢規(guī)范系統(tǒng)定期巡檢規(guī)范l至少每半年更新一次操作系統(tǒng)、數(shù)據(jù)庫(kù)至少每半年更新一次操作系統(tǒng)、數(shù)據(jù)庫(kù)管理員以及管理員以及iMC各操作員的密碼各操作員的密碼l建議至少每月一次使用具有最新病毒定建議至少每月一次使用具有最新病毒定義的防病毒軟件執(zhí)行服務(wù)器全盤掃描義的防病毒軟件執(zhí)行服務(wù)器全盤掃描16iMC平臺(tái)運(yùn)維規(guī)范平臺(tái)運(yùn)維規(guī)范l網(wǎng)絡(luò)設(shè)備添加完整，設(shè)備類型識(shí)別正確網(wǎng)絡(luò)設(shè)備添加完整，設(shè)備類型識(shí)別正確l設(shè)備與網(wǎng)管之間的設(shè)備與網(wǎng)管之間的SNMP參數(shù)及參數(shù)及Telnet/SSH參數(shù)配置合理且相互匹配參數(shù)配置合理且相互匹配l拓?fù)淅L制完整，

8、建議使用自定義拓?fù)渫負(fù)淅L制完整，建議使用自定義拓?fù)鋖性能監(jiān)視任務(wù)配置合理性能監(jiān)視任務(wù)配置合理l告警轉(zhuǎn)發(fā)、過濾和轉(zhuǎn)儲(chǔ)策略配置合理告警轉(zhuǎn)發(fā)、過濾和轉(zhuǎn)儲(chǔ)策略配置合理17NTA/UBA運(yùn)維規(guī)范運(yùn)維規(guī)范l當(dāng)前磁盤當(dāng)前磁盤/數(shù)據(jù)庫(kù)空間使用率符合預(yù)期數(shù)據(jù)庫(kù)空間使用率符合預(yù)期l合理配置數(shù)據(jù)空間管理相關(guān)參數(shù)合理配置數(shù)據(jù)空間管理相關(guān)參數(shù)l日志采集設(shè)備（或探針服務(wù)器）的時(shí)區(qū)日志采集設(shè)備（或探針服務(wù)器）的時(shí)區(qū)和時(shí)間配置正確和時(shí)間配置正確l流量趨勢(shì)報(bào)表或行為審計(jì)結(jié)果符合預(yù)期流量趨勢(shì)報(bào)表或行為審計(jì)結(jié)果符合預(yù)期n 產(chǎn)品使用規(guī)范貫穿于方案規(guī)劃、實(shí)施和運(yùn)維的全流程產(chǎn)品使用規(guī)范貫穿于方案規(guī)劃、實(shí)施和運(yùn)維的全流程中，能夠有效杜絕問

9、題的發(fā)生，減少后期維護(hù)的工作中，能夠有效杜絕問題的發(fā)生，減少后期維護(hù)的工作量。在方案規(guī)劃之初，首先要根據(jù)業(yè)務(wù)的實(shí)際情況，量。在方案規(guī)劃之初，首先要根據(jù)業(yè)務(wù)的實(shí)際情況，同時(shí)考慮擴(kuò)容因素，評(píng)估需要的服務(wù)器軟硬件規(guī)格和同時(shí)考慮擴(kuò)容因素，評(píng)估需要的服務(wù)器軟硬件規(guī)格和部署方式；方案實(shí)施時(shí)，必須嚴(yán)謹(jǐn)、規(guī)范地完成初始部署方式；方案實(shí)施時(shí)，必須嚴(yán)謹(jǐn)、規(guī)范地完成初始配置；后期運(yùn)維時(shí)，需根據(jù)運(yùn)維要求，結(jié)合產(chǎn)品特點(diǎn)配置；后期運(yùn)維時(shí)，需根據(jù)運(yùn)維要求，結(jié)合產(chǎn)品特點(diǎn)建立完善的巡檢制度和操作規(guī)范，防患于未然。建立完善的巡檢制度和操作規(guī)范，防患于未然。本章總結(jié)本章總結(jié)杭州華三通信技術(shù)有限公司業(yè)務(wù)軟件產(chǎn)品排錯(cuò)指導(dǎo)業(yè)務(wù)軟件產(chǎn)品排

10、錯(cuò)指導(dǎo)日期：杭州華三通信技術(shù)有限公司 版權(quán)所有，未經(jīng)授權(quán)不得使用與傳播n 業(yè)務(wù)軟件產(chǎn)品的日常運(yùn)行與服務(wù)器、網(wǎng)絡(luò)以及被管業(yè)務(wù)軟件產(chǎn)品的日常運(yùn)行與服務(wù)器、網(wǎng)絡(luò)以及被管對(duì)象都關(guān)系密切。因?yàn)榄h(huán)境復(fù)雜，維護(hù)時(shí)可能遇到對(duì)象都關(guān)系密切。因?yàn)榄h(huán)境復(fù)雜，維護(hù)時(shí)可能遇到各種各樣的問題。掌握產(chǎn)品排錯(cuò)的技巧能夠加快問各種各樣的問題。掌握產(chǎn)品排錯(cuò)的技巧能夠加快問題分析和排查的速度，有效提高維護(hù)的效率。題分析和排查的速度，有效提高維護(hù)的效率。引入引入n 掌握產(chǎn)品排錯(cuò)技巧掌握產(chǎn)品排錯(cuò)技巧n 掌握收集信息的要求掌握收集信息的要求n 掌握典型問題的分析思路掌握典型問題的分析思路課程目標(biāo)課程目標(biāo)學(xué)習(xí)完本課程，您應(yīng)該能夠：學(xué)習(xí)完本

11、課程，您應(yīng)該能夠：n 信息收集整體要求信息收集整體要求n iMC 平臺(tái)排錯(cuò)指導(dǎo)平臺(tái)排錯(cuò)指導(dǎo)n iMC UBA/NTA排錯(cuò)指導(dǎo)排錯(cuò)指導(dǎo)目錄目錄24業(yè)務(wù)軟件產(chǎn)品排錯(cuò)信息收集整體要求業(yè)務(wù)軟件產(chǎn)品排錯(cuò)信息收集整體要求liMC軟件的版本軟件的版本l服務(wù)器硬件信息服務(wù)器硬件信息l服務(wù)器軟件信息服務(wù)器軟件信息l故障現(xiàn)象的詳細(xì)描述故障現(xiàn)象的詳細(xì)描述l故障發(fā)生前后的操作故障發(fā)生前后的操作l被管對(duì)象信息被管對(duì)象信息l組網(wǎng)信息組網(wǎng)信息liMC相關(guān)模塊的日志信息相關(guān)模塊的日志信息n 信息收集整體要求信息收集整體要求n iMC 平臺(tái)排錯(cuò)指導(dǎo)平臺(tái)排錯(cuò)指導(dǎo)n iMC UAM/EAD排錯(cuò)指導(dǎo)排錯(cuò)指導(dǎo)n iMC UBA/NTA

12、排錯(cuò)指導(dǎo)排錯(cuò)指導(dǎo)n iMC WSM排錯(cuò)指導(dǎo)排錯(cuò)指導(dǎo)目錄目錄26iMC平臺(tái)資源管理典型問題排查舉例平臺(tái)資源管理典型問題排查舉例l問題現(xiàn)象問題現(xiàn)象設(shè)備添加失敗或設(shè)備類別無(wú)法識(shí)別l基本排查步驟基本排查步驟檢查iMC與設(shè)備之間的網(wǎng)絡(luò)狀況檢查iMC與設(shè)備上的SNMP配置是否一致檢查設(shè)備當(dāng)前的CPU利用率是否過高收集并分析資源模塊的日志條件允許時(shí)，收集復(fù)現(xiàn)問題時(shí)iMC側(cè)的抓包 27iMC平臺(tái)告警管理典型問題排查舉例平臺(tái)告警管理典型問題排查舉例l問題現(xiàn)象問題現(xiàn)象設(shè)備上產(chǎn)生了告警但iMC上無(wú)記錄顯示l基本排查步驟基本排查步驟檢查設(shè)備上的SNMP Trap配置是否正確檢查iMC服務(wù)器上的告警過濾策略配置排查網(wǎng)絡(luò)

13、中是否存在訪問控制列表將Trap消息過濾檢查iMC的告警轉(zhuǎn)儲(chǔ)文件中是否存在記錄關(guān)閉未知告警過濾并嘗試復(fù)現(xiàn)問題對(duì)照告警定義列表中的Trap OID與設(shè)備告警信息中的Trap OID是否一致收集并分析iMC告警模塊的日志條件允許時(shí)，收集復(fù)現(xiàn)問題時(shí)iMC側(cè)的抓包28iMC平臺(tái)性能管理典型問題排查舉例平臺(tái)性能管理典型問題排查舉例l問題現(xiàn)象問題現(xiàn)象iMC WEB配置臺(tái)上顯示的數(shù)據(jù)與設(shè)備命令行查詢的結(jié)果有差異l基本排查步驟基本排查步驟確認(rèn)設(shè)備命令行查詢結(jié)果的含義和統(tǒng)計(jì)方法確認(rèn)iMC針對(duì)該性能指標(biāo)的計(jì)算公式和統(tǒng)計(jì)方法使用MIB工具讀取公式中各MIB節(jié)點(diǎn)的值并按照iMC公式計(jì)算結(jié)果收集并分析iMC性能模塊的日

14、志29iMC平臺(tái)拓?fù)涔芾淼湫蛦栴}排查舉例平臺(tái)拓?fù)涔芾淼湫蛦栴}排查舉例l問題現(xiàn)象問題現(xiàn)象設(shè)備之間實(shí)際有連接，而iMC拓?fù)渖巷@示無(wú)連接l基本排查步驟基本排查步驟檢查設(shè)備上是否正確配置了鄰居協(xié)議收集并分析設(shè)備的診斷信息收集并分析iMC拓?fù)淠K的日志收集平臺(tái)的config_db數(shù)據(jù)庫(kù)或拓?fù)鋬?nèi)存信息（條件允許）n 信息收集整體要求信息收集整體要求n iMC 平臺(tái)排錯(cuò)指導(dǎo)平臺(tái)排錯(cuò)指導(dǎo)n iMC UAM/EAD排錯(cuò)指導(dǎo)排錯(cuò)指導(dǎo)n iMC UBA/NTA排錯(cuò)指導(dǎo)排錯(cuò)指導(dǎo)n iMC WSM排錯(cuò)指導(dǎo)排錯(cuò)指導(dǎo)目錄目錄31用戶行為審計(jì)無(wú)記錄典型問題排查舉例用戶行為審計(jì)無(wú)記錄典型問題排查舉例l問題現(xiàn)象問題現(xiàn)象DIG采集

15、方式下，UBA服務(wù)器的用戶審計(jì)無(wú)最新數(shù)據(jù)顯示l基本排查步驟基本排查步驟檢查探針服務(wù)器上名為probe的進(jìn)程是否正常運(yùn)行檢查探針服務(wù)器的/data目錄下是否有日志文件生成檢查部署監(jiān)控代理中的相關(guān)進(jìn)程是否正常運(yùn)行排查網(wǎng)絡(luò)中是否存在訪問控制列表將UBA服務(wù)器下發(fā)給探針服務(wù)器的配置消息過濾檢查UBA服務(wù)器磁盤空間是否達(dá)到閾值檢查UBA服務(wù)器上的FTP主目錄下是否接收到文件檢查服務(wù)器的時(shí)區(qū)/時(shí)間設(shè)置是否正確收集并分析服務(wù)器配置以及調(diào)試級(jí)別的處理器日志32流量統(tǒng)計(jì)報(bào)表無(wú)數(shù)據(jù)典型問題排查舉例流量統(tǒng)計(jì)報(bào)表無(wú)數(shù)據(jù)典型問題排查舉例l問題現(xiàn)象問題現(xiàn)象采集Netstream日志，NTA服務(wù)器的流量統(tǒng)計(jì)報(bào)表無(wú)數(shù)據(jù)顯示l基本排查步驟基本排查步驟確認(rèn)設(shè)備的日志緩沖區(qū)中是否有日志生成確認(rèn)設(shè)備和服務(wù)器配置是否匹配檢查設(shè)備與服務(wù)器之間的網(wǎng)絡(luò)是否可達(dá)檢查部署監(jiān)控代理中的相關(guān)進(jìn)程是否正常運(yùn)行排查網(wǎng)絡(luò)中是否存在訪問控制列表將Netstream報(bào)文過濾檢查接收器和處理器的工作目錄下是否有臨時(shí)文件生成檢查日志設(shè)備和NTA服務(wù)器的時(shí)區(qū)/時(shí)間設(shè)置是否正確收集并分析調(diào)試級(jí)別的接收器和處理器日志n 排錯(cuò)是日常運(yùn)維中必不可少的一環(huán)，掌握業(yè)務(wù)軟排錯(cuò)是日常