網(wǎng)絡(luò)實(shí)戰(zhàn)演練方案模版樣本

XXXX分公司生產(chǎn)網(wǎng)絡(luò)系統(tǒng)實(shí)戰(zhàn)演習(xí)方案模版第0.07版XXXX技術(shù)管理部XXXX信息總中心二〇一二年二月

版本控制信息版本日期擬稿和修改闡明本文檔中所有內(nèi)容為XXXX股份有限公司機(jī)密和專屬所有。未經(jīng)XXXX股份有限公司明確書(shū)面允許，任何組織或個(gè)人不得以任何目、任何形式及任何手段復(fù)制或傳播本文檔某些或所有內(nèi)容。

目錄1 演習(xí)場(chǎng)景闡明 12 演習(xí)準(zhǔn)備工作 23 演習(xí)風(fēng)險(xiǎn)評(píng)估 24 演習(xí)場(chǎng)景一：上聯(lián)線路主備切換與路由器宕機(jī)演習(xí) 24.1 演習(xí)思路 24.2 演習(xí)環(huán)節(jié) 34.2.1 演習(xí)細(xì)則 34.3 演習(xí)應(yīng)急解決環(huán)節(jié) 64.3.1 操作環(huán)節(jié) 64.3.2 操作細(xì)則 65 演習(xí)場(chǎng)景二：內(nèi)外網(wǎng)核心互換機(jī)宕機(jī)演習(xí) 65.1 演習(xí)思路 65.2 演習(xí)環(huán)節(jié) 75.2.1 演習(xí)細(xì)則 75.3 演習(xí)應(yīng)急解決環(huán)節(jié) 105.3.1 操作環(huán)節(jié) 105.3.2 操作細(xì)則 116 演習(xí)場(chǎng)景三：主備防火墻宕機(jī)演習(xí) 116.1 演習(xí)思路 116.2 演習(xí)環(huán)節(jié) 116.2.1 演習(xí)細(xì)則 116.3 演習(xí)應(yīng)急解決環(huán)節(jié) 126.3.1 操作環(huán)節(jié) 126.3.2 操作細(xì)則 137 演習(xí)場(chǎng)景四：機(jī)構(gòu)接入線路主備切換與設(shè)備演習(xí) 137.1 演習(xí)思路 137.2 演習(xí)環(huán)節(jié) 137.2.1 演習(xí)細(xì)則 137.3 演習(xí)應(yīng)急解決環(huán)節(jié) 157.3.1 操作環(huán)節(jié) 167.3.2 操作細(xì)則 168 演習(xí)場(chǎng)景五：網(wǎng)控器演習(xí) 168.1 演習(xí)思路 168.2 演習(xí)環(huán)節(jié) 168.2.1 演習(xí)細(xì)則 168.3 演習(xí)應(yīng)急解決環(huán)節(jié) 188.3.1 操作環(huán)節(jié) 188.3.2 操作細(xì)則 189 演習(xí)場(chǎng)景六：線路運(yùn)營(yíng)商傳播設(shè)備演習(xí) 189.1 演習(xí)思路 189.2 演習(xí)環(huán)節(jié) 189.2.1 演習(xí)細(xì)則 189.3 演習(xí)應(yīng)急解決環(huán)節(jié) 199.3.1 操作環(huán)節(jié) 199.3.2 操作細(xì)則 20演習(xí)場(chǎng)景闡明根據(jù)分公司生產(chǎn)網(wǎng)絡(luò)系統(tǒng)架構(gòu)現(xiàn)況，本演習(xí)方案模版設(shè)計(jì)了六個(gè)演習(xí)場(chǎng)景，各演習(xí)場(chǎng)景演習(xí)內(nèi)容、演習(xí)目的與預(yù)期成果如下表所示：演習(xí)內(nèi)容演習(xí)目的合用范疇預(yù)期成果場(chǎng)景一：上聯(lián)路由器宕機(jī)及斷線演習(xí)驗(yàn)證分公司連接信息總中心、北京信息中心二條廣域網(wǎng)專線主備機(jī)制有效性。所有分公司有效。場(chǎng)景二：內(nèi)外網(wǎng)互換機(jī)宕機(jī)演習(xí)驗(yàn)證內(nèi)、外網(wǎng)任何一臺(tái)核心互換機(jī)宕機(jī)對(duì)機(jī)構(gòu)－CUPS系統(tǒng)ZNAP服務(wù)器之間網(wǎng)絡(luò)連接冗余機(jī)制有效性。采用五層網(wǎng)絡(luò)架構(gòu)分公司有效。場(chǎng)景三：防火墻宕機(jī)演習(xí)驗(yàn)證主備防火墻之間Failover切換機(jī)制有效性。所有分公司有效。場(chǎng)景四：機(jī)構(gòu)接入網(wǎng)絡(luò)宕機(jī)及斷線演習(xí)驗(yàn)證機(jī)構(gòu)主備線路接入主備切換機(jī)制有效性。所有分公司(主備引擎切換演習(xí)環(huán)節(jié)只合用于布置雙引擎如思科7600系列路由器分公司)有效。場(chǎng)景五網(wǎng)控器PRA線路異地災(zāi)備切換驗(yàn)證當(dāng)分公司網(wǎng)控器撥號(hào)下聯(lián)卡故障時(shí)，通過(guò)本地運(yùn)營(yíng)商將本地POS機(jī)主叫號(hào)碼映射至總中心400號(hào)碼后，由中心進(jìn)行遠(yuǎn)程統(tǒng)一災(zāi)備，以此來(lái)確認(rèn)分公司撥號(hào)下聯(lián)卡高可用機(jī)制有效性所有分公司有效。場(chǎng)景六3G災(zāi)備切換演習(xí)驗(yàn)證當(dāng)分公司生產(chǎn)網(wǎng)絡(luò)浮現(xiàn)突發(fā)故障導(dǎo)致本地網(wǎng)絡(luò)徹底癱瘓，或機(jī)構(gòu)上聯(lián)分公司兩根專線徹底中斷，交易數(shù)據(jù)無(wú)法上送時(shí)，使用分公司與機(jī)構(gòu)間布置3G無(wú)線網(wǎng)絡(luò)進(jìn)行通訊，實(shí)現(xiàn)本地機(jī)構(gòu)與商戶聯(lián)機(jī)交易迅速恢復(fù)。已經(jīng)布置了3G災(zāi)備線路分公司有效。演習(xí)場(chǎng)景七：傳播設(shè)備演習(xí)驗(yàn)證線路運(yùn)營(yíng)商傳播設(shè)備電源主備切換有效性、雙上聯(lián)光路切換有效性。所有分公司(關(guān)閉傳播設(shè)備主光路演習(xí)與關(guān)閉傳播設(shè)備主電源演習(xí)僅在運(yùn)營(yíng)商傳播設(shè)備支持時(shí)合用)有效。設(shè)定場(chǎng)景為也許浮現(xiàn)故障，通過(guò)演習(xí)驗(yàn)證網(wǎng)絡(luò)冗余性或應(yīng)急方案可行；演習(xí)設(shè)備為銀聯(lián)運(yùn)營(yíng)生產(chǎn)有關(guān)網(wǎng)絡(luò)設(shè)備，涉及防火墻、路由器、互換機(jī)、網(wǎng)控器及其他網(wǎng)絡(luò)設(shè)備；所有必要演習(xí)場(chǎng)景應(yīng)在一種演習(xí)籌劃內(nèi)完畢，但可安排在一種或持續(xù)各種窗口內(nèi)實(shí)行。各分公司應(yīng)根據(jù)附件5：《分公司演習(xí)場(chǎng)景建議表》選取演習(xí)場(chǎng)景，除上述演習(xí)場(chǎng)景之外，分公司可根據(jù)本單位生產(chǎn)網(wǎng)絡(luò)實(shí)際狀況，進(jìn)行演習(xí)場(chǎng)景補(bǔ)充。演習(xí)準(zhǔn)備工作對(duì)所有演習(xí)有關(guān)網(wǎng)絡(luò)設(shè)備(模塊)準(zhǔn)備好現(xiàn)場(chǎng)應(yīng)急備件；生產(chǎn)網(wǎng)絡(luò)系統(tǒng)所有網(wǎng)絡(luò)設(shè)備配備文獻(xiàn)須在設(shè)備本地存盤(pán)，并備份至TFTP服務(wù)器。在演習(xí)之前，向信息總中心提供網(wǎng)絡(luò)系統(tǒng)有關(guān)信息，重要有路由信息、設(shè)備連接信息、機(jī)構(gòu)線路信息和設(shè)備配備信息等，同步進(jìn)行生產(chǎn)網(wǎng)絡(luò)系統(tǒng)健康檢查，參見(jiàn)《附件3：分公司生產(chǎn)網(wǎng)絡(luò)系統(tǒng)演習(xí)準(zhǔn)備檢查項(xiàng)目表》。演習(xí)風(fēng)險(xiǎn)評(píng)估演習(xí)場(chǎng)景演習(xí)內(nèi)容影響風(fēng)險(xiǎn)評(píng)估場(chǎng)景一上聯(lián)線路主備切換與路由器宕機(jī)演習(xí)導(dǎo)致總中心交易服務(wù)器和分公司機(jī)構(gòu)之間丟包，但TCP連接不中斷或中斷后自行恢復(fù)。宕機(jī)后無(wú)法正常重啟宕機(jī)重啟后，某些模塊無(wú)法工作宕機(jī)后線路主、備機(jī)制無(wú)法生效場(chǎng)景二內(nèi)外網(wǎng)核心互換機(jī)宕機(jī)演習(xí)導(dǎo)致總中心交易服務(wù)器和分公司機(jī)構(gòu)之間丟包，但TCP連接不中斷或中斷后自行恢復(fù)；導(dǎo)致網(wǎng)控器上聯(lián)TCP主備卡切換,交易自動(dòng)恢復(fù)、網(wǎng)控器下聯(lián)TCP卡交易受影響。宕機(jī)后無(wú)法正常重啟宕機(jī)重啟后，某些模塊無(wú)法工作宕機(jī)后互換機(jī)/防火墻主備機(jī)制與路由系統(tǒng)冗余機(jī)制無(wú)法生效機(jī)構(gòu)連接中斷后無(wú)法自行恢復(fù)網(wǎng)控器上聯(lián)TCP卡主備須手工回切場(chǎng)景三主備防火墻宕機(jī)演習(xí)導(dǎo)致總中心交易服務(wù)器和分公司機(jī)構(gòu)之間丟包，但TCP連接不中斷或中斷后自行恢復(fù)。宕機(jī)后無(wú)法正常重啟宕機(jī)重啟后，某些模塊無(wú)法工作宕機(jī)后防火墻主備機(jī)制無(wú)法生效機(jī)構(gòu)連接中斷后無(wú)法自行恢復(fù)場(chǎng)景四機(jī)構(gòu)接入線路主備切換與設(shè)備演習(xí)導(dǎo)致總中心交易服務(wù)器和分公司機(jī)構(gòu)之間丟包，但TCP連接不中斷或中斷后自行恢復(fù)。宕機(jī)后無(wú)法正常重啟宕機(jī)重啟后，某些模塊無(wú)法工作宕機(jī)后線路主備機(jī)制無(wú)法生效機(jī)構(gòu)連接中斷后無(wú)法自行恢復(fù)場(chǎng)景五網(wǎng)控器PRA線路異地災(zāi)備切換本次演習(xí)將分公司撥號(hào)交易切換至總中心災(zāi)備環(huán)境，影響范疇為分公司網(wǎng)控器撥號(hào)交易運(yùn)營(yíng)商實(shí)行號(hào)碼映射時(shí)短暫影響撥號(hào)POS交易場(chǎng)景六3G災(zāi)備切換演習(xí)導(dǎo)致總中心交易服務(wù)器和分公司演習(xí)機(jī)構(gòu)之間丟包，但TCP連接不中斷或中斷后自行恢復(fù)。機(jī)構(gòu)連接中斷后無(wú)法自行恢復(fù)場(chǎng)景七:演習(xí)場(chǎng)景七：傳播設(shè)備演習(xí)導(dǎo)致總中心交易服務(wù)器和分公司機(jī)構(gòu)之間丟包，但TCP連接不中斷或中斷后自行恢復(fù)宕機(jī)后無(wú)法正常重啟宕機(jī)重啟后，某些模塊無(wú)法工作宕機(jī)后防火墻主備機(jī)制無(wú)法生效機(jī)構(gòu)連接中斷后無(wú)法自行恢復(fù)演習(xí)場(chǎng)景一：上聯(lián)線路主備切換與路由器宕機(jī)演習(xí)演習(xí)思路1、先后關(guān)閉上聯(lián)信息總中心、北京信息中心二臺(tái)路由器上廣域網(wǎng)接口，觀測(cè)路由能否自動(dòng)切換，并通過(guò)長(zhǎng)ping機(jī)構(gòu)地址來(lái)記錄路由切換時(shí)間。2、先后關(guān)閉上聯(lián)信息總中心、北京信息中心二臺(tái)路由器電源，觀測(cè)路由能否自動(dòng)切換，并通過(guò)長(zhǎng)ping機(jī)構(gòu)地址來(lái)記錄路由切換時(shí)間。要點(diǎn)：設(shè)備宕機(jī)演習(xí)前，須確認(rèn)廣域網(wǎng)線路、網(wǎng)絡(luò)路由、有關(guān)交易均已恢復(fù)至正常。演習(xí)環(huán)節(jié)環(huán)節(jié)演習(xí)內(nèi)容上聯(lián)北京信息中心線路斷線演習(xí)上聯(lián)信息總中心線路斷線演習(xí)上聯(lián)北京信息中心路由器宕機(jī)演習(xí)上聯(lián)信息總中心路由器宕機(jī)演習(xí)演習(xí)細(xì)則第一步：上聯(lián)北京信息中心線路斷線演習(xí)序號(hào)操作內(nèi)容操作人復(fù)核人1告知成員機(jī)構(gòu)、信息總中心即將進(jìn)行上聯(lián)線路斷線演習(xí)分公司總中心2登錄二臺(tái)內(nèi)網(wǎng)核心互換機(jī)執(zhí)行如下命令：ShowiprouteShowiproute確認(rèn)/13、/13、/24網(wǎng)段路由源自上聯(lián)北京信息中心路由器、/13網(wǎng)段路由源自上聯(lián)信息總中心路由器。分公司總中心3告知信息總中心網(wǎng)絡(luò)值班崗登錄CUPS系統(tǒng)ZNAP服務(wù)器，啟動(dòng)對(duì)分公司轄內(nèi)機(jī)構(gòu)主機(jī)地址長(zhǎng)Ping分公司總中心4告知信息總中心網(wǎng)絡(luò)值班崗登錄收單系統(tǒng)PNAP服務(wù)器，啟動(dòng)對(duì)分公司轄內(nèi)網(wǎng)控器上聯(lián)卡地址長(zhǎng)Ping分公司總中心5斷開(kāi)分公司上聯(lián)北京信息中心廣域網(wǎng)線路（拔出相應(yīng)網(wǎng)線）分公司總中心6信息總中心網(wǎng)絡(luò)值班崗觀測(cè)Ping包丟包狀況分公司總中心7觀測(cè)網(wǎng)管平臺(tái)應(yīng)有XX分公司至北京信息中心線路中斷、RPING不告示警分公司總中心8信息總中心網(wǎng)絡(luò)崗告知交易監(jiān)控崗，檢查分公司交易狀況；同步分公司自查交易狀況分公司總中心9恢復(fù)分公司上聯(lián)北京信息中心廣域網(wǎng)線路（插回網(wǎng)線）分公司總中心10線路恢復(fù)后執(zhí)行如下命令：ShowipospfneiShowipbgpsummary確認(rèn)該設(shè)備和相鄰設(shè)備動(dòng)態(tài)路由鄰居關(guān)系已經(jīng)正常建立分公司11登錄分公司二臺(tái)內(nèi)網(wǎng)核心互換機(jī)，執(zhí)行如下命令：ShiprouteShowiproute確認(rèn)/13網(wǎng)段路由源自上聯(lián)北京信息中心路由器、/13網(wǎng)段路由源自上聯(lián)信息總中心路由器分公司總中心第二步：上聯(lián)信息總中心線路斷線演習(xí)序號(hào)操作內(nèi)容操作人復(fù)核人1登錄二臺(tái)內(nèi)網(wǎng)核心互換機(jī)執(zhí)行如下命令：ShiprouteShowiproute確認(rèn)/13、/13、/24網(wǎng)段路由源自上聯(lián)北京信息中心路由器、/13網(wǎng)段路由源自上聯(lián)信息總中心路由器。分公司總中心2告知信息總中心網(wǎng)絡(luò)值班崗登錄CUPS系統(tǒng)ZNAP服務(wù)器，啟動(dòng)對(duì)分公司轄內(nèi)機(jī)構(gòu)主機(jī)地址長(zhǎng)Ping分公司總中心3告知信息總中心網(wǎng)絡(luò)值班崗登錄收單系統(tǒng)PNAP服務(wù)器，啟動(dòng)對(duì)分公司轄內(nèi)網(wǎng)控器上聯(lián)卡地址長(zhǎng)Ping分公司總中心4斷開(kāi)分公司上聯(lián)信息總中心廣域網(wǎng)線路（拔出相應(yīng)網(wǎng)線）分公司總中心5信息總中心網(wǎng)絡(luò)值班崗觀測(cè)Ping包丟包狀況分公司總中心6觀測(cè)網(wǎng)管平臺(tái)應(yīng)有XX分公司至信息總中心線路中斷、RPING不告示警分公司總中心7信息總中心網(wǎng)絡(luò)崗告知交易監(jiān)控崗，檢查分公司交易狀況；同步分公司自查交易狀況分公司總中心8恢復(fù)分公司上聯(lián)信息總中心廣域網(wǎng)線路（插回網(wǎng)線）分公司總中心9線路恢復(fù)后執(zhí)行如下命令：ShowipospfneiShowipbgpsummary確認(rèn)該設(shè)備和相鄰設(shè)備動(dòng)態(tài)路由鄰居關(guān)系已經(jīng)正常建立分公司10登錄分公司二臺(tái)內(nèi)網(wǎng)核心互換機(jī)，執(zhí)行如下命令：ShiprouteShowiproute確認(rèn)/13網(wǎng)段路由源自上聯(lián)北京信息中心路由器、/13網(wǎng)段路由源自上聯(lián)信息總中心路由器分公司總中心第三步：上聯(lián)北京信息路由器宕機(jī)演習(xí)序號(hào)操作內(nèi)容操作人復(fù)核人1告知信息總中心、轄內(nèi)各成員機(jī)構(gòu)，演習(xí)開(kāi)始分公司總中心2登錄二臺(tái)內(nèi)網(wǎng)核心互換機(jī)執(zhí)行如下命令：ShiprouteShowiproute確認(rèn)/13、/13、/24網(wǎng)段路由源自上聯(lián)北京信息中心路由器、/13網(wǎng)段路由源自上聯(lián)信息總中心路由器。分公司總中心3告知信息總中心網(wǎng)絡(luò)崗，在CUPS系統(tǒng)ZNAP服務(wù)器上啟動(dòng)到五家機(jī)構(gòu)主機(jī)長(zhǎng)ping分公司總中心4關(guān)閉上聯(lián)北京信息中心路由器電源（如雙電源設(shè)備，兩路電源都要關(guān)閉）分公司總中心5登錄內(nèi)網(wǎng)核心互換機(jī)執(zhí)行如下命令：ShowiprouteShowiproute確認(rèn)上述二條路由均源自上聯(lián)信息總中心路由器分公司總中心6觀測(cè)長(zhǎng)ping丟包狀況分公司總中心7觀測(cè)網(wǎng)管平臺(tái)應(yīng)有內(nèi)網(wǎng)核心互換機(jī)報(bào)到該路由器RPING不通、OSPFNEIGHBORDOWN報(bào)警分公司總中心三層網(wǎng)絡(luò)構(gòu)造分公司，需檢查場(chǎng)景二/環(huán)節(jié)一第8步7打開(kāi)上聯(lián)北京信息中心路由器電源（如雙電源設(shè)備，則兩個(gè)電源都打開(kāi)）分公司總中心8通過(guò)Console口監(jiān)測(cè)、記錄路由器重啟狀況，觀測(cè)路由器重啟有無(wú)異常，如有異常，則告知信息總中心網(wǎng)絡(luò)崗分公司總中心9路由器重啟完畢后，執(zhí)行如下命令：ShowipospfneiShowipbgpsummary確認(rèn)該設(shè)備和相鄰設(shè)備動(dòng)態(tài)路由鄰居關(guān)系已經(jīng)正常建立分公司總中心觀測(cè)長(zhǎng)ping丟包狀況三層網(wǎng)絡(luò)構(gòu)造分公司，需檢查場(chǎng)景二/環(huán)節(jié)一第12、13步10登錄分公司二臺(tái)內(nèi)網(wǎng)核心互換機(jī)，執(zhí)行如下命令：ShiprouteShowiproute確認(rèn)/13網(wǎng)段路由源自上聯(lián)北京信息中心路由器、/13網(wǎng)段路由源自上聯(lián)信息總中心路由器分公司總中心第四步：上聯(lián)信息總中心路由器宕機(jī)演習(xí)序號(hào)操作內(nèi)容操作人復(fù)核人告知信息總中心網(wǎng)絡(luò)崗，在CUPS系統(tǒng)ZNAP服務(wù)器上啟動(dòng)到五家機(jī)構(gòu)主機(jī)長(zhǎng)ping1關(guān)閉上聯(lián)信息總中心路由器電源（如雙電源設(shè)備，兩路電源都要關(guān)閉）分公司總中心2登錄二臺(tái)內(nèi)網(wǎng)核心互換機(jī)執(zhí)行如下環(huán)節(jié)：Shiproute確認(rèn)/13網(wǎng)段路由源自上聯(lián)北京信息中心路由器分公司總中心3信息總中心網(wǎng)絡(luò)值班崗記錄長(zhǎng)ping丟包數(shù)據(jù)，正常應(yīng)在五分鐘內(nèi)恢復(fù)分公司總中心4觀測(cè)網(wǎng)管平臺(tái)應(yīng)有內(nèi)網(wǎng)核心互換機(jī)報(bào)到該路由器RPING不通、OSPFNEIGHBORDOWN報(bào)警，記錄UMP平臺(tái)其他告警信息分公司總中心三層網(wǎng)絡(luò)構(gòu)造分公司，需檢查場(chǎng)景二/環(huán)節(jié)二第8步4信息總中心網(wǎng)絡(luò)崗告知交易監(jiān)控崗，檢查分公司交易狀況；同步分公司自查交易狀況分公司總中心5交易完全恢復(fù)正常后，打開(kāi)上聯(lián)信息總中心路由器電源（如雙電源設(shè)備，則兩個(gè)電源都打開(kāi)）分公司總中心6通過(guò)Console口監(jiān)測(cè)、記錄路由器重啟狀況，觀測(cè)路由器重啟有無(wú)異常，如有異常，則告知信息總中心網(wǎng)絡(luò)崗分公司總中心7路由器重啟完畢后，執(zhí)行如下命令：ShowipospfneiShowipbgpsummary確認(rèn)該設(shè)備和相鄰設(shè)備動(dòng)態(tài)路由鄰居關(guān)系已經(jīng)正常建立分公司總中心觀測(cè)長(zhǎng)ping丟包狀況三層網(wǎng)絡(luò)構(gòu)造分公司，需檢查場(chǎng)景二/環(huán)節(jié)二第12、13步8登錄分公司二臺(tái)內(nèi)網(wǎng)核心互換機(jī)，執(zhí)行如下命令：ShiprouteShowiproute確認(rèn)/13網(wǎng)段路由源自上聯(lián)北京信息中心路由器、/13網(wǎng)段路由源自上聯(lián)信息總中心路由器分公司總中心9信息總中心網(wǎng)絡(luò)崗告知交易監(jiān)控崗，檢查分公司交易狀況；同步分公司自查交易狀況分公司總中心10確認(rèn)分公司交易完全正常后，本演習(xí)場(chǎng)景結(jié)束分公司總中心演習(xí)應(yīng)急解決環(huán)節(jié)在演習(xí)過(guò)程中，如網(wǎng)絡(luò)設(shè)備關(guān)機(jī)后，交易（CUPS系統(tǒng)ZNAP上長(zhǎng)ping或收單系統(tǒng)PNAP上長(zhǎng)ping或有關(guān)監(jiān)控崗位發(fā)現(xiàn)告警）受影響，且在5分鐘內(nèi)無(wú)法恢復(fù)，則應(yīng)及時(shí)恢復(fù)系統(tǒng)。如系統(tǒng)重啟異?；驘o(wú)法重啟則執(zhí)行如下應(yīng)急解決環(huán)節(jié)：操作環(huán)節(jié)環(huán)節(jié)操作內(nèi)容分公司使用預(yù)先準(zhǔn)備備件進(jìn)行緊急更換將原先保存故障設(shè)備配備文獻(xiàn)導(dǎo)入備件將備件接入網(wǎng)絡(luò)，替代故障設(shè)備檢查網(wǎng)絡(luò)與否恢復(fù)正常協(xié)調(diào)集成商更換故障設(shè)備操作細(xì)則序號(hào)操作內(nèi)容操作人復(fù)核人1與信息總中心網(wǎng)絡(luò)崗協(xié)商后，使用預(yù)先準(zhǔn)備設(shè)備備件進(jìn)行緊急更換分公司總中心2將原先TFTP服務(wù)器上保存故障設(shè)備配備文獻(xiàn)導(dǎo)入備件分公司總中心3將備件接入生產(chǎn)網(wǎng)絡(luò)，替代故障設(shè)備分公司總中心4檢查網(wǎng)絡(luò)與否恢復(fù)正常，執(zhí)行如下命令：Shcdpnei/*檢查CDPneighbor與否正常建立Shipospfnei/*檢查路由鄰居關(guān)系與否建立Shipbgpsum/*檢查與總中心BGP鄰居與否建立Shipbgp/*檢查與否已經(jīng)學(xué)習(xí)到BGP路由分公司總中心5依照維保合同，協(xié)調(diào)集成商更換故障設(shè)備分公司總中心演習(xí)場(chǎng)景二：內(nèi)外網(wǎng)核心互換機(jī)宕機(jī)演習(xí)演習(xí)思路依次對(duì)內(nèi)網(wǎng)主用核心互換機(jī)、內(nèi)網(wǎng)備用核心互換機(jī)、外網(wǎng)主用核心互換機(jī)、外網(wǎng)備用核心互換機(jī)進(jìn)行關(guān)機(jī)演習(xí)；通過(guò)長(zhǎng)Ping機(jī)構(gòu)地址和內(nèi)網(wǎng)網(wǎng)控器TCP卡地址，確認(rèn)路由系統(tǒng)、防火墻系統(tǒng)冗余機(jī)制有效性。注：1、關(guān)閉下一臺(tái)互換機(jī)前，需確認(rèn)前一臺(tái)互換機(jī)已重啟完畢并恢復(fù)正常（涉及路由等），同步Primary防火墻為Active狀態(tài)。2、互換模塊內(nèi)嵌分公司不必進(jìn)行相應(yīng)互換機(jī)宕機(jī)演習(xí)。演習(xí)環(huán)節(jié)環(huán)節(jié)操作內(nèi)容內(nèi)網(wǎng)主用核心互換機(jī)宕機(jī)演習(xí)內(nèi)網(wǎng)備用核心互換機(jī)宕機(jī)演習(xí)外網(wǎng)主用核心互換機(jī)宕機(jī)演習(xí)外網(wǎng)備用核心互換機(jī)宕機(jī)演習(xí)演習(xí)細(xì)則第一步：內(nèi)網(wǎng)主用核心互換機(jī)宕機(jī)序號(hào)操作內(nèi)容操作人復(fù)核人1告知信息總中心網(wǎng)絡(luò)值班崗，開(kāi)始關(guān)閉內(nèi)網(wǎng)主用核心互換機(jī)分公司總中心2登錄上聯(lián)信息總中心路由器，執(zhí)行如下命令：Shiproute144.x.x.x(轄內(nèi)機(jī)構(gòu)地址)確認(rèn)存在四條路由，且分別源自兩臺(tái)內(nèi)網(wǎng)核心互換機(jī)分公司總中心3告知信息總中心登錄CUPS系統(tǒng)ZNAP服務(wù)器，啟動(dòng)對(duì)機(jī)構(gòu)地址長(zhǎng)Ping；告知信息總中心在二代收單PNAP上啟動(dòng)對(duì)分公司NAC所有上聯(lián)卡地址長(zhǎng)Ping分公司總中心4關(guān)閉內(nèi)網(wǎng)主用互換機(jī)電源（如雙電源設(shè)備，則雙路電源均須關(guān)閉）分公司總中心5登錄分公司上聯(lián)信息總中心路由器，執(zhí)行如下命令：Shiproute144.x.x.x（轄內(nèi)機(jī)構(gòu)地址）確認(rèn)機(jī)構(gòu)路由源自內(nèi)網(wǎng)備用互換機(jī)分公司總中心6信息總中心網(wǎng)絡(luò)值班崗記錄對(duì)機(jī)構(gòu)端服務(wù)器長(zhǎng)Ping丟包狀況分公司總中心7信息總中心網(wǎng)絡(luò)崗告知交易監(jiān)控崗，檢查分公司交易狀況；同步分公司自查交易狀況分公司總中心8觀測(cè)網(wǎng)管平臺(tái)應(yīng)有內(nèi)網(wǎng)備用核心互換機(jī)報(bào)到該主用互換機(jī)RPING不通、OSPFNEIGHBORDOWN告警，同步有防火墻報(bào)FAILOVER異常告警分公司總中心9告知信息總中心網(wǎng)絡(luò)值班崗，同步啟動(dòng)內(nèi)網(wǎng)主用互換機(jī)電源分公司總中心10設(shè)備正常啟動(dòng)后，確認(rèn)路由鄰居關(guān)系已正常建立：Shipospfnei分公司總中心11登錄上聯(lián)信息總中心路由器，檢查確認(rèn)路由與否恢復(fù)正常：Shiproute144.x.x.x(轄內(nèi)機(jī)構(gòu)地址)確認(rèn)存在四條路由，且分別源自二臺(tái)內(nèi)網(wǎng)核心互換機(jī)分公司總中心觀測(cè)長(zhǎng)ping丟包狀況12登錄防火墻系統(tǒng)檢查Failover狀態(tài)（此時(shí)防火墻系統(tǒng)應(yīng)已發(fā)生主備切換）ShfailoverShconn確認(rèn)防火墻系統(tǒng)Failover工作狀態(tài)正常，TCP鏈接信息已同步分公司總中心13如果Secondary防火墻為Active狀態(tài)，則執(zhí)行如下命令進(jìn)行回切：登錄Primary防火墻（Standby狀態(tài)）telnet144.x.9.xConfigtFailoveractive分公司總中心14信息總中心網(wǎng)絡(luò)崗告知交易監(jiān)控崗，檢查分公司交易狀況；同步分公司自查交易狀況；分公司總中心第二步：內(nèi)網(wǎng)備用核心互換機(jī)宕機(jī)演習(xí)序號(hào)操作內(nèi)容操作人復(fù)核人1告知信息總中心網(wǎng)絡(luò)值班崗，開(kāi)始關(guān)閉內(nèi)網(wǎng)備用核心互換機(jī)分公司總中心2登錄上聯(lián)信息總中心路由器，執(zhí)行如下命令Shiproute144.x.x.x(轄內(nèi)機(jī)構(gòu)地址)確認(rèn)存在四條路由，且分別源自兩臺(tái)內(nèi)網(wǎng)核心互換機(jī)分公司總中心3告知信息總中心CUPS系統(tǒng)ZNAP服務(wù)器，啟動(dòng)對(duì)機(jī)構(gòu)地址長(zhǎng)Ping；告知信息總中心在二代收單PNAP上啟動(dòng)對(duì)分公司NAC所有上聯(lián)卡地址長(zhǎng)Ping分公司總中心4關(guān)閉內(nèi)網(wǎng)備用互換機(jī)電源（如雙電源設(shè)備，則雙路電源均須關(guān)閉）分公司總中心5登錄分公司上聯(lián)信息總中心路由器，執(zhí)行如下命令：Shiproute144.x.x.x（轄內(nèi)機(jī)構(gòu)地址）確認(rèn)機(jī)構(gòu)路由源自內(nèi)網(wǎng)主用核心互換機(jī)分公司總中心6信息總中心網(wǎng)絡(luò)值班崗記錄對(duì)機(jī)構(gòu)端地址長(zhǎng)Ping丟包狀況分公司總中心7信息總中心網(wǎng)絡(luò)崗告知交易監(jiān)控崗，檢查分公司交易狀況；同步分公司自查交易狀況分公司總中心8觀測(cè)網(wǎng)管平臺(tái)應(yīng)有內(nèi)網(wǎng)主用核心互換機(jī)報(bào)到該備用互換機(jī)RPING不通、OSPFNEIGHBORDOWN告警分公司總中心8告知信息總中心網(wǎng)絡(luò)值班崗，同步啟動(dòng)內(nèi)網(wǎng)備用互換機(jī)電源分公司總中心9通過(guò)Console口監(jiān)測(cè)、記錄互換機(jī)重啟狀況，觀測(cè)重啟有無(wú)異常，如有異常，則告知信息總中心網(wǎng)絡(luò)崗分公司總中心10設(shè)備正常啟動(dòng)后，確認(rèn)路由鄰居關(guān)系已正常建立：Shipospfnei分公司總中心11登錄上聯(lián)信息總中心路由器，檢查確認(rèn)路由與否恢復(fù)正常：Shiproute144.x.x.x(轄內(nèi)機(jī)構(gòu)地址)確認(rèn)存在四條路由，且分別源自二臺(tái)內(nèi)網(wǎng)核心互換機(jī)分公司總中心觀測(cè)長(zhǎng)ping丟包狀況12登錄防火墻系統(tǒng)檢查Failover狀態(tài)ShfailoverShconn確認(rèn)防火墻系統(tǒng)Failover工作狀態(tài)正常，主備防火墻TCP鏈接信息已同步分公司總中心13告知信息總中心外圍監(jiān)控崗，二臺(tái)內(nèi)網(wǎng)核心互換機(jī)宕機(jī)演習(xí)完畢，請(qǐng)其檢查分公司網(wǎng)控器上聯(lián)卡與二代收單PNAP、二代多渠道NASA連接狀況，如發(fā)生主備切換，則手工回切分公司總中心14信息總中心網(wǎng)絡(luò)崗告知交易監(jiān)控崗，檢查分公司交易狀況；同步分公司自查交易狀況分公司總中心第三步：外網(wǎng)主用核心互換機(jī)宕機(jī)演習(xí)序號(hào)操作內(nèi)容操作人復(fù)核人1告知總中心及轄內(nèi)機(jī)構(gòu)，開(kāi)始關(guān)閉外網(wǎng)主用核心互換機(jī)分公司總中心2登錄外網(wǎng)機(jī)構(gòu)線路接入重要網(wǎng)絡(luò)設(shè)備，執(zhí)行如下命令：Shiproute9.234.x.21(總CUPS系統(tǒng)ZNAP服務(wù)器映射后地址)確認(rèn)存在四條路由，分別源自二臺(tái)外網(wǎng)核心互換機(jī)分公司總中心3告知信息總中心網(wǎng)絡(luò)值班崗登錄CUPS系統(tǒng)ZNAP服務(wù)器，啟動(dòng)對(duì)機(jī)構(gòu)地址長(zhǎng)Ping分公司總中心4關(guān)閉外網(wǎng)主用核心互換機(jī)電源（如雙電源設(shè)備，則雙路電源均須關(guān)閉）分公司總中心5登錄外網(wǎng)機(jī)構(gòu)線路接入重要網(wǎng)絡(luò)設(shè)備，執(zhí)行如下命令：Shiproute9.234.x.21（總中心CUPS系統(tǒng)ZNAP服務(wù)器映射后地址）確認(rèn)存在二條路由，源自外網(wǎng)備用核心互換機(jī)分公司總中心6信息總中心網(wǎng)絡(luò)值班崗記錄對(duì)機(jī)構(gòu)端地址長(zhǎng)Ping丟包狀況；分公司總中心7信息總中心網(wǎng)絡(luò)崗告知交易監(jiān)控崗，檢查分公司交易狀況；同步分公司自查交易狀況分公司總中心8觀測(cè)網(wǎng)管平臺(tái)應(yīng)有外網(wǎng)備用核心互換機(jī)報(bào)到該主用互換機(jī)RPING不通、OSPFNEIGHBORDOWN告警，同步有防火墻報(bào)FAILOVER異常告警分公司總中心8告知信息總中心網(wǎng)絡(luò)值班崗，同步啟動(dòng)外網(wǎng)主用核心互換機(jī)電源分公司總中心9通過(guò)Console口監(jiān)測(cè)、記錄互換機(jī)重啟狀況，觀測(cè)重啟有無(wú)異常，如有異常，則告知信息總中心網(wǎng)絡(luò)崗分公司總中心10設(shè)備正常啟動(dòng)后，確認(rèn)動(dòng)態(tài)路由鄰居關(guān)系已正常建立：Shipospfnei或Shipeigrpnei分公司總中心觀測(cè)長(zhǎng)ping丟包狀況11登錄外網(wǎng)機(jī)構(gòu)線路接入重要網(wǎng)絡(luò)設(shè)備，執(zhí)行如下命令：Shiproute9.234.x.21(總中心CUPS系統(tǒng)ZNAP服務(wù)器映射后地址)確認(rèn)存在四條路由，分別源自二臺(tái)外網(wǎng)核心互換機(jī)分公司總中心12登錄防火墻系統(tǒng)檢查Failover狀態(tài)（此時(shí)防火墻系統(tǒng)應(yīng)已發(fā)生主備切換），執(zhí)行如下命令：ShfailoverShconn確認(rèn)防火墻系統(tǒng)Failover工作狀態(tài)正常，主備防火墻TCP鏈接信息已同步分公司總中心13如果Secondary防火墻為Active狀態(tài)，則執(zhí)行如下命令進(jìn)行回切：登錄Primary防火墻（Standby狀態(tài)），telnet144.x.9.xConfigtFailoveractive分公司總中心14信息總中心網(wǎng)絡(luò)崗告知交易監(jiān)控崗，檢查分公司交易狀況；同步分公司自查交易狀況分公司總中心第四步：外網(wǎng)備用核心互換機(jī)宕機(jī)演習(xí)序號(hào)操作內(nèi)容操作人復(fù)核人1告知總中心及轄內(nèi)機(jī)構(gòu)，開(kāi)始關(guān)閉外網(wǎng)備用核心互換機(jī)分公司總中心2登錄外網(wǎng)機(jī)構(gòu)線路接入重要網(wǎng)絡(luò)設(shè)備，執(zhí)行如下命令：Shiproute9.234.x.21(總中心CUPS系統(tǒng)ZNAP服務(wù)器映射后地址)確認(rèn)存在四條路由，分別源自二臺(tái)外網(wǎng)核心互換機(jī)分公司總中心3告知信息總中心網(wǎng)絡(luò)值班崗登錄CUPS系統(tǒng)ZNAP服務(wù)器，啟動(dòng)對(duì)機(jī)構(gòu)地址長(zhǎng)Ping分公司總中心4關(guān)閉外網(wǎng)備用核心互換機(jī)電源（如雙電源設(shè)備，則雙路電源均須關(guān)閉）分公司總中心5登錄外網(wǎng)機(jī)構(gòu)線路接入重要網(wǎng)絡(luò)設(shè)備，執(zhí)行如下命令：Shiproute9.234.x.21（總中心CUPS系統(tǒng)ZNAP服務(wù)器映射后地址）確認(rèn)存在二條路由，源自外網(wǎng)主用核心互換機(jī)分公司總中心6信息總中心網(wǎng)絡(luò)值班崗記錄對(duì)機(jī)構(gòu)端地址長(zhǎng)Ping丟包狀況分公司總中心7信息總中心網(wǎng)絡(luò)崗告知交易監(jiān)控崗，檢查分公司交易狀況；同步分公司自查交易狀況分公司總中心觀測(cè)網(wǎng)管平臺(tái)應(yīng)有內(nèi)網(wǎng)主用核心互換機(jī)報(bào)到該備用互換機(jī)RPING不通、OSPFNEIGHBORDOWN告警分公司總中心8告知信息總中心網(wǎng)絡(luò)值班崗，同步啟動(dòng)外網(wǎng)備用核心互換機(jī)電源分公司總中心9通過(guò)Console口監(jiān)測(cè)、記錄互換機(jī)重啟狀況，觀測(cè)重啟有無(wú)異常，如有異常，則告知信息總中心網(wǎng)絡(luò)崗分公司總中心觀測(cè)長(zhǎng)ping丟包狀況10設(shè)備正常啟動(dòng)后，確認(rèn)動(dòng)態(tài)路由鄰居關(guān)系已正常建立：Shipospfnei或Shipeigrpnei分公司總中心11登錄外網(wǎng)機(jī)構(gòu)線路接入重要網(wǎng)絡(luò)設(shè)備，執(zhí)行如下命令：Shiproute9.234.x.21(總中心CUPS系統(tǒng)ZNAP服務(wù)器映射后地址)確認(rèn)存在四條路由，分別源自二臺(tái)外網(wǎng)核心互換機(jī)分公司總中心12登錄防火墻系統(tǒng)檢查Failover狀態(tài)，執(zhí)行如下命令：ShfailoverShconn確認(rèn)防火墻系統(tǒng)Failover工作狀態(tài)正常，主備防火墻TCP鏈接信息已同步分公司總中心13信息總中心網(wǎng)絡(luò)崗告知交易監(jiān)控崗，檢查分公司交易狀況；同步分公司自查交易狀況分公司總中心14確認(rèn)分公司交易完全正常后，本演習(xí)場(chǎng)景結(jié)束分公司總中心演習(xí)應(yīng)急解決環(huán)節(jié)在演習(xí)過(guò)程中，如網(wǎng)絡(luò)設(shè)備關(guān)機(jī)后，交易（CUPS系統(tǒng)ZNAP上長(zhǎng)ping或收單系統(tǒng)PNAP上長(zhǎng)ping或有關(guān)監(jiān)控崗位發(fā)現(xiàn)告警）受影響，且在5分鐘內(nèi)無(wú)法恢復(fù)，則應(yīng)及時(shí)恢復(fù)系統(tǒng)。如系統(tǒng)重啟異常或無(wú)法重啟則執(zhí)行如下應(yīng)急解決環(huán)節(jié)：操作環(huán)節(jié)環(huán)節(jié)操作內(nèi)容第一步分公司使用預(yù)先準(zhǔn)備備件進(jìn)行緊急更換第二步將原先保存故障設(shè)備配備文獻(xiàn)導(dǎo)入備件第三步將備件接入網(wǎng)絡(luò)，替代故障設(shè)備第四步檢查網(wǎng)絡(luò)與否恢復(fù)正常第五步協(xié)調(diào)集成商更換故障設(shè)備操作細(xì)則序號(hào)操作內(nèi)容操作人復(fù)核人1與信息總中心網(wǎng)絡(luò)崗協(xié)商后，使用預(yù)先準(zhǔn)備設(shè)備備件進(jìn)行緊急更換分公司總中心2將原先TFTP服務(wù)器上保存故障設(shè)備配備文獻(xiàn)導(dǎo)入備件分公司總中心3將備件接入生產(chǎn)網(wǎng)絡(luò)，替代故障設(shè)備分公司總中心4檢查網(wǎng)絡(luò)與否恢復(fù)正常，執(zhí)行如下命令：Shcdpnei/*檢查CDPneighbor與否正常建立Shipospfnei/*檢查路由鄰居關(guān)系與否建立Shipbgpsum/*檢查與總中心BGP鄰居與否建立Shipbgp/*檢查與否已經(jīng)學(xué)習(xí)到BGP路由分公司總中心5依照維保合同，協(xié)調(diào)集成商更換故障設(shè)備分公司總中心演習(xí)場(chǎng)景三：主備防火墻宕機(jī)演習(xí)演習(xí)思路先后關(guān)閉分公司生產(chǎn)主用防火墻電源，驗(yàn)證防火墻系統(tǒng)Failover熱切換機(jī)制有效性。待主用防火墻正常啟動(dòng)、手動(dòng)回切為ACTIVE狀態(tài)，并檢查T(mén)CPSession已經(jīng)所有同步完畢后，再關(guān)閉備用防火墻。演習(xí)環(huán)節(jié)環(huán)節(jié)操作內(nèi)容第一步生產(chǎn)主用防火墻宕機(jī)演習(xí)演習(xí)細(xì)則序號(hào)操作內(nèi)容操作人復(fù)核人1告知信息總中心開(kāi)始實(shí)行防火墻系統(tǒng)宕機(jī)演習(xí)分公司總中心2先后登陸分公司二臺(tái)防火墻（144.x.9.x），檢查防火墻系統(tǒng)Failover狀態(tài)，執(zhí)行如下命令：ShfailoverShconn確認(rèn)防火墻系統(tǒng)Failover狀態(tài)正常，Primary防火墻為主用防火墻分公司總中心3告知信息總中心網(wǎng)絡(luò)值班崗登錄CUPS系統(tǒng)ZNAP服務(wù)器，啟動(dòng)對(duì)機(jī)構(gòu)地址長(zhǎng)Ping分公司總中心4關(guān)閉主用Priamry防火墻電源分公司總中心5信息總中心網(wǎng)絡(luò)值班崗記錄長(zhǎng)Ping丟包狀況分公司總中心觀測(cè)網(wǎng)管平臺(tái)應(yīng)有內(nèi)網(wǎng)主用核心互換機(jī)報(bào)到standby防火墻RPING不告示警，同步有防火墻報(bào)FAILOVER異常告警分公司總中心6啟動(dòng)防火墻電源分公司總中心7通過(guò)Console口監(jiān)測(cè)、記錄防火墻重啟狀況，觀測(cè)重啟有無(wú)異常，如有異常，則告知信息總中心網(wǎng)絡(luò)崗分公司總中心觀測(cè)長(zhǎng)ping丟包狀況8先后登陸分公司二臺(tái)防火墻（144.x.9.x），檢查防火墻系統(tǒng)Failover狀態(tài)，執(zhí)行如下命令：ShfailoverShconn確認(rèn)防火墻系統(tǒng)Failover狀態(tài)正常，此時(shí)Secondary防火墻為主用防火墻分公司總中心9登陸priamry防火墻，此時(shí)為standby狀態(tài)，進(jìn)行手工回切ConfigtFailoveractive退出防火墻分公司總中心10再次登陸primary防火墻，確認(rèn)防火墻在用TCPSession與否已經(jīng)所有同步，確認(rèn)防火墻已經(jīng)回切，primary防火墻為active狀態(tài)。ShconnShfailover分公司總中心11關(guān)閉主用Secondary防火墻電源分公司總中心12信息總中心網(wǎng)絡(luò)值班崗記錄長(zhǎng)Ping丟包狀況分公司總中心13觀測(cè)網(wǎng)管平臺(tái)應(yīng)有內(nèi)網(wǎng)主用核心互換機(jī)報(bào)到standby防火墻RPING不告示警，同步有防火墻報(bào)FAILOVER異常告警分公司總中心14啟動(dòng)防火墻電源分公司總中心15通過(guò)Console口監(jiān)測(cè)、記錄防火墻重啟狀況，觀測(cè)重啟有無(wú)異常，如有異常，則告知信息總中心網(wǎng)絡(luò)崗分公司總中心16觀測(cè)長(zhǎng)ping丟包狀況17先后登陸分公司二臺(tái)防火墻（144.x.9.x），檢查防火墻系統(tǒng)Failover狀態(tài)，執(zhí)行如下命令：ShfailoverShconn確認(rèn)防火墻系統(tǒng)Failover狀態(tài)正常，此時(shí)Primary防火墻為主用防火墻分公司總中心18信息總中心網(wǎng)絡(luò)崗告知交易監(jiān)控崗，檢查分公司交易狀況；同步分公司自查交易狀況分公司總中心19確認(rèn)分公司交易完全正常后，本演習(xí)場(chǎng)景結(jié)束分公司總中心演習(xí)應(yīng)急解決環(huán)節(jié)在演習(xí)過(guò)程中，如網(wǎng)絡(luò)設(shè)備關(guān)機(jī)后，交易（CUPS系統(tǒng)ZNAP上長(zhǎng)ping或收單系統(tǒng)PNAP上長(zhǎng)ping或有關(guān)監(jiān)控崗位發(fā)現(xiàn)告警）受影響，且在5分鐘內(nèi)無(wú)法恢復(fù)，則應(yīng)及時(shí)恢復(fù)系統(tǒng)。如系統(tǒng)重啟異?；驘o(wú)法重啟則執(zhí)行如下應(yīng)急解決環(huán)節(jié)：操作環(huán)節(jié)環(huán)節(jié)操作內(nèi)容第一步分公司使用預(yù)先準(zhǔn)備備件進(jìn)行緊急更換第二步將原先保存故障設(shè)備配備文獻(xiàn)導(dǎo)入備件第三步將備件接入網(wǎng)絡(luò)，替代故障設(shè)備第四步檢查網(wǎng)絡(luò)與否恢復(fù)正常第五步協(xié)調(diào)集成商更換故障設(shè)備操作細(xì)則序號(hào)操作內(nèi)容操作人復(fù)核人1與信息總中心網(wǎng)絡(luò)崗協(xié)商后，使用預(yù)先準(zhǔn)備設(shè)備備件進(jìn)行緊急更換分公司總中心2將原先TFTP服務(wù)器上保存故障設(shè)備配備文獻(xiàn)導(dǎo)入備件分公司總中心3將備件接入生產(chǎn)網(wǎng)絡(luò)，替代故障設(shè)備分公司總中心4檢查網(wǎng)絡(luò)與否恢復(fù)正常，執(zhí)行如下命令：Shcdpnei/*檢查CDPneighbor與否正常建立Shipospfnei/*檢查路由鄰居關(guān)系與否建立Shipbgpsum/*檢查與總中心BGP鄰居與否建立Shipbgp/*檢查與否已經(jīng)學(xué)習(xí)到BGP路由分公司總中心5依照維保合同，協(xié)調(diào)集成商更換故障設(shè)備分公司總中心演習(xí)場(chǎng)景四：機(jī)構(gòu)接入線路主備切換與設(shè)備演習(xí)演習(xí)思路關(guān)閉分公司所有雙線路機(jī)構(gòu)接入主線路接口進(jìn)行演習(xí),驗(yàn)證機(jī)構(gòu)接入雙線路切換機(jī)制有效性，觀測(cè)并記錄丟包狀況。關(guān)閉分公司機(jī)構(gòu)接入主路由器，進(jìn)行宕機(jī)演習(xí)，驗(yàn)證機(jī)構(gòu)接入雙線路切換機(jī)制有效性，觀測(cè)并記錄丟包狀況。針對(duì)分公司提供雙引擎網(wǎng)絡(luò)設(shè)備，進(jìn)行主備引擎切換演習(xí)，驗(yàn)證設(shè)備雙引擎切換機(jī)制有效性。演習(xí)環(huán)節(jié)環(huán)節(jié)操作內(nèi)容第一步機(jī)構(gòu)接入線路切換演習(xí)第二步機(jī)構(gòu)接入路由器宕機(jī)演習(xí)第三步機(jī)構(gòu)接入路由器主備引擎切換(僅針對(duì)提供雙引擎網(wǎng)絡(luò)設(shè)備)演習(xí)細(xì)則第一步：機(jī)構(gòu)接入線路斷線演習(xí)序號(hào)操作內(nèi)容操作人復(fù)核人1告知成員機(jī)構(gòu)、信息總中心即將進(jìn)行機(jī)構(gòu)接入網(wǎng)絡(luò)宕機(jī)演習(xí)分公司總中心2告知成員機(jī)構(gòu)檢查銀聯(lián)通信ZNAP路由應(yīng)源自機(jī)構(gòu)主線接入網(wǎng)絡(luò)設(shè)備分公司3告知信息總中心網(wǎng)絡(luò)值班崗登錄CUPS系統(tǒng)ZNAP服務(wù)器，啟動(dòng)對(duì)分公司轄內(nèi)銀行機(jī)構(gòu)地址長(zhǎng)Ping分公司總中心4關(guān)閉機(jī)構(gòu)接入網(wǎng)絡(luò)連接機(jī)構(gòu)主線路端口分公司總中心5信息總中心網(wǎng)絡(luò)值班崗觀測(cè)Ping包丟包狀況分公司總中心6觀測(cè)網(wǎng)管平臺(tái)應(yīng)有外網(wǎng)主用核心互換機(jī)報(bào)到該路由器RPING不告示警分公司總中心7信息總中心網(wǎng)絡(luò)崗告知交易監(jiān)控崗，檢查分公司交易狀況；同步分公司自查交易狀況分公司總中心8恢復(fù)機(jī)構(gòu)接入網(wǎng)絡(luò)連接機(jī)構(gòu)主線路端口分公司總中心9告知成員機(jī)構(gòu)檢查銀聯(lián)通信ZNAP路由應(yīng)源自機(jī)構(gòu)主線接入網(wǎng)絡(luò)設(shè)備分公司10執(zhí)行1-9步，演習(xí)其她機(jī)構(gòu)接入線路分公司總中心第二步：機(jī)構(gòu)接入路由器宕機(jī)演習(xí)序號(hào)操作內(nèi)容操作人復(fù)核人1告知成員機(jī)構(gòu)、信息總中心即將進(jìn)行機(jī)構(gòu)接入路由器宕機(jī)演習(xí)分公司總中心3告知信息總中心網(wǎng)絡(luò)值班崗登錄CUPS系統(tǒng)ZNAP服務(wù)器，啟動(dòng)對(duì)分公司轄內(nèi)銀行機(jī)構(gòu)地址長(zhǎng)Ping；分公司總中心4逐個(gè)關(guān)閉機(jī)構(gòu)備線路接入網(wǎng)絡(luò)設(shè)備、機(jī)構(gòu)單線路接入網(wǎng)絡(luò)設(shè)備電源（雙電源設(shè)備則關(guān)閉兩路電源）分公司總中心5信息總中心網(wǎng)絡(luò)值班崗觀測(cè)Ping包丟包狀況（應(yīng)無(wú)丟包）分公司總中心觀測(cè)網(wǎng)管平臺(tái)應(yīng)有外網(wǎng)主用核心互換機(jī)報(bào)到該路由器RPING不告示警6逐個(gè)啟動(dòng)上述網(wǎng)絡(luò)設(shè)備電源（雙電源設(shè)備則啟動(dòng)兩路電源）分公司總中心7通過(guò)Console口監(jiān)測(cè)、記錄上述網(wǎng)絡(luò)設(shè)備重啟狀況，觀測(cè)重啟有無(wú)異常，如有異常，則告知信息總中心網(wǎng)絡(luò)崗分公司總中心8信息總中心網(wǎng)絡(luò)值班崗觀測(cè)Ping包丟包狀況（應(yīng)無(wú)丟包）分公司總中心9登陸分公司二臺(tái)外網(wǎng)核心互換機(jī)，確認(rèn)機(jī)構(gòu)網(wǎng)段路由源自機(jī)構(gòu)主線路接入網(wǎng)絡(luò)設(shè)備，執(zhí)行如下命令：shiproute144.x.x.x(分公司轄內(nèi)機(jī)構(gòu)主機(jī)地址)確認(rèn)機(jī)構(gòu)網(wǎng)段路由源自機(jī)構(gòu)主線路接入網(wǎng)絡(luò)設(shè)備分公司總中心10關(guān)閉機(jī)構(gòu)接入主線路接入網(wǎng)絡(luò)設(shè)備電源（雙電源設(shè)備則關(guān)閉兩路電源）分公司總中心11信息總中心網(wǎng)絡(luò)崗觀測(cè)長(zhǎng)Ping包恢復(fù)狀況，并記錄丟包數(shù)據(jù)分公司總中心12登陸分公司二臺(tái)外網(wǎng)核心互換機(jī)，確認(rèn)機(jī)構(gòu)網(wǎng)段路由源自機(jī)構(gòu)備線路接入網(wǎng)絡(luò)設(shè)備，執(zhí)行如下命令：shiproute144.x.x.x(分公司轄內(nèi)機(jī)構(gòu)主機(jī)地址)確認(rèn)機(jī)構(gòu)網(wǎng)段路由源自機(jī)構(gòu)備線路接入網(wǎng)絡(luò)設(shè)備分公司總中心13信息總中心交易監(jiān)控崗觀測(cè)分公司交易中斷與恢復(fù)狀況，并記錄有關(guān)數(shù)據(jù)分公司總中心14信息總中心確認(rèn)Ping包與交易恢復(fù)后，告知分公司啟動(dòng)機(jī)構(gòu)主線路接入網(wǎng)絡(luò)設(shè)備電源（雙電源設(shè)備則啟動(dòng)兩路電源）分公司總中心15通過(guò)Console口監(jiān)測(cè)、記錄設(shè)備重啟狀況，觀測(cè)重啟有無(wú)異常，如有異常，則告知信息總中心網(wǎng)絡(luò)崗分公司總中心16信息總中心網(wǎng)絡(luò)值班崗觀測(cè)Ping包丟包狀況，并記錄有關(guān)數(shù)據(jù)分公司總中心17登陸分公司二臺(tái)外網(wǎng)核心互換機(jī)，確認(rèn)機(jī)構(gòu)網(wǎng)段路由源自機(jī)構(gòu)主線路接入網(wǎng)絡(luò)設(shè)備，執(zhí)行如下命令：shiproute144.x.x.x(分公司轄內(nèi)機(jī)構(gòu)主機(jī)地址)shipospfnei或shipeigrpnei確認(rèn)機(jī)構(gòu)網(wǎng)段路由源自機(jī)構(gòu)主線路接入網(wǎng)絡(luò)設(shè)備分公司總中心告知成員機(jī)構(gòu)檢查銀聯(lián)通信網(wǎng)關(guān)路由應(yīng)恢復(fù)至機(jī)構(gòu)主線接入網(wǎng)絡(luò)設(shè)備18信息總中心網(wǎng)絡(luò)崗告知交易監(jiān)控崗，檢查分公司交易狀況；同步分公司自查交易狀況分公司總中心19執(zhí)行1-18步，演習(xí)其她機(jī)構(gòu)接入路由器分公司總中心第三步：機(jī)構(gòu)接入路由器主備引擎切換(僅針對(duì)配備雙引擎網(wǎng)絡(luò)設(shè)備)序號(hào)操作內(nèi)容操作人復(fù)核人1告知成員機(jī)構(gòu)、信息總中心即將進(jìn)行機(jī)構(gòu)接入路由器宕機(jī)演習(xí)分公司總中心2告知成員機(jī)構(gòu)檢查銀聯(lián)通信NAP路由應(yīng)源自機(jī)構(gòu)主線接入網(wǎng)絡(luò)設(shè)備分公司3登陸分公司機(jī)構(gòu)接入路由器（144.x.253.x），檢查路由器Redundancy狀態(tài)，執(zhí)行如下命令：ShowredundancyShowmodule確認(rèn)路由器統(tǒng)Redundancy狀態(tài)正常，路由器第五槽位狀態(tài)為ACTIVE,第六槽位狀態(tài)為STANDBYHOT分公司總中心4告知信息總中心網(wǎng)絡(luò)值班崗登錄CUPS系統(tǒng)ZNAP服務(wù)器，啟動(dòng)對(duì)分公司轄內(nèi)銀行機(jī)構(gòu)地址長(zhǎng)Ping；分公司總中心5登陸機(jī)構(gòu)接入路由器,輸入命令redundancyforce-switchover分公司總中心6通過(guò)Console口監(jiān)測(cè)、記錄原主用引擎重啟狀況，觀測(cè)重啟有無(wú)異常，如有異常，則告知信息總中心網(wǎng)絡(luò)崗分公司總中心7登陸分公司二臺(tái)機(jī)構(gòu)接入路由器（144.x.253.x），檢查路由器Redundancy狀態(tài)，執(zhí)行如下命令：ShowredundancyShowmodule確認(rèn)路由器統(tǒng)Redundancy狀態(tài)正常，路由器第五槽位狀態(tài)為STANDBYHOT,第六槽位狀態(tài)為ACTIVE分公司總中心8登陸機(jī)構(gòu)接入路由器,輸入命令redundancyforce-switchover分公司總中心9通過(guò)Console口監(jiān)測(cè)、記錄原備用引擎重啟狀況，觀測(cè)重啟有無(wú)異常，如有異常，則告知信息總中心網(wǎng)絡(luò)崗分公司10登陸分公司機(jī)構(gòu)接入路由器（144.x.253.x），檢查路由器Redundancy狀態(tài)，執(zhí)行如下命令：ShowredundancyShowmodule確認(rèn)路由器統(tǒng)Redundancy狀態(tài)正常，路由器第五槽位狀態(tài)為ACTIVE,第六槽位狀態(tài)為STANDBYHOT分公司總中心11信息總中心網(wǎng)絡(luò)崗告知交易監(jiān)控崗，檢查分公司交易狀況；同步分公司自查交易狀況分公司總中心12執(zhí)行2-11步，演習(xí)其她機(jī)構(gòu)接入路由器引擎分公司總中心13確認(rèn)分公司交易完全正常后，本演習(xí)場(chǎng)景結(jié)束分公司總中心演習(xí)應(yīng)急解決環(huán)節(jié)在演習(xí)過(guò)程中，如網(wǎng)絡(luò)設(shè)備關(guān)機(jī)后交易（CUPS系統(tǒng)ZNAP上長(zhǎng)ping或收單系統(tǒng)PNAP上長(zhǎng)ping或有關(guān)監(jiān)控崗位發(fā)現(xiàn)告警）受影響，且在5分鐘內(nèi)無(wú)法恢復(fù)，則應(yīng)及時(shí)恢復(fù)系統(tǒng)；如宕機(jī)重啟異?；驘o(wú)法重啟則執(zhí)行如下應(yīng)急解決環(huán)節(jié)：操作環(huán)節(jié)環(huán)節(jié)操作內(nèi)容第一步分公司使用預(yù)先準(zhǔn)備備件進(jìn)行緊急更換第二步將原先保存故障設(shè)備配備文獻(xiàn)導(dǎo)入備件第三步將備件接入網(wǎng)絡(luò)，替代故障設(shè)備第四步檢查網(wǎng)絡(luò)與否恢復(fù)正常第五步協(xié)調(diào)集成商更換故障設(shè)備操作細(xì)則序號(hào)操作內(nèi)容操作人復(fù)核人1與信息總中心網(wǎng)絡(luò)崗協(xié)商后，使用預(yù)先準(zhǔn)備設(shè)備備件進(jìn)行緊急更換分公司總中心2將原先TFTP服務(wù)器上保存故障設(shè)備配備文獻(xiàn)導(dǎo)入備件分公司總中心3將備件接入生產(chǎn)網(wǎng)絡(luò)，替代故障設(shè)備分公司總中心4檢查網(wǎng)絡(luò)與否恢復(fù)正常，執(zhí)行如下命令：Shcdpnei/*檢查CDPneighbor與否正常建立Shipospfnei/*檢查路由鄰居關(guān)系與否建立Shipbgpsum/*檢查與總中心BGP鄰居與否建立Shipbgp/*檢查與否已經(jīng)學(xué)習(xí)到BGP路由分公司總中心5依照維保合同，協(xié)調(diào)集成商更換故障設(shè)備分公司總中心演習(xí)場(chǎng)景五：網(wǎng)控器PRA線路異地災(zāi)備切換演習(xí)思路通過(guò)本地運(yùn)營(yíng)商將本地POS機(jī)主叫號(hào)碼映射至總中心400號(hào)碼后，由中心進(jìn)行遠(yuǎn)程統(tǒng)一災(zāi)備，以此來(lái)驗(yàn)證分公司撥號(hào)下聯(lián)卡高可用機(jī)制有效性過(guò)；。演習(xí)環(huán)節(jié)環(huán)節(jié)操作內(nèi)容第一步控器PRA線路異地災(zāi)備切換演習(xí)細(xì)則第一步：控器PRA線路異地災(zāi)備切換序號(hào)操作內(nèi)容操作人復(fù)核人1告知信息總中心（北京信息中心）網(wǎng)絡(luò)崗、外圍崗，開(kāi)始進(jìn)行分公司網(wǎng)控器撥號(hào)線路災(zāi)備切換演習(xí)分公司總中心2告知電信將撥號(hào)線路號(hào)碼切換至總中心統(tǒng)一災(zāi)備號(hào)碼分公司總中心3電信反饋切換完畢后分公司進(jìn)行交易驗(yàn)證，信息總中心配合檢查與否有交易從統(tǒng)一災(zāi)備平臺(tái)上送分公司總中心4告知電信將撥號(hào)線路號(hào)碼切回至本地線路號(hào)碼分公司總中心5電信反饋切換完畢后分公司進(jìn)行交易驗(yàn)證，信息總中心配合檢查與否有交易從分公司網(wǎng)控器上送分公司總中心演習(xí)應(yīng)急解決環(huán)節(jié)在演習(xí)過(guò)程中，如交易（分公司撥號(hào)交易不成功或有關(guān)監(jiān)控崗位發(fā)現(xiàn)告警）受影響，且在5分鐘內(nèi)無(wú)法恢復(fù)，則應(yīng)及時(shí)恢復(fù)系統(tǒng)；如浮現(xiàn)異常，則執(zhí)行如下應(yīng)急解決環(huán)節(jié)：操作環(huán)節(jié)環(huán)節(jié)操作內(nèi)容第一步告知電信將撥號(hào)線路號(hào)碼切回至本地線路號(hào)碼第二步電信反饋切換完畢后分公司進(jìn)行交易驗(yàn)證，信息總中心配合檢查與否有交易從分公司網(wǎng)控器上送操作細(xì)則序號(hào)操作內(nèi)容操作人復(fù)核人1知電信將撥號(hào)線路號(hào)碼切回至本地線路號(hào)碼分公司總中心2電信反饋切換完畢后分公司進(jìn)行交易驗(yàn)證，信息總中心配合檢查與否有交易從分公司網(wǎng)控器上送分公司總中心演習(xí)場(chǎng)景六：3G災(zāi)備切換演習(xí)演習(xí)思路將該機(jī)構(gòu)主線廣域網(wǎng)口shutdown，查看該機(jī)構(gòu)路由與否漂移到3G無(wú)線災(zāi)備鏈路上，驗(yàn)證當(dāng)分公司生產(chǎn)網(wǎng)絡(luò)浮現(xiàn)突發(fā)故障導(dǎo)致本地網(wǎng)絡(luò)徹底癱瘓，或機(jī)構(gòu)上聯(lián)分公司兩根專線徹底中斷，交易數(shù)據(jù)無(wú)法上送時(shí)，使用分公司與機(jī)構(gòu)間布置3G無(wú)線網(wǎng)絡(luò)進(jìn)行通訊，實(shí)現(xiàn)本地機(jī)構(gòu)與商戶聯(lián)機(jī)交易迅速恢復(fù)。要點(diǎn)：1、演習(xí)前須與機(jī)構(gòu)確認(rèn)其3G線路工作正常；2、演習(xí)前須與確認(rèn)需演習(xí)機(jī)構(gòu)端有人配合演習(xí)。演習(xí)環(huán)節(jié)環(huán)節(jié)演習(xí)內(nèi)容第一步傳播設(shè)備雙上聯(lián)光路冗余演習(xí)(可選)第二步傳播設(shè)備雙電源冗余演習(xí)(可選)演習(xí)細(xì)則第一步：傳播設(shè)備雙上聯(lián)光路冗余演習(xí)(可選)序號(hào)操作內(nèi)容操作人復(fù)核人1告知信息總中心網(wǎng)絡(luò)崗，在CUPS系統(tǒng)ZNAP服務(wù)器上啟動(dòng)到機(jī)構(gòu)主機(jī)長(zhǎng)ping分公司總中心2告知總中心,即將關(guān)閉傳播設(shè)備主光路分公司總中心3關(guān)閉傳播設(shè)備主光路（拔除光纜）線路運(yùn)營(yíng)商分公司4信息總中心網(wǎng)絡(luò)值班崗觀測(cè)并記錄Ping包丟包狀況分公司總中心5分公司觀測(cè)并記錄各有關(guān)廣域網(wǎng)線路接口狀況(無(wú)CRC、ERROR計(jì)數(shù)增長(zhǎng))分公司總中心3恢復(fù)傳播設(shè)備主光路（插入光纜）線路運(yùn)營(yíng)商分公司4信息總中心網(wǎng)絡(luò)值班崗觀測(cè)Ping包丟包狀況（應(yīng)無(wú)丟包）分公司總中心5信息總中心網(wǎng)絡(luò)值班崗直連廣域網(wǎng)線路接口狀況(無(wú)CRC、ERROR計(jì)數(shù)增長(zhǎng))分公司總中心6告知交易監(jiān)控崗檢查交易狀況分公司總中心7確認(rèn)傳播設(shè)備雙光路恢復(fù)后，在進(jìn)行備光路中斷演習(xí)，重復(fù)1-6步線路運(yùn)營(yíng)商分公司第二步：傳播設(shè)備雙電源冗余演習(xí)(可選)序號(hào)操作內(nèi)容操作人復(fù)核人1告知總中心，即將關(guān)閉傳播設(shè)備主用電源分公司總中心2檢查傳播設(shè)備電源狀態(tài)線路運(yùn)營(yíng)商分公司3關(guān)閉傳播設(shè)備主用電源（拔除電源線）線路運(yùn)營(yíng)商分公司4觀測(cè)傳播設(shè)備在切換期間有無(wú)掉電現(xiàn)象線