重大節(jié)假日網(wǎng)絡(luò)保障應(yīng)急預(yù)案

實用標(biāo)準(zhǔn)文檔重大節(jié)假日網(wǎng)絡(luò)保障應(yīng)急預(yù)案二○○九年十二月文案大全實用標(biāo)準(zhǔn)文檔節(jié)假日網(wǎng)絡(luò)保障應(yīng)急預(yù)案總則1.1 編制目的為保證重要活動節(jié)假日召開期間通信網(wǎng)絡(luò)的安全可靠運行，全面提高通信維護隊伍應(yīng)對突發(fā)情況的綜合管理水平和應(yīng)急處置能力，最大限度地保證重大節(jié)假日期間通信網(wǎng)絡(luò)穩(wěn)定安全運行和可靠暢通。1.2 編制依據(jù)依據(jù)工信部等有關(guān)文件及應(yīng)急預(yù)案，結(jié)合我公司網(wǎng)絡(luò)實際情況制定本預(yù)案。1.3工作原則實行統(tǒng)一管理、統(tǒng)一指揮、各級負(fù)責(zé)的原則；快速反應(yīng)原則：當(dāng)突發(fā)事件發(fā)生時，維護部各中心要立即按應(yīng)急通信預(yù)案，投入通信應(yīng)急工作；主動報告原則：當(dāng)突發(fā)事件發(fā)生后，要及時報告應(yīng)急通信實施情況。文案大全實用標(biāo)準(zhǔn)文檔1.4 適用范圍本預(yù)案適用于重要節(jié)假日期間，可能對網(wǎng)絡(luò)安全穩(wěn)定可靠運行的一切突發(fā)事件或緊急情況。組織機構(gòu)及職責(zé)2.1 應(yīng)急機構(gòu)組成重要活動節(jié)假日通信保障應(yīng)急通信保障工作實行各級維護部負(fù)責(zé)制。由分公司的網(wǎng)絡(luò)與信息安全領(lǐng)導(dǎo)小組組織調(diào)度指揮，各有關(guān)部門統(tǒng)一遵照執(zhí)行。突發(fā)事件或者緊急情況發(fā)生后， 公司應(yīng)急應(yīng)急通信辦公室可以根據(jù)需要，在事發(fā)地設(shè)立現(xiàn)場應(yīng)急指揮部，統(tǒng)一進(jìn)行指揮調(diào)度；應(yīng)急通信辦公室成員：總指揮：運行維護部主任副總指揮：運維部副主任成員：運維部副主任、各專業(yè)主管2.2 應(yīng)急通信辦公室主要職責(zé)負(fù)責(zé)對本公司重要會議應(yīng)急通信保障工作的統(tǒng)一領(lǐng)導(dǎo)、 指揮和協(xié)調(diào)。負(fù)責(zé)傳達(dá)省公司和地市分公司應(yīng)急工作指令； 負(fù)責(zé)節(jié)日期間發(fā)生的突發(fā)事件或者緊急情況的收集、 分析和評估工作；協(xié)調(diào)處理在實施重要會議應(yīng)急工作中的有關(guān)問題； 對損失及影響進(jìn)行評估；制定重要節(jié)假日應(yīng)急方案并負(fù)責(zé)修訂和完善； 負(fù)責(zé)執(zhí)行文案大全實用標(biāo)準(zhǔn)文檔通信保障指令；負(fù)責(zé)修復(fù)故障設(shè)備；負(fù)責(zé)應(yīng)急通信工作中的后勤保障等配合工作。應(yīng)急準(zhǔn)備工作3.1通訊手段保障重要節(jié)假日期間重要崗位的領(lǐng)導(dǎo)及維護人員保證多種通訊方式的暢通。各級應(yīng)急組織成員在節(jié)假日要保證 G網(wǎng)、C網(wǎng)、移動和固定電話 24小時處于待機狀態(tài)，應(yīng)急搶修隊成員要確保通訊手段有效。 通信機房要保證 G網(wǎng)、C網(wǎng)、移動、固定、企業(yè)網(wǎng)和延伸公務(wù)電話暢通。機房通訊錄要保證準(zhǔn)確、無誤，擺放顯著位置，節(jié)日當(dāng)晚要進(jìn)行測試。 各級公司要及時更新通訊錄，要求應(yīng)急通信辦公室人員每人一份。各級分公司機房內(nèi)的通訊錄要擺放明顯位置。3.2應(yīng)急資源、人員準(zhǔn)備 重要的節(jié)假日前夕，應(yīng)急機構(gòu)要提前做好發(fā)電機、油料、車輛、工具以及服裝等應(yīng)急物資的準(zhǔn)備及儲備工作。 要根據(jù)預(yù)案設(shè)置，提前做好資源的分配工作。 機房應(yīng)急搶修人員在節(jié)日期間 24小時待命，提前做好備用單板測試、主備單板、主備機倒換測試，做好完整系統(tǒng)數(shù)據(jù)備文案大全實用標(biāo)準(zhǔn)文檔份并異地存放，要保證搶修工具齊全完好。 線路搶修人員要加強日常巡線工作，備好搶修物資及搶修工具，24小時待命。 基站維護員對重要節(jié)點站進(jìn)行檢查，加大巡檢次數(shù)。3.3加強監(jiān)控和巡視制定節(jié)假日值班制度，安排骨干人員加強值班。對于春節(jié)、中秋等話務(wù)高峰期大話務(wù)沖擊嚴(yán)重的節(jié)日，機房值班要求每個專業(yè)要有兩名以上技術(shù)骨干，其他節(jié)假日值班要求至少要有一名技術(shù)骨干。在節(jié)假日對局內(nèi)設(shè)備的維護，要求每隔固定時間進(jìn)行一次系統(tǒng)監(jiān)控和巡視，除夕夜要求每 30分鐘進(jìn)行一次系統(tǒng)監(jiān)控。監(jiān)控對象主要包括：1、各專業(yè)日常維護設(shè)備的各項指標(biāo)，包括網(wǎng)絡(luò)資源是否超出設(shè)備正常運行的設(shè)計門限。2、網(wǎng)元狀態(tài)：是否有高級別的告警產(chǎn)生，是否有引發(fā)重大故障的特定告警產(chǎn)生，是否有負(fù)荷告警產(chǎn)生等。3.4加強網(wǎng)絡(luò)主動測試在節(jié)假日對網(wǎng)絡(luò)和設(shè)備的主動測試有助于問題的發(fā)現(xiàn)，建議每1個小時進(jìn)行一次業(yè)務(wù)測試，除夕夜話務(wù)高峰到來（20：00）前進(jìn)行一次全面的業(yè)務(wù)測試。測試內(nèi)容主要包括：1、話務(wù)方面：局內(nèi)、局間、省際、省內(nèi)、網(wǎng)間主叫和被叫文案大全實用標(biāo)準(zhǔn)文檔的通話測試。2、短信方面：局內(nèi)、局間、省際、省內(nèi)、網(wǎng)間點對點短信測試，觀察短消息發(fā)送、接收及時延情況。3.4應(yīng)急預(yù)案準(zhǔn)備工作 分公司要做好重點通信設(shè)備和干線、本地網(wǎng)的故障分級調(diào)度、保障方案。 對于重要會議召開期間可能啟動的高負(fù)荷話務(wù)應(yīng)急預(yù)案和各類網(wǎng)絡(luò)故障應(yīng)急預(yù)案要進(jìn)行完善。應(yīng)急處理值班人員發(fā)現(xiàn)災(zāi)情或收到氣象部門的預(yù)警時，應(yīng)立即按照重大故障上報流程的管理規(guī)定，及時向相關(guān)單位發(fā)布預(yù)警信息。維護部各中心對運行設(shè)備進(jìn)行一次安全檢查，排除隱患，形成安全檢查總結(jié)報告?zhèn)浒?。?yīng)急通信辦公室應(yīng)根據(jù)預(yù)警信息實施響應(yīng)方案，根據(jù)響應(yīng)方案將油機、備板備件等應(yīng)急物資提前調(diào)度至重點保障的地區(qū)，調(diào)度原則應(yīng)遵循地區(qū)的分級管理規(guī)定，重點機房、大客戶電路等重要部分優(yōu)先保障。網(wǎng)絡(luò)故障或者突發(fā)事件、緊急情況發(fā)生后，各級應(yīng)急機構(gòu)立即進(jìn)入應(yīng)急狀態(tài)，并通過預(yù)警機構(gòu)傳報應(yīng)急人員的聯(lián)系方文案大全實用標(biāo)準(zhǔn)文檔式。網(wǎng)絡(luò)故障或者突發(fā)事件、緊急情況發(fā)生后，及時調(diào)度車輛和人員至網(wǎng)絡(luò)故障或者突發(fā)事件、緊急情況地點進(jìn)行通信保障。網(wǎng)絡(luò)故障或者突發(fā)事件、緊急情況發(fā)生后，應(yīng)立即加強對設(shè)備的運行監(jiān)控，對于由網(wǎng)絡(luò)故障或者突發(fā)事件、緊急情況引發(fā)的交換機高負(fù)荷情況和故障情況，要及時上報本地應(yīng)急通信辦公室，申請啟動應(yīng)急預(yù)案。各支持、配合機構(gòu)要根據(jù)網(wǎng)絡(luò)與信息安全領(lǐng)導(dǎo)小組和應(yīng)急通信辦公室的要求開展工作。對于網(wǎng)絡(luò)故障或者突發(fā)事件、緊急情況過程中涉及分公司間應(yīng)急資源調(diào)度的情況，由省公司應(yīng)急通信辦公室負(fù)責(zé)協(xié)調(diào)。在資源調(diào)度時，遵循重點地區(qū)優(yōu)先保障的原則。對于網(wǎng)絡(luò)故障或者突發(fā)事件、緊急情況持續(xù)過程中造成的部分網(wǎng)絡(luò)設(shè)備不能正常運行的情況，維護部要根據(jù)網(wǎng)絡(luò)預(yù)故障通報機制，將信息及時傳報給各受影響的部門。文案大全實用標(biāo)準(zhǔn)文檔附件1：移動網(wǎng)交換專業(yè)節(jié)假日及重大社會活動應(yīng)急預(yù)案（一）、系統(tǒng)運行主動監(jiān)控在節(jié)假日及重大社會活動尤其是春節(jié)期間， 移動網(wǎng)及綜合關(guān)口局設(shè)備負(fù)荷一般都會比平時運行有較大幅度的激增，所以在這期間，定期對系統(tǒng)進(jìn)行檢查，可以及早發(fā)現(xiàn)系統(tǒng)是否出現(xiàn)擁塞等問題。在節(jié)假日對交換系統(tǒng)維護，建議每1個小時左右就對各種設(shè)備進(jìn)行一次系統(tǒng)的監(jiān)控，春節(jié)除夕晚上建議每半小時或?qū)崟r進(jìn)行系統(tǒng)監(jiān)控。監(jiān)控的對象主要是：1、在維護臺實時監(jiān)測交換機 CPU負(fù)荷情況，注意是否已經(jīng)接近系統(tǒng)的最大容量；2、根據(jù)各局向的網(wǎng)絡(luò)配置情況，監(jiān)測各局向話務(wù)負(fù)荷是否已經(jīng)接近網(wǎng)絡(luò)的最大處理能力；3、檢查端局TUP、MAP等普通呼叫信令之間的呼叫關(guān)系是否有異?，F(xiàn)象；4、檢查VLR所在機器的系統(tǒng)資源， 跟蹤系統(tǒng)占用資源是否已經(jīng)接近系統(tǒng)設(shè)計的最大容量；5、檢查綜合關(guān)口局各局向 TUP、ISUP等網(wǎng)間呼叫信令之間的呼叫關(guān)系及網(wǎng)間運行業(yè)務(wù)是否有異?，F(xiàn)象；6、檢查數(shù)據(jù)庫/話單文件等是否還有足夠空間和資源。文案大全實用標(biāo)準(zhǔn)文檔（二）、系統(tǒng)運行主動測試在節(jié)假日對交換系統(tǒng)的維護，建議每1個小時左右就進(jìn)行一次系統(tǒng)的呼叫測試，春節(jié)除夕晚上建議每半小時進(jìn)行一次系統(tǒng)的呼叫測試。測試的方法主要是：1、進(jìn)行移動網(wǎng)本局內(nèi)移動至移動的話務(wù)呼叫，注意觀察呼叫是否能能夠成功的接續(xù)、以及整個呼叫過程的時延情況。2、進(jìn)行本省內(nèi)移動至移動的話務(wù)呼叫，注意觀察呼叫是否能能夠成功的接續(xù)、以及整個呼叫過程的時延情況。3、進(jìn)行省間移動至移動的話務(wù)呼叫，注意觀察呼叫是否能能夠成功的接續(xù)、以及整個呼叫過程的時延情況。4、對各個局向的互聯(lián)及話務(wù)情況， 進(jìn)行相應(yīng)的網(wǎng)間呼叫測試，注意觀察呼叫是否能能夠成功的接續(xù)、以及整個呼叫過程的時延情況。、進(jìn)行C網(wǎng)手機至移動的話務(wù)呼叫，注意觀察呼叫是否能能夠成功的接續(xù)、以及整個呼叫過程的時延情況。6、進(jìn)行C網(wǎng)手機至網(wǎng)通的話務(wù)呼叫，注意觀察呼叫是否能能夠成功的接續(xù)、以及整個呼叫過程的時延情況。7、進(jìn)行C網(wǎng)至鐵通、電信固網(wǎng)的話務(wù)呼叫，注意觀察呼叫是否能能夠成功的接續(xù)、以及整個呼叫過程的時延情況。、聯(lián)系進(jìn)行聯(lián)通、鐵通市話使用193及IP業(yè)務(wù)的話務(wù)呼叫測試，機房人員配合跟蹤測試信令并注意觀察呼叫是否能能夠成功的接續(xù)、以及整個呼叫過程的時延情況。文案大全實用標(biāo)準(zhǔn)文檔（三）、交換系統(tǒng)擁塞及 CPU負(fù)荷過高應(yīng)急預(yù)案在監(jiān)控的過程中如果發(fā)現(xiàn)已經(jīng)出現(xiàn)系統(tǒng)擁塞、資源CPU及資源占用率高的情況，維護人員應(yīng)該采取一定的應(yīng)急措施，以確保系統(tǒng)的安全運行：1、 如果發(fā)現(xiàn)數(shù)據(jù)庫、話單文件等的資源不夠，譬如分配的硬盤空間已經(jīng)耗盡的情況，可以將系統(tǒng)中早期的數(shù)據(jù)庫歷史表、話單文件等備份到其他的機器上，騰出硬盤空間。2、如果發(fā)現(xiàn)交換系統(tǒng)資源不夠，譬如發(fā)生呼叫流控、處理能力不足等情況，在上級主管部門同意后， 即可按照事先確定好的順序閉塞綜合關(guān)口局至各主要局向的部分中繼電路，以達(dá)到降低系統(tǒng)負(fù)荷的效果。3、可以在維測臺上監(jiān)視基站運行情況，會同基站專業(yè)查看基站話務(wù)分布情況，在交換機處理能力不足等情況發(fā)生時，在上級主管部門同意后，即可會同基站專業(yè)按照事先確定好的順序閉塞相應(yīng)基站，以達(dá)到降低系統(tǒng)負(fù)荷的效果。附件2：BSC節(jié)假日網(wǎng)絡(luò)保障應(yīng)急預(yù)案一、BSC節(jié)假日大話務(wù)量應(yīng)急處理的組織結(jié)構(gòu)和聯(lián)系方式職責(zé)：組長、副組長負(fù)責(zé)了解現(xiàn)場情況并與省分公司相關(guān)領(lǐng)導(dǎo)溝通，申請啟動應(yīng)急方案，接受省分命令，并向組員傳達(dá)上級命令，啟動應(yīng)急方案，跟蹤現(xiàn)場進(jìn)展，隨時準(zhǔn)備與省分公司領(lǐng)文案大全實用標(biāo)準(zhǔn)文檔導(dǎo)匯報。在應(yīng)急結(jié)束后，接受命令，下達(dá)倒回命令，最終向省分公司匯報。技術(shù)協(xié)調(diào)人員負(fù)責(zé)向組長、副組長匯報現(xiàn)場情況并與組長、副組長溝通，根據(jù)現(xiàn)場情況，申請啟動應(yīng)急方案，同時接受命令，與成員共同配合實施方案，根據(jù)現(xiàn)場進(jìn)展，隨時與組長、副組長匯報，在應(yīng)急情況結(jié)束后，向組長、副組長申請倒回命令，接到命令后，與成員共同配合實施。成員負(fù)責(zé)配合技術(shù)協(xié)調(diào)人進(jìn)行具體工作實施。二、C網(wǎng)BSC節(jié)假日大話務(wù)量應(yīng)急預(yù)案在節(jié)假日尤其是春節(jié)期間，話務(wù)量一般會比平時成倍的增長，所以在這期間，定期對系統(tǒng)進(jìn)行檢查，可以及早發(fā)現(xiàn)系統(tǒng)是否出現(xiàn)擁塞等問題。在節(jié)假日對BSC系統(tǒng)維護，建議每1個小時左右就進(jìn)行一次系統(tǒng)的監(jiān)控，春節(jié)除夕晚上建議半小時進(jìn)行一次系統(tǒng)的監(jiān)控。監(jiān)控的對象主要是：、BSC主處理器CPU的負(fù)荷，注意是否已接近設(shè)定門限值；2、BSC的A接口的話務(wù)負(fù)荷和 A接口的信令負(fù)荷是否已接近告警門限；3、當(dāng)前的告警有無任何負(fù)荷告警等。Ⅰ系統(tǒng)運行主動測試在節(jié)假日對BSC系統(tǒng)維護，建議每1個小時左右就進(jìn)行一次系統(tǒng)的測試，春節(jié)除夕晚上建議每半小時進(jìn)行一次系統(tǒng)的檢查和測試。測試的方法主要是：文案大全實用標(biāo)準(zhǔn)文檔1、每個小時取一次小區(qū)性能測量的話統(tǒng)， 注意小區(qū)的擁塞程度。2、進(jìn)行本局之內(nèi)的C網(wǎng)對C網(wǎng)手機的呼叫測試和點對點的短消息的發(fā)送，注意呼叫的成功率和短信的延遲程度。3、進(jìn)行本局C網(wǎng)手機1X數(shù)據(jù)業(yè)務(wù)的測試，注意上傳和下載的速度。BSC擁塞或故障的應(yīng)急維護在節(jié)假日話務(wù)量增大的情況下，我們BSC系統(tǒng)有一套限制流量、自我保護的機制。這主要是通過對BSC系統(tǒng)CPU占用率門限值的設(shè)置實現(xiàn)。當(dāng)業(yè)務(wù)量增大并超過某個門限值時，系統(tǒng)將會產(chǎn)生不同級別（1—4級）的告警，同時系統(tǒng)將按不同級別告警對當(dāng)前呼叫業(yè)務(wù)和數(shù)據(jù)業(yè)務(wù)進(jìn)行不同級別的丟包限制處理，以保證系統(tǒng)能正常運行。如果再加上適當(dāng)?shù)娜斯ふ{(diào)節(jié)，將使BSC運行更加穩(wěn)定可靠，使有限的業(yè)務(wù)處理能力得到更加合理的利用。同時在監(jiān)控的過程中如果發(fā)現(xiàn)已經(jīng)出現(xiàn)業(yè)務(wù)量不斷增大、話務(wù)開始擁塞、BSC主處理器的負(fù)荷接近門限值時，維護人員應(yīng)該采取一定的應(yīng)急措施，以確保BSC系統(tǒng)的安全：、掛起或刪除一些不常用或不重要的話統(tǒng)。2、不要使用性能統(tǒng)計中的實時觀察、信令跟蹤、系統(tǒng)監(jiān)測、業(yè)務(wù)觀察等。3、在業(yè)務(wù)量非常大出現(xiàn)高級別的告警時， 可以根據(jù)當(dāng)前告警級別對BSC系統(tǒng)的部分基站做閉鎖處理：文案大全實用標(biāo)準(zhǔn)文檔具體方案如下：1）當(dāng)BSC1的CPU負(fù)荷達(dá)到80％或MSC側(cè)需要配合時。依次閉鎖注意：以上操作嚴(yán)格按照閉鎖載頻的先后順序進(jìn)行依次閉鎖，每閉鎖一塊載頻后觀察一下CPU占用率，如果CPU占用率降下來，就停止下面的操作，以便盡量減少對網(wǎng)絡(luò)的影響。2）如果進(jìn)行以上操作后