數(shù)據(jù)中心機房應急預案.doc

1 數(shù)據(jù)中心機房應急預案數(shù)據(jù)中心機房應急預案 2 目目 錄錄 一 基本原則一 基本原則 3 二 應急事件級別定義二 應急事件級別定義 3 三 組織機構(gòu)及職責三 組織機構(gòu)及職責 4 3 1 應急領(lǐng)導小組組織機構(gòu) 4 3 2 應急領(lǐng)導小組職責 4 3 3 應急小組成員職責 5 四 應急響四 應急響應應機制機制 6 4 1 基本處理流程 6 4 2 機房應急開關(guān)機具體措施 7 4 3 服務器及存儲設(shè)備故障處理 7 五 應急方案五 應急方案 8 5 1 網(wǎng)絡故障事件應急預案 8 5 2 服務器故障應急預案 8 5 3 災害性事件應急預案 10 5 4 其他突發(fā)事件應急預案 10 六 后期處置六 后期處置 10 七 應急保障七 應急保障 11 3 一 基本原則一 基本原則 1 居安思危 預防為主 實行突發(fā)事件統(tǒng)一管理 統(tǒng)一指揮 各級負責 的原則 2 統(tǒng)一領(lǐng)導 分級負責 全面規(guī)劃 及時發(fā)現(xiàn) 快速反應 措施果斷的原 則 并按照事件級別迅速上報相關(guān)領(lǐng)導和責任人 3 制度規(guī)范 加強管理 嚴格按照事件處理流程規(guī)范操作 使突發(fā)應急 的工作規(guī)范事件化 制度化 4 快速反應 協(xié)同應對 當突發(fā)事件發(fā)生時 各級要立即按應急預案 投入應急工作 加強各個部門配合協(xié)作 形成統(tǒng)一指揮 反應靈敏 功能齊全 協(xié)調(diào)有序 運轉(zhuǎn)高效的應急管理機制 5 主動報告原則 當突發(fā)事件發(fā)生后 要及時報告應急預案實施情況 二 應急事件級別定義二 應急事件級別定義 根據(jù)網(wǎng)絡與信息安全突發(fā)公共事件的可控性 嚴重程度和影響范圍 一般 分為四級 I 級 特別重大 II 級 重大 III 級 較大 IV 級 一般 國家有關(guān)法律法規(guī)有明確規(guī)定的 按國家有關(guān)規(guī)定執(zhí)行 1 I 級 特別重大 重要網(wǎng)絡與信息安全系統(tǒng)發(fā)生全市性大規(guī)模癱瘓 事態(tài)發(fā)展超出相關(guān)主管部門的控制能力 對國家安全 社會秩序 經(jīng)濟建設(shè)和 公共利益造成特別嚴重損害的突發(fā)公共事件 2 II 級 重大 重要網(wǎng)絡與信息安全系統(tǒng)造成全市性癱瘓 對國家安 全 社會秩序 經(jīng)濟建設(shè)和公共利益造成嚴重損害 需要跨部門 跨地區(qū)協(xié)同 處置的突發(fā)公共事件 3 III 級 較大 某一區(qū)域的重要網(wǎng)絡與信息安全系統(tǒng)癱瘓 對國家安 全 社會秩序 經(jīng)濟建設(shè)和公共利益造成一定損害 但不需要跨部門 跨地區(qū) 協(xié)同處置的突發(fā)公共事件 4 4 IV 級 一般 重要的網(wǎng)絡與信息安全系統(tǒng)受到一定程度的損壞 對 公民 法人和其他組織的權(quán)益有一定影響 但不危害國家安全 社會秩序 經(jīng) 濟建設(shè)和公共利益的突發(fā)公共事件 三 組織機構(gòu)及職責三 組織機構(gòu)及職責 3 13 1 應急領(lǐng)導小組組織機構(gòu)應急領(lǐng)導小組組織機構(gòu) 3 23 2 應急領(lǐng)導小組職責應急領(lǐng)導小組職責 1 應急總指揮職責 1 保證在任何時間 及時協(xié)調(diào)應急行動所有涉及的崗位人員 2 提供必須的緊急響應設(shè)備 3 在緊急情況下全面負責緊急行動 4 在必要時向外界求救 例如 119 110 120 等 2 應急副總指揮職責 1 在總指揮領(lǐng)導下具體開展工作 當總指揮不在時履行總指揮職責 2 根據(jù)獲得的應急信息下達命令 5 3 各相關(guān)設(shè)備負責人職責 1 負責盡快收集信息向應急總指揮匯報事故情況 2 負責現(xiàn)場臨時設(shè)備搶救和對事態(tài)的控制 3 聽從上級指揮人員的指揮 3 33 3 應急小組成員職責應急小組成員職責 1 值班人員平時應做好應急事件的監(jiān)控 預警工作 當應急事件發(fā)生后 迅速生產(chǎn)事件上報相關(guān)領(lǐng)導 并進行先期處置 如有必要通知二 三線工程師 2 二線 三線工程師在接到應急信息后 應積極配合值班人員進行先期處 置 迅速趕往故障現(xiàn)場提供技術(shù)援助 3 對于在應急故障處理期間發(fā)生的新問題 新情況 應認真登記 及時上 報 對于超出 應急預案 界定的應急事件 應及時匯報應急領(lǐng)導小組 爭取 盡早提出補救措施進行恢復 6 四 應急響應機制四 應急響應機制 4 14 1 基本處理流程基本處理流程 1 值班人員平時應做好應急事件的監(jiān)控工作 對于突發(fā)事件應認真分析 準確判定故障發(fā)生的數(shù)據(jù)域 負責跟蹤該事件直至其結(jié)束 對于不在運維中心 的故障 應在第一時間內(nèi)通知負責人去現(xiàn)場處理 密切關(guān)注事件流程及進展情 況 并做好登記工作上報領(lǐng)導 2 正常情況下 要求值班人員在 30 分鐘內(nèi)進行事件確認 如果屬于一般事 件則按照事件流程進行分派處理 否則應迅速啟動 應急預案 并嚴格按照 應急預案 所規(guī)定的步驟快速實施應急處置 及時匯報上級領(lǐng)導 掌握實時 處理情況 3 在處理過程中 如需其他部門去現(xiàn)場增援處理 應及時向上級領(lǐng)導部門 匯報 協(xié)調(diào)溝通 盡快聯(lián)系技術(shù)工程師或廠家技術(shù)支持趕赴現(xiàn)場援助處理 7 4 24 2 機房應急開關(guān)機具體措施機房應急開關(guān)機具體措施 機房各設(shè)備關(guān)閉順序如下 4 34 3 服務器及存儲設(shè)備故障處理服務器及存儲設(shè)備故障處理 排錯流程排錯流程 8 五 應急方案五 應急方案 5 15 1 網(wǎng)絡故障事件應急預案網(wǎng)絡故障事件應急預案 1 發(fā)生網(wǎng)絡故障事件后 系統(tǒng)使用人員應及時報告應急小組 2 應急小組及時查清網(wǎng)絡故障位置和原因 并予以解決 3 不能確定故障的解決時間或解決故障的期限并屬較大 III 級 及其以 上的 應急小組應報告所領(lǐng)導 4 網(wǎng)絡系統(tǒng)故障突發(fā)事件分級 故障等級故障等級故故 障障 現(xiàn)現(xiàn) 象象 網(wǎng)絡完全擁塞或設(shè)備宕機 網(wǎng)絡或設(shè)備處理能力嚴重受影響 對最終客戶的業(yè)務運作有嚴重影 響 1 級 網(wǎng)絡或設(shè)備故障對重要的客戶 公司經(jīng)理級或重要的部門 造成嚴 重影響 網(wǎng)絡或設(shè)備的性能嚴重下降 對最終客戶的業(yè)務運作產(chǎn)生重要影響 部分區(qū)域網(wǎng)絡故障 一般網(wǎng)絡節(jié)點發(fā)生故障 2 級 大部分客戶的網(wǎng)絡通訊質(zhì)量下降 網(wǎng)絡或設(shè)備性能受損 但最終客戶大部分業(yè)務仍可正常工作3 級 報警出錯和操作命令反常 4 級其它一般的故障 不影響系統(tǒng)的整體運行 不影響大部分客戶的使 用 5 25 2 服務器故障應急預案服務器故障應急預案 1 服務器故障后 應急小組確定故障設(shè)備及故障原因 并通知相關(guān)廠商 2 根據(jù)服務器修復和恢復系統(tǒng)所需時間 由所領(lǐng)導決定是否啟用備份設(shè)備 3 如啟用備份設(shè)備 在服務器故障排除后 應急小組在確保不影響正常業(yè) 務工作的前提下 利用網(wǎng)絡空閑時期替換備用設(shè)備 如不啟用備份設(shè)備 應急 9 小組應積極配合相關(guān)廠商解決服務器故障事件 5 35 3 空調(diào)設(shè)備故障處理空調(diào)設(shè)備故障處理 若空調(diào)損壞 應第一時間通知廠家上門進行維修 并及時報告信息部相關(guān) 領(lǐng)導請示 獲得授權(quán)后按機房設(shè)備關(guān)閉順序關(guān)閉各類設(shè)備 5 45 4 消防設(shè)備故障處理消防設(shè)備故障處理 一旦機房發(fā)生火災 應遵照下列原則 首先確保人員安全 其次保護關(guān)鍵 設(shè)備 數(shù)據(jù)安全 三是保護一般設(shè)備安全 人員疏散的程序是 機房工作人員立即按響火警警報 并通過 119 電話向 公安消防請求支援 所有人員戴上防毒面具 所有不參與滅火的人員按照預先 確定的線路 迅速從機房中撤出 人員滅火的程序是 首先切斷所有電源 啟動自動噴淋系統(tǒng)或使用滅火器 滅火值班人員戴好防毒面具 從指定位置取出泡沫滅火器進行滅火 5 55 5 電源設(shè)備故障處理電源設(shè)備故障處理 在緊急情況發(fā)生時 應按如下步驟進行關(guān)機 1 確認所有負載均已安全關(guān)機 2 關(guān)閉 UPS 負載電源 3 將 UPS 的系統(tǒng)啟用開關(guān)切換到 off 的狀態(tài) 4 將 DC 電池連接斷路器切換到 off 的位置 5 將所有電池拉出到紅色電池斷開線以外 6 斷開 PDU 上的斷路器 10 7 將 PDU 后面總輸入斷路器切換到斷開位置 8 將每個上行主電路斷路器切換到斷開位置 5 35 3 災害性事件應急預案災害性事件應急預案 1 一旦發(fā)生災害性事件 應急小組每一位成員都應有責任在第一時間進入 機房搶救服務器及存儲設(shè)備 2 應急小組對服務器及存儲設(shè)備的損壞程序進行評估 如服務器損壞或存 儲設(shè)備損壞無法使用 立即聯(lián)系相關(guān)廠商 進入維保服務程序 3 根據(jù)服務器或存儲設(shè)備修復和恢復系統(tǒng)所需時間 由所領(lǐng)導小組決定是 否啟用備份設(shè)備 5 45 4 其他突發(fā)事件應急預案其他突發(fā)事件應急預案 應急小組立刻派出技術(shù)人員進入現(xiàn)場 制定相應措施 根據(jù)實際情況靈活 處理 并按要求報告所領(lǐng)導小組 六 后期處置六 后期處置 1 故障排除后 應急小組向各部室發(fā)出故障解除 系統(tǒng)恢復正常運行通 知 2 系統(tǒng)恢復運行后 相關(guān)操作人員盡快通知參保單位和個人辦理社會保 險業(yè)務事項 并對故障發(fā)生前所進行過的業(yè)務操作進行檢查 核對業(yè)務數(shù)據(jù)是 否正確或有無丟失 不正確或有丟失的應馬上更正或補錄 確保數(shù)據(jù)的正確和 11 完整 對在故障期間采用手工受理的事項 應及時在系統(tǒng)中補充完善 3 所領(lǐng)導組織有關(guān)人員及有關(guān)技術(shù)專家組成事件調(diào)查組 對事件發(fā)生原 因 性質(zhì) 影響 后果 責任及應急處置能力 恢復重建等問題進行全面調(diào)查 評估 總結(jié)經(jīng)驗教訓 完善信息系統(tǒng)應急處理預案 整改信息系統(tǒng)存在的隱患 七 應急保障七 應急保障