同城災(zāi)備中心建設(shè)情況及業(yè)務(wù)持續(xù)性演練方案匯報(39張)課件

1、同城災(zāi)備中心建設(shè)情況及業(yè)務(wù)持續(xù)性演練方案匯報匯報內(nèi)容同城災(zāi)備中心建設(shè)情況簡介業(yè)務(wù)持續(xù)性計劃演練方案簡介災(zāi)備體系建設(shè)的必要性滿足國家及行業(yè)監(jiān)管要求 重要信息系統(tǒng)災(zāi)難恢復(fù)指南GB/T 20988-2007 保險業(yè)信息系統(tǒng)災(zāi)難恢復(fù)管理指引 2008年20號文公司業(yè)務(wù)及IT發(fā)展到一定階段的內(nèi)生性需求適應(yīng)保險行業(yè)服務(wù)水平日益提高的要求應(yīng)對突發(fā)災(zāi)難的最后一道防線業(yè)內(nèi)主流的災(zāi)備復(fù)制技術(shù)的對比基于存儲盤陣的災(zāi)備復(fù)制技術(shù)基于數(shù)據(jù)庫的災(zāi)備復(fù)制技術(shù)網(wǎng)絡(luò)支持同步傳輸異步傳輸?shù)讓佑布仨毻瑯?gòu)支持異購產(chǎn)品目標(biāo)端不可用可用雙活狀態(tài)支持模式多對一一對多級聯(lián)雙向多對一一對多級聯(lián)雙向是否支持按需復(fù)制全量同步支持?jǐn)?shù)據(jù)丟失量零丟失分

2、鐘級CaptureReadExportImportPostCaptureQueueExportQueuePostQueueSQLRedo-Logs源系統(tǒng)目標(biāo)系統(tǒng)災(zāi)備軟件復(fù)制原理業(yè)務(wù)系統(tǒng)分類容災(zāi)A類業(yè)務(wù)系統(tǒng)B類支持支撐系統(tǒng)C類業(yè)務(wù)系統(tǒng) RTO=2小時，RPO=30分鐘 RTO=2小時，RPO=8小時 RTO=24小時，RPO=8小時核心業(yè)務(wù)系統(tǒng)/銀?；ミB互通域控ADCALL CENTER系統(tǒng)財務(wù)系統(tǒng)/OFSA準(zhǔn)入系統(tǒng)EAD核心報表/MIS收付系統(tǒng)域名解析系統(tǒng)DNS稽核系統(tǒng)保險卡系統(tǒng)企業(yè)服務(wù)總線ESB償付能力系統(tǒng)ILOG統(tǒng)一認(rèn)證中心AC保監(jiān)上報投資系統(tǒng)補(bǔ)丁分發(fā)系統(tǒng)WSUS反洗錢銀企直連防病毒系統(tǒng)審

3、計系統(tǒng)DM系統(tǒng)SVN系統(tǒng)工會系統(tǒng)網(wǎng)銷系統(tǒng)OA系統(tǒng)郵件代理理賠影像系統(tǒng)ITS人力資源系統(tǒng)自主查詢飛天誠信令牌認(rèn)證系統(tǒng)準(zhǔn)備金自助機(jī)A、B兩類系統(tǒng)為應(yīng)用級容災(zāi)，C類系統(tǒng)為數(shù)據(jù)級容災(zāi)我司同城災(zāi)備中心建設(shè)的方法論及路線圖我司災(zāi)備中心與國家標(biāo)準(zhǔn)對標(biāo)同城災(zāi)備中心建設(shè)情況簡介業(yè)務(wù)持續(xù)性計劃演練方案簡介監(jiān)管要求保監(jiān)會2008年第20號文第二十九條保險機(jī)構(gòu)所制定的災(zāi)難恢復(fù)預(yù)案，應(yīng)按照由模擬到實際、從易到難、從局部到整體的原則進(jìn)行測試和演練，及時總結(jié)評估，完善災(zāi)難恢復(fù)預(yù)案，通過演練使得相關(guān)人員熟練災(zāi)難恢復(fù)操作及流程。 災(zāi)難恢復(fù)預(yù)案的演練包括但不限于桌面演練、模擬演練、實戰(zhàn)演練、部分演練和全面演練。保險機(jī)構(gòu)應(yīng)定期組織

4、開展災(zāi)難恢復(fù)預(yù)案的演練工作。災(zāi)難恢復(fù)預(yù)案每年至少演練一次，演練類型可以是模擬演練、實戰(zhàn)演練、部分演練和全面演練。演練目的驗證業(yè)務(wù)持續(xù)計劃的完整性、易用性、明確性、有效性和兼容性；驗證災(zāi)難恢復(fù)管理組織架構(gòu)的領(lǐng)導(dǎo)、決策與指揮能力；驗證公司災(zāi)難恢復(fù)管理組織架構(gòu)中各相關(guān)部門的協(xié)同工作能力；使災(zāi)難恢復(fù)相關(guān)的技術(shù)人員與業(yè)務(wù)人員能夠熟悉業(yè)務(wù)持續(xù)計劃，提高員工的 災(zāi)難備份和業(yè)務(wù)持續(xù)意識，提高恢復(fù)團(tuán)隊的實際操作技能；驗證災(zāi)備技術(shù)的有效性，確認(rèn)災(zāi)難恢復(fù)水平是否滿足中銀保險災(zāi)難恢復(fù)目 標(biāo)（RTO、RPO）的要求。本次演練的形式桌面演練桌面演練是所有參演人員根據(jù)預(yù)設(shè)的場景，采用會議的方式，以角色扮演為基礎(chǔ)，就應(yīng)急響應(yīng)

5、和恢復(fù)流程中的管理與指揮協(xié)調(diào)方面問題進(jìn)行桌面推演。模擬演練模擬演練（實際測試演練）是利用備用或測試系統(tǒng)進(jìn)行模擬的系統(tǒng)切換和進(jìn)行業(yè)務(wù)恢復(fù)操作，不涉及真實的業(yè)務(wù)交易，不影響生產(chǎn)正常運行。實戰(zhàn)演練實戰(zhàn)演練是指對災(zāi)難備份系統(tǒng)進(jìn)行真實切換和真實業(yè)務(wù)交流，由于系統(tǒng)切換的復(fù)雜性，在進(jìn)行系統(tǒng)切換和業(yè)務(wù)恢復(fù)時，可能會存在一定的風(fēng)險因素，并且?guī)矶虝r間的服務(wù)中斷。通過實戰(zhàn)演練，可以最大程度地檢驗災(zāi)難備份系統(tǒng)和業(yè)務(wù)持續(xù)計劃的有效性和恢復(fù)能力。演練的范圍涉及的信息系統(tǒng)保險卡系統(tǒng) 演練的時間六月二十一日參演機(jī)構(gòu)全轄保險卡系統(tǒng)拓?fù)溲菥殞ο到y(tǒng)產(chǎn)生影響情況分析對前臺服務(wù)的影響用戶只能訪問前臺應(yīng)用首頁，不能進(jìn)行其他任何操作，與

6、其他系統(tǒng)的交互也就不能進(jìn)行了。短信數(shù)據(jù)提取不到，發(fā)送不了短信。保單不能傳送到后臺。對后臺服務(wù)的影響由于登錄調(diào)用的是AC的接口校驗，所以用戶可以登錄系統(tǒng)，點擊左邊應(yīng)用菜單，但是不能進(jìn)行其他任何功能性的操作。對代理服務(wù)的影響由于登錄調(diào)用的是AC的接口校驗，所以用戶可以登錄系統(tǒng)，點擊左邊應(yīng)用菜單，但是不能進(jìn)行其他任何功能性的操作，同時由于代理系統(tǒng)為銀保通系統(tǒng)提供了服務(wù)，代理系統(tǒng)不能進(jìn)行數(shù)據(jù)操作，銀保通系統(tǒng)也就不能進(jìn)行其他操作。對SFTP服務(wù)的影響數(shù)據(jù)不能正常提取、傳送。對電子簽章服務(wù)的影響由于電子簽章服務(wù)不連接數(shù)據(jù)庫，所以不會對該服務(wù)造成影響。AC系統(tǒng)使用的不是保險卡的數(shù)據(jù)庫，所以保險卡數(shù)據(jù)庫宕機(jī)不

7、會對AC造成影響。演練對系統(tǒng)產(chǎn)生的影響分析技術(shù)層指揮層決策層演練組織架構(gòu)相關(guān)職責(zé)災(zāi)難恢復(fù)領(lǐng)導(dǎo)組領(lǐng)導(dǎo)突發(fā)事件的應(yīng)急處置，負(fù)責(zé)應(yīng)急資源的協(xié)調(diào)和調(diào)度,對參與演習(xí)的各工作組進(jìn)行監(jiān)督管理和組織,并做出重大應(yīng)急處置的決策；災(zāi)難宣告,負(fù)責(zé)與董事會溝通等。災(zāi)難恢復(fù)指揮組現(xiàn)場指揮應(yīng)急處置、損害評估、災(zāi)難恢復(fù)；向演練領(lǐng)導(dǎo)小組匯報應(yīng)急處置情況、損害評估情況、提供處置決策建議；災(zāi)難預(yù)警；監(jiān)督、檢查和總結(jié)災(zāi)難恢復(fù)工作。技術(shù)恢復(fù)組在指揮組的指揮下實施應(yīng)急處置、災(zāi)難恢復(fù)操作；現(xiàn)場評估災(zāi)難損害程度；負(fù)責(zé)災(zāi)難恢復(fù)過程的記錄、報告和通訊聯(lián)絡(luò)；分析和總結(jié)災(zāi)難恢復(fù)工作。業(yè)務(wù)恢復(fù)組負(fù)責(zé)業(yè)務(wù)功能核查，追補(bǔ)數(shù)據(jù)等業(yè)務(wù)恢復(fù)職責(zé)；協(xié)助技術(shù)恢復(fù)

8、組進(jìn)行突發(fā)事件和災(zāi)難恢復(fù)的處置；完成業(yè)務(wù)測試案例；負(fù)責(zé)業(yè)務(wù)恢復(fù)確認(rèn)。相關(guān)職責(zé)后勤保障組負(fù)責(zé)突發(fā)事件的設(shè)備、場地、人員、工具、后勤等資源保障的管理和協(xié)調(diào)工作；負(fù)責(zé)保障人力、物力、電力、通訊、安全保衛(wèi)等工作；與分支機(jī)構(gòu)及合作伙伴通訊聯(lián)絡(luò)；負(fù)責(zé)突發(fā)事件前的資源統(tǒng)一準(zhǔn)備和事件后的資源回收；負(fù)責(zé)與總行、行業(yè)協(xié)會、監(jiān)管機(jī)構(gòu)等相關(guān)部門的溝通，確保信息通常，避免災(zāi)難的影響擴(kuò)大。廠商支持組根據(jù)雙方的約定提供災(zāi)難恢復(fù)所需設(shè)備等相關(guān)資源；根據(jù)雙方簽訂的服務(wù)合同、服務(wù)等級協(xié)議（SLA）、以及備忘錄等材料提供技術(shù)支持?？蛻敉对V支持組負(fù)責(zé)公司公共關(guān)系處理，包括對外的解釋、媒體公關(guān)等事宜，減少公司由于災(zāi)難帶來的負(fù)面影響。演

9、練場景約定本次演練的場景北京西單生產(chǎn)中心的保險卡系統(tǒng)數(shù)據(jù)庫系統(tǒng)應(yīng)用和數(shù)據(jù)庫分別出現(xiàn)宕機(jī)北京亦莊的同城災(zāi)備中心啟動對應(yīng)應(yīng)用和數(shù)據(jù)庫服務(wù)接管保險卡系統(tǒng)后北京西單生產(chǎn)中心的保險卡系統(tǒng)恢復(fù)正常，系統(tǒng)由亦莊災(zāi)備中心回切西單生產(chǎn)中心應(yīng)急、切換、回切的全過程本次演練涉及系統(tǒng)示意圖一（正常應(yīng)用）生產(chǎn)WEB+APP災(zāi)備WEB+APP生產(chǎn)數(shù)據(jù)庫災(zāi)備數(shù)據(jù)庫 INTERNETIPsec VPN連接池連接池本次演練涉及系統(tǒng)示意圖二（應(yīng)用切換）生產(chǎn)WEB+APP災(zāi)備WEB+APP生產(chǎn)數(shù)據(jù)庫災(zāi)備數(shù)據(jù)庫 INTERNETIPsec VPN連接池連接池場景一場景一步驟執(zhí)行人操作話述中午14點，監(jiān)控系統(tǒng)短信告警：保險卡系統(tǒng)3臺應(yīng)

10、用服務(wù)器中的兩臺已經(jīng)宕機(jī)，無法對外提供服務(wù)。 匯報系統(tǒng)管理員看到告警短信后，向技術(shù)恢復(fù)組組長匯報報告領(lǐng)導(dǎo)，目前保險卡系統(tǒng)3臺應(yīng)用服務(wù)器中的兩臺停機(jī)對外提供服務(wù)，目前保險卡系統(tǒng)仍可用，但服務(wù)響應(yīng)將會減慢，我們將會盡快修復(fù)，預(yù)計修復(fù)時間為30分鐘。匯報技術(shù)組組長接到保險卡系統(tǒng)兩臺應(yīng)用服務(wù)器停止服務(wù)報告后，向指揮組匯報報告領(lǐng)導(dǎo)，保險卡系統(tǒng)3臺應(yīng)用服務(wù)器中的兩臺出現(xiàn)故障，無法對外提供服務(wù)，目前保險卡系統(tǒng)仍有一臺應(yīng)用服務(wù)器可用，但服務(wù)響應(yīng)將會減慢?，F(xiàn)在已經(jīng)組織人員進(jìn)行修復(fù)，預(yù)計修復(fù)時間為30分鐘。指示指揮組組長收到報告后，進(jìn)行修復(fù)工作安排知道了，一定要盡快修復(fù)。另外，安排數(shù)據(jù)庫、網(wǎng)絡(luò)相關(guān)人員隨時監(jiān)控保險

11、卡系統(tǒng)的業(yè)務(wù)，出現(xiàn)問題及時匯報。修復(fù)系統(tǒng)管理員系統(tǒng)管理員在緊急修復(fù)，進(jìn)展比較順利匯報系統(tǒng)管理員修復(fù)應(yīng)用服務(wù)器后，向技術(shù)恢復(fù)組組長匯報報告，保險卡系統(tǒng)停止服務(wù)的兩臺應(yīng)用服務(wù)器已經(jīng)修復(fù)，并開始對外提供服務(wù)匯報技術(shù)組組長接到應(yīng)用服務(wù)器恢復(fù)正常報告后，向指揮組組長匯報報告領(lǐng)導(dǎo)，目前保險卡系統(tǒng)停止服務(wù)的兩臺應(yīng)用服務(wù)器已經(jīng)修復(fù)，并開始對外提供服務(wù)，保險卡系統(tǒng)對外服務(wù)已經(jīng)恢復(fù)正常。本次演練涉及系統(tǒng)示意圖三（數(shù)據(jù)庫切換）生產(chǎn)WEB+APP災(zāi)備WEB+APP生產(chǎn)數(shù)據(jù)庫災(zāi)備數(shù)據(jù)庫 INTERNETIPsec VPN連接池連接池場景二場景二步驟執(zhí)行人操作話述15點，監(jiān)控系統(tǒng)短信告警：保險卡系統(tǒng)數(shù)據(jù)庫服務(wù)器已經(jīng)宕機(jī)，

12、無法對外提供服務(wù)匯報系統(tǒng)管理員看到告警短信后，向技術(shù)恢復(fù)組組長匯報報告，保險卡系統(tǒng)數(shù)據(jù)庫服務(wù)器出現(xiàn)故障，目前保險卡系統(tǒng)不可用，我們將會盡快修復(fù)，預(yù)計修復(fù)時間為30分鐘。匯報技術(shù)組組長接到保險卡系統(tǒng)數(shù)據(jù)庫服務(wù)器停止服務(wù)報告后，向指揮組組長匯報報告領(lǐng)導(dǎo)，保險卡系統(tǒng)數(shù)據(jù)庫服務(wù)器出現(xiàn)故障，無法對外提供服務(wù)，目前保險卡系統(tǒng)不可用?，F(xiàn)在已經(jīng)組織人員進(jìn)行修復(fù)，預(yù)計修復(fù)時間為30分鐘。指示指揮組組長收到報告后，進(jìn)行修復(fù)工作安排知道了，一定要盡快修復(fù)。另外，安排數(shù)據(jù)庫、網(wǎng)絡(luò)相關(guān)人員隨時準(zhǔn)備，一旦系統(tǒng)啟動，立刻恢復(fù)業(yè)務(wù)，出現(xiàn)問題及時匯報。修復(fù)系統(tǒng)管理員系統(tǒng)管理員在緊急修復(fù)，進(jìn)展不是很順利匯報系統(tǒng)管理員數(shù)據(jù)庫服務(wù)器

13、無法在預(yù)計時間內(nèi)進(jìn)行修復(fù)，后續(xù)修復(fù)時間預(yù)計為3小時，向技術(shù)恢復(fù)組組長匯報報告，保險卡系統(tǒng)數(shù)據(jù)庫服務(wù)器出現(xiàn)硬件故障，需要向廠家調(diào)取備件后才能恢復(fù)，暫時無法恢復(fù)業(yè)務(wù)，預(yù)計備件到場時間為2小時，后續(xù)1小時進(jìn)行修復(fù)，因此建議啟動災(zāi)難恢復(fù)預(yù)案。匯報技術(shù)組組長接到數(shù)據(jù)庫服務(wù)器無法在RTO內(nèi)恢復(fù)正常報告后，向指揮組組長匯報報告領(lǐng)導(dǎo)，保險卡系統(tǒng)數(shù)據(jù)庫服務(wù)器的修復(fù)預(yù)計還需要3小時，已經(jīng)超出了我們設(shè)計的RTO，后續(xù)該如何操作，請指示。指示指揮組組長接到數(shù)據(jù)庫服務(wù)器無法在RTO內(nèi)恢復(fù)正常報告后進(jìn)行后續(xù)工作指示你們盡量在RTO規(guī)定時間內(nèi)恢復(fù)，同時我將請示災(zāi)難恢復(fù)領(lǐng)導(dǎo)組進(jìn)行災(zāi)難恢復(fù)準(zhǔn)備工作請示指揮組組長向災(zāi)難恢復(fù)領(lǐng)導(dǎo)組

14、匯報報告領(lǐng)導(dǎo)，保險卡系統(tǒng)數(shù)據(jù)庫服務(wù)器30分鐘前出現(xiàn)硬件故障，無法對外提供服務(wù)。備件到場及修復(fù)時間預(yù)計還需要3小時，超過RTO。已經(jīng)責(zé)成相關(guān)人員盡快修復(fù)，目前是否開始進(jìn)行災(zāi)難恢復(fù)準(zhǔn)備工作？指示領(lǐng)導(dǎo)組組長可以。你先通知相關(guān)人員，進(jìn)行人員集結(jié)，開始進(jìn)行相關(guān)應(yīng)急指揮工作。場景三場景三步驟執(zhí)行人操作話述下午16點，應(yīng)急指揮中心成立、人員集結(jié)完畢應(yīng)急指揮準(zhǔn)備工作指揮組組長開始災(zāi)難準(zhǔn)備工作請后勤保障組進(jìn)行后勤保障及危機(jī)公關(guān)工作，請客戶投訴支持組準(zhǔn)備問題應(yīng)答準(zhǔn)備，請技術(shù)恢復(fù)組和業(yè)務(wù)恢復(fù)組對此次事件可能造成的影響進(jìn)行初步評估 初步影響評估技術(shù)組組長進(jìn)行初步影響評估，并向災(zāi)難恢復(fù)指揮組匯報報告領(lǐng)導(dǎo)，根據(jù)指示，技術(shù)

15、恢復(fù)組和業(yè)務(wù)恢復(fù)組人員已完成初步評估，數(shù)據(jù)庫服務(wù)器備件不到場，服務(wù)器無法恢復(fù)正常。根據(jù)與廠商的協(xié)調(diào)，備件已經(jīng)發(fā)出，但到場最快還需要半小時，另外修復(fù)的時間也需要最少半小時，且尚存在其他不可預(yù)估的風(fēng)險，建議災(zāi)難預(yù)警。災(zāi)難預(yù)警指揮組組長決定災(zāi)難預(yù)警立即向中金災(zāi)備中心預(yù)警，請技術(shù)組準(zhǔn)備好系統(tǒng)切換前的準(zhǔn)備工作進(jìn)行災(zāi)難預(yù)警技術(shù)組執(zhí)行人進(jìn)行災(zāi)難預(yù)警中金災(zāi)備中心，我是中銀保險XXX，現(xiàn)通知你們進(jìn)入預(yù)警狀態(tài)，做好相應(yīng)的保障準(zhǔn)備工作技術(shù)組組長匯報準(zhǔn)備工作進(jìn)展報告領(lǐng)導(dǎo)，現(xiàn)在一切技術(shù)準(zhǔn)備工作已經(jīng)就緒，災(zāi)備系統(tǒng)狀態(tài)正常，可以準(zhǔn)備進(jìn)行切換。損害及影響評估指揮組組長再次進(jìn)行損害及影響評估請技術(shù)恢復(fù)組和業(yè)務(wù)恢復(fù)組再次進(jìn)行損害

16、及影響評估報告損害及影響評估結(jié)果指定的災(zāi)難評估人員填寫災(zāi)害評估表及災(zāi)難宣告表第一欄報告領(lǐng)導(dǎo)，與廠家聯(lián)系，由于道路擁堵，備件還在路上，具體恢復(fù)時間尚無法估計。損害評估表、災(zāi)難宣告表已經(jīng)填寫完畢，建議進(jìn)行災(zāi)難宣告，請指示向領(lǐng)導(dǎo)組匯報損害及影響評估結(jié)果指揮組組長填寫災(zāi)難宣告表第二欄，向領(lǐng)導(dǎo)組報告損害評估結(jié)果，建議災(zāi)難宣告 報告領(lǐng)導(dǎo)，根據(jù)現(xiàn)損害及影響評估結(jié)果，由于備件具體到場時間無法估計，業(yè)務(wù)停止時間過長，建議領(lǐng)導(dǎo)組進(jìn)行災(zāi)難宣告，另保險卡系統(tǒng)切換時間為15分鐘，請指示。答復(fù)領(lǐng)導(dǎo)組組長就災(zāi)難宣告事宜進(jìn)行答復(fù)領(lǐng)導(dǎo)組將認(rèn)真研究是否進(jìn)行災(zāi)難宣告，以及何時進(jìn)行宣告，研究結(jié)果會及時通知。同時請密切關(guān)注現(xiàn)場情況，有

17、進(jìn)展及時匯報。備件仍未到場，保險卡系統(tǒng)無法在預(yù)定RTO內(nèi)恢復(fù)災(zāi)難宣告領(lǐng)導(dǎo)組組長簽署災(zāi)難宣告表第三欄，同時進(jìn)行災(zāi)難宣告經(jīng)過領(lǐng)導(dǎo)組的研究，接受指揮組災(zāi)難宣告建議，對外進(jìn)行災(zāi)難宣告；請指揮組組織人員進(jìn)行切換工作，防范風(fēng)險，務(wù)必保證在16點前恢復(fù)保險卡系統(tǒng)的運營；請后勤保障組根據(jù)需要向上級主管部門、董事會及其他監(jiān)管部門進(jìn)行解釋，降低影響。災(zāi)備切換技術(shù)組進(jìn)行切換工作，將保險卡生產(chǎn)系統(tǒng)切換到災(zāi)備中心運行 系統(tǒng)切換進(jìn)展匯報技術(shù)組組長向指揮組匯報報告，保險卡系統(tǒng)已經(jīng)切換到災(zāi)備中心，數(shù)據(jù)庫運行正常，業(yè)務(wù)恢復(fù)組可以開始業(yè)務(wù)驗證與恢復(fù)工作災(zāi)備切換業(yè)務(wù)組業(yè)務(wù)驗證與恢復(fù)業(yè)務(wù)恢復(fù)進(jìn)展匯報業(yè)務(wù)組組長想指揮組匯報報告，經(jīng)驗證

18、，業(yè)務(wù)已經(jīng)恢復(fù)正常，業(yè)務(wù)數(shù)據(jù)也恢復(fù)到停止服務(wù)的時間，可以正式對外提供服務(wù)業(yè)務(wù)恢復(fù)進(jìn)展匯報指揮組組長向領(lǐng)導(dǎo)組匯報報告領(lǐng)導(dǎo)，保險卡業(yè)務(wù)已經(jīng)恢復(fù)正常，并正式對外提供服務(wù)，災(zāi)難切換完成災(zāi)難切換進(jìn)展指示領(lǐng)導(dǎo)組組長對災(zāi)難切換進(jìn)展進(jìn)行指示，安排后續(xù)工作很好。請指揮組繼續(xù)關(guān)注生產(chǎn)的恢復(fù)情況，并根據(jù)進(jìn)展安排時間恢復(fù)到生產(chǎn)環(huán)境。同時由于由災(zāi)備環(huán)境頂替生產(chǎn)，請隨時關(guān)注業(yè)務(wù)運行情況，以防范風(fēng)險。場景四場景四步驟執(zhí)行人操作話述下午17點，備件到場，保險卡數(shù)據(jù)庫服務(wù)器恢復(fù)生產(chǎn)環(huán)境恢復(fù)匯報技術(shù)組組長匯報生產(chǎn)環(huán)境恢復(fù)進(jìn)展報告，生產(chǎn)數(shù)據(jù)庫服務(wù)器備件已經(jīng)到場，數(shù)據(jù)庫環(huán)境恢復(fù)正常，可以進(jìn)行回切操作回切指示指揮組組長針對生產(chǎn)恢復(fù)情況

19、進(jìn)行回切指示17點15分開始，請技術(shù)恢復(fù)組進(jìn)行回退操作，請業(yè)務(wù)恢復(fù)組進(jìn)行回退后的業(yè)務(wù)驗證與數(shù)據(jù)恢復(fù)。有情況及時匯報回切技術(shù)組回切回切匯報技術(shù)組組長針對回切情況向指揮組匯報報告領(lǐng)導(dǎo)，系統(tǒng)已經(jīng)回退到生產(chǎn)環(huán)境，數(shù)據(jù)庫恢復(fù)正常，網(wǎng)絡(luò)恢復(fù)正常，可以開始進(jìn)行業(yè)務(wù)驗證與恢復(fù)?；厍袠I(yè)務(wù)組回切后業(yè)務(wù)情況驗證回切匯報業(yè)務(wù)組組長針對回切情況向指揮組匯報報告，經(jīng)驗證，業(yè)務(wù)已經(jīng)回退到生產(chǎn)環(huán)境，業(yè)務(wù)數(shù)據(jù)恢復(fù)到回退前，可以對外提供服務(wù)回切匯報指揮組組長針對回切業(yè)務(wù)恢復(fù)情況向領(lǐng)導(dǎo)組匯報報告，業(yè)務(wù)已經(jīng)回退到生產(chǎn)環(huán)境，業(yè)務(wù)數(shù)據(jù)恢復(fù)到回退前，現(xiàn)在已經(jīng)開始利用生產(chǎn)環(huán)境對外提供服務(wù)，整體災(zāi)難恢復(fù)已經(jīng)完成。指示領(lǐng)導(dǎo)組組長很好，災(zāi)難恢復(fù)圓

20、滿完成。應(yīng)急指揮中心解散，請安排好后續(xù)的人員、匯報、總結(jié)等工作。本次災(zāi)難恢復(fù)到此結(jié)束實戰(zhàn)演練條件約定演練數(shù)據(jù)來源的約定演練數(shù)據(jù)來源于真實的生產(chǎn)數(shù)據(jù)演練數(shù)據(jù)去向的約定本次是實戰(zhàn)演練，演練數(shù)據(jù)將進(jìn)入生產(chǎn)演練系統(tǒng)的約定保險卡災(zāi)備系統(tǒng)演練網(wǎng)絡(luò)的約定生產(chǎn)網(wǎng)絡(luò)數(shù)據(jù)安全的約定（出現(xiàn)接管失敗、數(shù)據(jù)丟失的恢復(fù)方案）與應(yīng)用系統(tǒng)日志進(jìn)行核對等演練前準(zhǔn)備工作確認(rèn)（一）序號系統(tǒng)自查內(nèi)容自查情況責(zé)任人1網(wǎng)絡(luò)生產(chǎn)中心至災(zāi)備中心專線是否正常吳震銘2生產(chǎn)中心內(nèi)部各個域之間的網(wǎng)絡(luò)是否暢通3災(zāi)備中心內(nèi)部各個域之間網(wǎng)絡(luò)是否暢通4參演機(jī)構(gòu)到兩個中心之間的網(wǎng)絡(luò)是否暢通5與短信網(wǎng)關(guān)等外圍系統(tǒng)的網(wǎng)絡(luò)暢通 胡小紅6服務(wù)器確認(rèn)源目標(biāo)主機(jī)可登陸7

21、確認(rèn)源目標(biāo)主機(jī)無硬件問題8確認(rèn)源目標(biāo)主機(jī)目錄空間可用9確認(rèn)源目標(biāo)主機(jī)操作系統(tǒng)版本一致10確認(rèn)監(jiān)控、管理平臺的保障11應(yīng)用確認(rèn)應(yīng)用對外提供服務(wù)正常薛建龍12確認(rèn)應(yīng)用系統(tǒng)滿足切換演練的條件 演練前準(zhǔn)備工作確認(rèn)（二）序號系統(tǒng)自查內(nèi)容自查情況責(zé)任人13數(shù)據(jù)庫確認(rèn)數(shù)據(jù)庫主備庫的硬件設(shè)備的正常運行 宋國哲14確認(rèn)主機(jī)資源、存儲等參數(shù)滿足切換需求 15確認(rèn)主備庫之間的實時同步隊列正常進(jìn)行 16確認(rèn)源目標(biāo)數(shù)據(jù)庫版本17冗災(zāi)確認(rèn)同步復(fù)制軟件部署情況方航18確認(rèn)容災(zāi)切換流程可行性19相關(guān)人員資源的確認(rèn)20問題跟蹤解決情況21容災(zāi)系統(tǒng)維護(hù)方案及容災(zāi)切換流程的可行性22確認(rèn)保險卡系統(tǒng)切換手冊為最新版本23應(yīng)急預(yù)案確認(rèn)

22、實戰(zhàn)演練流程（一）階段序號階段名稱操作小組序號工作事項負(fù)責(zé)人操作人復(fù)核人開始時間結(jié)束時間完成情況階段一演練準(zhǔn)備工作技術(shù)組1下發(fā)“中銀保險業(yè)務(wù)持續(xù)性演練的通知”方航趙愛忠業(yè)務(wù)組2確認(rèn)演練所用的業(yè)務(wù)案例李哲峰甘正良技術(shù)組3確認(rèn)保險卡系統(tǒng)切換手冊為最新版本宋國哲方航領(lǐng)導(dǎo)/指揮組4演練領(lǐng)導(dǎo)小組人員就位趙愛忠技術(shù)組5演練技術(shù)組廠商支持組人員就位方航業(yè)務(wù)組6演練參與人員就位并通知參演的機(jī)構(gòu)確認(rèn)準(zhǔn)備工作李哲峰甘正良技術(shù)組7確認(rèn)兩中心環(huán)境狀態(tài)是否正常宋國哲胡小紅吳震銘方航實戰(zhàn)演練流程（二）階段序號階段名稱操作小組序號工作事項負(fù)責(zé)人操作人復(fù)核人開始時間結(jié)束時間完成情況階段二演練正式開始技術(shù)組1向指揮組上報災(zāi)難發(fā)

23、生場景及災(zāi)難影響評估,填寫損害評估表,建議災(zāi)難宣告并進(jìn)行系統(tǒng)切換.方航領(lǐng)導(dǎo)/指揮組2災(zāi)難宣告指示系統(tǒng)切換趙愛忠技術(shù)組3配置好復(fù)制鏈路宋國哲方航技術(shù)組4源端shutdown abort數(shù)據(jù)庫宋國哲方航技術(shù)組5切換準(zhǔn)備,調(diào)整目標(biāo)庫的fkjobtrigger宋國哲方航技術(shù)組6停止export進(jìn)程宋國哲方航技術(shù)組7激活反向復(fù)制宋國哲方航技術(shù)組8應(yīng)用切換到目標(biāo)庫.宋國哲方航技術(shù)組9災(zāi)備中心系統(tǒng)就緒確認(rèn) 宋國哲方航技術(shù)組10通知參演人員開始業(yè)務(wù)操作宋國哲方航參演機(jī)構(gòu)11恢復(fù)原庫宋國哲方航技術(shù)組12調(diào)整原庫的fktriggerjob宋國哲方航技術(shù)組13啟動目標(biāo)庫export宋國哲方航參演機(jī)構(gòu)14參演機(jī)構(gòu)以電

24、話及傳真方式通知業(yè)務(wù)組，完成交易測試。李哲峰甘正良業(yè)務(wù)組15生成報表，驗證災(zāi)備中心業(yè)務(wù)數(shù)據(jù)于生產(chǎn)中心業(yè)務(wù)數(shù)據(jù)的一致性李哲峰甘正良技術(shù)組16通過數(shù)據(jù)庫技術(shù)驗證災(zāi)備中心業(yè)務(wù)數(shù)據(jù)與生產(chǎn)中心業(yè)務(wù)數(shù)據(jù)的一致性宋國哲方航實戰(zhàn)演練流程（三）階段序號階段名稱操作小組序號工作事項負(fù)責(zé)人操作人復(fù)核人開始時間結(jié)束時間完成情況階段三災(zāi)備系統(tǒng)恢復(fù)技術(shù)組1向指揮組上報生產(chǎn)中心系統(tǒng)恢復(fù),請示回切方航領(lǐng)導(dǎo)/指揮組2演練領(lǐng)導(dǎo)小組下發(fā)恢復(fù)指令趙愛忠技術(shù)組3目標(biāo)庫停止應(yīng)用宋國哲方航技術(shù)組4修改原庫和目標(biāo)庫的fk/job/trigger宋國哲方航技術(shù)組5確認(rèn)原庫的sequence值比目標(biāo)庫大宋國哲方航技術(shù)組6停止目標(biāo)庫export宋

25、國哲方航技術(shù)組7切換應(yīng)用到原庫宋國哲方航技術(shù)組8檢查數(shù)據(jù)被復(fù)制到目標(biāo)庫宋國哲方航技術(shù)組9確認(rèn)生產(chǎn)環(huán)境數(shù)據(jù)庫狀態(tài)是否正常宋國哲方航技術(shù)組10確認(rèn)數(shù)據(jù)庫關(guān)聯(lián)的其他系統(tǒng)運行是否正常宋國哲方航業(yè)務(wù)組11用業(yè)務(wù)手段確認(rèn)兩中心數(shù)據(jù)一致性李哲峰甘正良技術(shù)組12用技術(shù)手段確認(rèn)兩中心數(shù)據(jù)一致性宋國哲方航實戰(zhàn)演練流程（四）階段序號階段名稱操作小組序號工作事項負(fù)責(zé)人操作人復(fù)核人開始時間結(jié)束時間完成情況階段四演練總結(jié)領(lǐng)導(dǎo)/指揮組1收集“演練記錄表”及演練總結(jié)報告技術(shù)組2編寫演練總結(jié)報告方航業(yè)務(wù)組3編寫演練總結(jié)報告李哲峰甘正良技術(shù)角度數(shù)據(jù)一致性對比比較幾個關(guān)鍵業(yè)務(wù)表數(shù)據(jù)（首先是記錄數(shù)，然后是工具逐條比對）卡前后臺同名表

26、是否實現(xiàn)前后臺卡業(yè)務(wù)表card銷售單表sellsettledoc、sellsettleitem前臺保單信息表applicant、insurant業(yè)務(wù)角度功能點及數(shù)據(jù)一致性對比測試業(yè)務(wù)系統(tǒng)全流程功能點測試業(yè)務(wù)功能點數(shù)據(jù)一致性檢查實戰(zhàn)演練關(guān)鍵風(fēng)險點評估切換前檢查1、檢查切換環(huán)境、切換腳本、測試用例、應(yīng)急方案的完備性根據(jù)切換前檢查報告，演練前1天上報決策層是否進(jìn)行應(yīng)急演練技術(shù)組、業(yè)務(wù)組2、檢查同步隊列是否正常3、檢查主、備數(shù)據(jù)庫是否正常4、檢查應(yīng)用進(jìn)程是否正常5、關(guān)注切換演練通知的反饋切換過程1、檢查系統(tǒng)標(biāo)記位是否正常切換根據(jù)檢查結(jié)果，若沒有達(dá)到預(yù)期結(jié)果，及時上報。技術(shù)組、領(lǐng)導(dǎo)指揮組2、檢查主庫同步

27、隊列是否有數(shù)據(jù)未完成同步切換后測試1、檢查切換后災(zāi)備數(shù)據(jù)庫是否正常接管業(yè)務(wù)若辦理業(yè)務(wù)失敗，或數(shù)據(jù)同步不正常，及時上報技術(shù)組、業(yè)務(wù)組2、檢查切換后業(yè)務(wù)是否能夠正常受理3、檢查切換后同步軟件是否反向同步回切生產(chǎn)1、 檢查是否能將數(shù)據(jù)方向切換回生產(chǎn)若通過正常手段無法回切生產(chǎn)或產(chǎn)生數(shù)據(jù)不一致，及時上報。技術(shù)組2、檢查主備數(shù)據(jù)庫數(shù)據(jù)一致性3、檢查回切后同步軟件是否正常同步4、檢查數(shù)據(jù)庫關(guān)聯(lián)的其他系統(tǒng)運行情況演練流程演練方案的制定（業(yè)務(wù)持續(xù)性計劃）演練方案的審批演練方案的實施演練后評價業(yè)務(wù)持續(xù)計劃的有效性和可用性；演練結(jié)果與演練目標(biāo)的差距；演練過程中發(fā)現(xiàn)的問題；演練工作的組織；參演人員的應(yīng)急能力；應(yīng)急資源

28、的協(xié)調(diào)、保障能力。業(yè)務(wù)持續(xù)性計劃的生效和發(fā)布業(yè)務(wù)持續(xù)性計劃的定期演練和更新維護(hù)特此匯報，謝謝1、不是井里沒有水，而是你挖的不夠深。不是成功來得慢，而是你努力的不夠多。2、孤單一人的時間使自己變得優(yōu)秀，給來的人一個驚喜，也給自己一個好的交代。3、命運給你一個比別人低的起點是想告訴你，讓你用你的一生去奮斗出一個絕地反擊的故事，所以有什么理由不努力!4、心中沒有過分的貪求，自然苦就少。口里不說多余的話，自然禍就少。腹內(nèi)的食物能減少，自然病就少。思緒中沒有過分欲，自然憂就少。大悲是無淚的，同樣大悟無言。緣來盡量要惜，緣盡就放。人生本來就空，對人家笑笑，對自己笑笑，笑著看天下，看日出日落，花謝花開，豈不自在，哪里來的塵埃!5、心情就像衣服，臟了就拿去洗洗，曬曬，陽光自然就會蔓延開來。陽光那么好，何必自尋煩惱，過好每一個當(dāng)下，一萬個美麗的未來抵不