華為業(yè)務(wù)連續(xù)性容災(zāi)解決方案兩地三中心解決方案技術(shù)白皮書

1、業(yè)務(wù)連續(xù)性容災(zāi)解決方案V100R003C00兩地三中心解決方案技術(shù)白皮書文檔版本01發(fā)布日期2015-08-15華為技術(shù)有限公司HUAWGI版權(quán)所有？華為技術(shù)有限公司2015。保留一切權(quán)利。非經(jīng)本公司書面許可，任何單位和個人不得擅自摘抄、復(fù)制本文檔內(nèi)容的部分或全部，并不得以任何形式傳播。商標聲明!和其他華為商標均為華為技術(shù)有限公司的商標。本文檔提及的其他所有商標或注冊商標，由各自的所有人擁有。注息您購買的產(chǎn)品、服務(wù)或特性等應(yīng)受華為公司商業(yè)合同和條款的約束，本文檔中描述的全部或部分產(chǎn)品、服務(wù)或特性可能不在您的購買或使用范圍之內(nèi)。除非合同另有約定，華為公司對本文檔內(nèi)容不做任何明示或默示的聲明或保證

2、。由于產(chǎn)品版本升級或其他原因，本文檔內(nèi)容會不定期進行更新。除非另有約定，本文檔僅作為使用指導(dǎo)，本文檔中的所有陳述、信息和建議不構(gòu)成任何明示或暗示的擔保。華為技術(shù)有限公司地址：深圳市龍崗區(qū)坂田華為總部辦公樓郵編：518129網(wǎng)址：1概述7.1.1 數(shù)據(jù)中心業(yè)務(wù)連續(xù)性的挑戰(zhàn)71.2 方案概述71.3 方案亮點72兩地三中心方案架構(gòu)9.1 級聯(lián)組網(wǎng)架構(gòu)91.1 同步+異步級聯(lián)方案101.1 異步+異步級聯(lián)方案101 并聯(lián)組網(wǎng)架構(gòu)101.2 同步+異步并聯(lián)方案101.2 異步+異步并聯(lián)方案111 雙活組網(wǎng)架構(gòu)111.3 VIS雙活+異步方案111.3 HyperMetro+異步級聯(lián)方案121 關(guān)鍵組件

3、技術(shù)實施要求123兩地三中心方案工作原理1.41 同步+異步級聯(lián)工作原理141.3 初始同步處理141.3 IO處理流程151.3 災(zāi)難切換處理161.3 災(zāi)難恢復(fù)處理161.3 鏈路和災(zāi)備端故障處理161 同步+異步并聯(lián)工作原理161.4 初始同步處理161.4 IO處理流程171.4 災(zāi)難切換處理171.4 災(zāi)難恢復(fù)處理181.4 鏈路和災(zāi)備端故障181 異步+異步級聯(lián)工作原理181.5 初始同步處理181.5 正常狀態(tài)處理191.5 災(zāi)難切換處理201.5 災(zāi)難恢復(fù)處理211.5 鏈路和災(zāi)備端故障211 異步+異步并聯(lián)工作原理211.6 初始同步處理211.6 正常狀態(tài)處理221.6 災(zāi)

4、難切換處理231.6 災(zāi)難恢復(fù)處理241.6 鏈路和災(zāi)備端故障241 VIS雙活+異步工作原理241.7 初始同步處理241.7 正常狀態(tài)處理251.7 災(zāi)難切換處理251.7 災(zāi)難恢復(fù)處理261.7 鏈路和災(zāi)備端故障261 HyperMetro+異步級聯(lián)工作原理261.8 初始同步處理271.8 正常狀態(tài)處理271.8 災(zāi)難切換處理281.8 災(zāi)難恢復(fù)處理281.8 鏈路和災(zāi)備端故障291 兩地三中心容災(zāi)關(guān)鍵技術(shù)原理291 容災(zāi)管理324兩地三中心容災(zāi)業(yè)務(wù)恢復(fù)流程352.3.2 容災(zāi)測試流程352.4.2 計劃性遷移流程362.5.2 故障切換流程375總結(jié)38.6縮略語.39插圖目錄圖2-

5、1級聯(lián)組網(wǎng)的兩地三中心容災(zāi)架構(gòu)9圖2-2并聯(lián)組網(wǎng)的兩地三中心容災(zāi)架構(gòu)10圖2-3并聯(lián)組網(wǎng)（同步+異步）的兩地三中心容災(zāi)架構(gòu)11圖2-4HyperMetro+異步的兩地三中心容災(zāi)架構(gòu)12圖3-1級聯(lián)組網(wǎng)（同步+異步）IO處理流程15圖3-2并聯(lián)組網(wǎng)（同步+異步）IO處理流程17圖3-3遠程復(fù)制狀態(tài)轉(zhuǎn)移圖30圖3-4Cache多時間戳復(fù)制原理31圖3-5容災(zāi)管理DashBoard32圖3-6容災(zāi)管理配置向?qū)?3圖3-7容災(zāi)管理組網(wǎng)拓撲展示34圖3-8一鍵式災(zāi)難恢復(fù)介紹34圖4-1一鍵式測試操作35圖4-2一鍵式計劃性遷移36圖4-3一鍵式故障切換37表格目錄表3-1遠程復(fù)制狀態(tài)描述291概述3.3

6、.2 數(shù)據(jù)中心業(yè)務(wù)連續(xù)性的挑戰(zhàn)隨著信息化技術(shù)的飛速發(fā)展，信息系統(tǒng)在各種行業(yè)的關(guān)鍵業(yè)務(wù)中扮演著越來越重要的角色。在通訊、金融、醫(yī)療、電子商務(wù)、物流、政府等領(lǐng)域，信息系統(tǒng)業(yè)務(wù)中斷會導(dǎo)致巨大經(jīng)濟損失、影響品牌形象并可能導(dǎo)致重要數(shù)據(jù)丟失。因此，保證業(yè)務(wù)連續(xù)性是信息系統(tǒng)建設(shè)的關(guān)鍵。近年來，大范圍自然災(zāi)害時常發(fā)生，為保障業(yè)務(wù)連續(xù)性，同城災(zāi)備中心結(jié)合異地災(zāi)備中心的“兩地三中心”容災(zāi)解決方案越來越受到業(yè)界重視和認可。3.4.2 方案概述兩地三中心容災(zāi)解決方案中的“兩地三中心”一般指的是一個生產(chǎn)中心、一個同城災(zāi)難備份中心、一個異地災(zāi)難備份中心。生產(chǎn)中心的數(shù)據(jù)同步地復(fù)制到同城災(zāi)難備份中心，同時，生產(chǎn)中心的數(shù)據(jù)異步

7、地復(fù)制到異地災(zāi)難備份中心。同城災(zāi)備中心通常具備與生產(chǎn)中心等同業(yè)務(wù)處理能力，應(yīng)用可在不丟失數(shù)據(jù)的情況下切換到同城災(zāi)備中心運行，保持業(yè)務(wù)連續(xù)運行。在出現(xiàn)小概率的大范圍的災(zāi)難時，如自然災(zāi)害地震，造成同城災(zāi)難備份中心與生產(chǎn)中心同時不可用，應(yīng)用可以切換到異地災(zāi)難備份中心。通過實施經(jīng)過日常災(zāi)難演練的步驟，應(yīng)用可在業(yè)務(wù)容許的時間內(nèi)，在異地的災(zāi)難備份中心恢復(fù)，保證業(yè)務(wù)連續(xù)運行。但異地恢復(fù)通常會丟失少量的數(shù)據(jù)。相比僅建立同城災(zāi)難備份中心或異地災(zāi)難備份中心，“兩地三中心”的方式結(jié)合兩者的優(yōu)點，能夠適應(yīng)更大范圍的災(zāi)難場景，對于小范圍的區(qū)域性災(zāi)難和較大范圍的自然災(zāi)害，都能夠通過災(zāi)難備份系統(tǒng)較快地響應(yīng)，盡可能保全業(yè)務(wù)數(shù)

8、據(jù)不丟失，實現(xiàn)更優(yōu)的RPO和RTO。所以，兩地三中心容災(zāi)解決方案得到了廣泛的應(yīng)用。3.5.2 方案亮點華為兩地三中心解決方案的亮點和優(yōu)勢如下:高中低端陣列復(fù)制技術(shù)互通華為全系列存儲產(chǎn)品都采用統(tǒng)一的存儲操作系統(tǒng)平臺，高、中、低端陣列之間都可建立遠程復(fù)制關(guān)系?？蛻粼诋a(chǎn)品選型時，可以根據(jù)業(yè)務(wù)需要選擇匹配的異地災(zāi)備中心磁盤陣列，顯著提升容災(zāi)建設(shè)投入產(chǎn)出比。秒級異步復(fù)制RPO,分鐘級RTO基于Cache多時間戳的異步遠程復(fù)制，最小支持3s的復(fù)制周期。華為容災(zāi)管理軟件OceanStorReplicationDirector提供的一鍵式容災(zāi)測試和容災(zāi)切換功能大大簡化災(zāi)備恢復(fù)操作，使災(zāi)備端數(shù)據(jù)庫的恢復(fù)時間達到

9、分鐘級，縮短恢復(fù)時間。容災(zāi)業(yè)務(wù)和拓撲可視化管理華為容災(zāi)管理軟件OceanStorReplicationDirector支持可視化展示兩地三中心的物理拓撲和業(yè)務(wù)邏輯拓撲。并且支持一鍵式容災(zāi)測試和切換，支持客戶定制腳本一鍵恢復(fù)備用業(yè)務(wù)系統(tǒng)，簡化災(zāi)備系統(tǒng)的管理和維護。HUAMf£l2兩地三中心方案架構(gòu)兩地三中心的容災(zāi)方式是當前容災(zāi)建設(shè)的一個重要趨勢，在電信、金融、制造等領(lǐng)域得到廣泛的使用。通過建設(shè)近距離的數(shù)據(jù)中心（同城數(shù)據(jù)中心）獲得接近于零數(shù)據(jù)丟失的數(shù)據(jù)保護，通過建設(shè)較遠距離的數(shù)據(jù)中心（異地數(shù)據(jù)中心）獲得遠距離的數(shù)據(jù)保護，避免區(qū)域性的災(zāi)難導(dǎo)致業(yè)務(wù)無法恢復(fù)。華為兩地三中心解決方案支持級聯(lián)組網(wǎng)

10、（同步+異步，異步+異步）方案（即“A->B,B->C”組網(wǎng)）、并聯(lián)組網(wǎng)（同步+異步，異步+異步）方案（即“A->B,A->C”組網(wǎng)）和雙活組網(wǎng)（雙活+異步）方案（即"A<->B,B->C”組網(wǎng)）。4.3.2 級聯(lián)組網(wǎng)架構(gòu)圖2-1級聯(lián)組網(wǎng)的兩地三中心容災(zāi)架構(gòu)牛產(chǎn)中心A計L遼制華為存恂licrinlSinr4 同步+異步級聯(lián)方案如圖2-1所示，在生產(chǎn)中心部署磁盤陣列A;在同城災(zāi)備中心部署磁盤陣列B,兩個數(shù)據(jù)中心之間通過FC鏈路實現(xiàn)互聯(lián)，生產(chǎn)中心的磁盤陣列A與同城災(zāi)備中心磁盤陣列B建立同步遠程復(fù)制，將磁盤陣列A的數(shù)據(jù)實時同步到磁盤陣列B;在異地災(zāi)

11、備中心,部署磁盤陣列C,與同城災(zāi)備中心的磁盤陣列B建立異步遠程復(fù)制，將磁盤陣列B的數(shù)據(jù)定時地同步到陣列Co在同城災(zāi)備中心和異地災(zāi)備中心部署容災(zāi)管理軟件，實現(xiàn)對3個數(shù)據(jù)中心的統(tǒng)一容災(zāi)管理。容災(zāi)管理軟件可以展示兩地三中心容災(zāi)方案物理拓撲和業(yè)務(wù)邏輯拓撲，并且支持在同城災(zāi)備中心以及異地災(zāi)備中心一鍵式容災(zāi)測試以及一鍵式容災(zāi)恢復(fù)。4 異步+異步級聯(lián)方案如圖2-1所示，在生產(chǎn)中心部署磁盤陣列A;在同城災(zāi)備中心部署磁盤陣列B,兩個數(shù)據(jù)中心之間根據(jù)數(shù)據(jù)變化量對帶寬的需求，可以通過FC鏈路或者IP鏈路實現(xiàn)互聯(lián)，生產(chǎn)中心的磁盤陣列A與同城災(zāi)備中心磁盤陣列B建立異步遠程復(fù)制，將磁盤陣列A的數(shù)據(jù)定時同步到磁盤陣列B;在

12、異地災(zāi)備中心，部署磁盤陣列C,與同城災(zāi)備中心的磁盤陣列B建立異步遠程復(fù)制，將陣列B的數(shù)據(jù)定時的地同步到陣列Co在同城災(zāi)備中心和異地災(zāi)備中心部署容災(zāi)管理軟件，實現(xiàn)對3個數(shù)據(jù)中心的統(tǒng)一容災(zāi)管理。容災(zāi)管理軟件可以展示兩地三中心容災(zāi)方案物理拓撲和業(yè)務(wù)邏輯拓撲，并且支持在同城災(zāi)備中心以及異地災(zāi)備中心一鍵式容災(zāi)測試以及一鍵式容災(zāi)恢復(fù)。4.4.2 并聯(lián)組網(wǎng)架構(gòu)我福管坤M修Lki?:in5iii_hr聿內(nèi)并1krkmSi|i«ir-；-02甫.凝皿1圖2-2并聯(lián)組網(wǎng)的兩地三中心容災(zāi)架構(gòu)4 同步+異步并聯(lián)方案如圖2-2,在生產(chǎn)中心部署磁盤陣列A;在同城災(zāi)備中心部署磁盤陣列B,兩個數(shù)據(jù)中心之間通過FC鏈

13、路實現(xiàn)互聯(lián)，生產(chǎn)中心的磁盤陣列A與同城災(zāi)備中心磁盤陣列B建立同步遠程復(fù)制，將陣列A的數(shù)據(jù)實時同步到陣列B;在異地災(zāi)備中心，部署磁盤陣列C,通過生產(chǎn)中心與異地災(zāi)備中心的IP鏈路，實現(xiàn)生產(chǎn)中心的磁盤陣列A與異地災(zāi)備中心磁盤陣列C建立異步遠程復(fù)制，異步地將數(shù)據(jù)同步到磁盤陣列Co在同城災(zāi)備中心和異地災(zāi)備中心部署容災(zāi)管理軟件，實現(xiàn)對3個數(shù)據(jù)中心的統(tǒng)一容災(zāi)管理。容災(zāi)管理軟件可以展示兩地三中心容災(zāi)方案物理拓撲和業(yè)務(wù)邏輯拓撲，并且支持在同城災(zāi)備中心以及異地災(zāi)備中心一鍵式容災(zāi)測試以及一鍵式容災(zāi)恢復(fù)。4 異步+異步并聯(lián)方案如圖2-2,在生產(chǎn)中心部署磁盤陣列A;在同城災(zāi)備中心部署磁盤陣列B,兩個數(shù)據(jù)中心之間根據(jù)數(shù)據(jù)

14、變化量對帶寬的需求，可以通過FC鏈路或者IP鏈路實現(xiàn)互聯(lián)，生產(chǎn)中心的磁盤陣列A與同城災(zāi)備中心建立異步遠程復(fù)制，將磁盤陣列A的數(shù)據(jù)定時同步到磁盤陣列B;在異地災(zāi)備中心部署磁盤陣列C,與生產(chǎn)中心的磁盤陣列建立異步遠程復(fù)制，將磁盤陣列A的數(shù)據(jù)定時地同步到陣列Co在同城災(zāi)備中心和異地災(zāi)備中心部署容災(zāi)管理軟件，實現(xiàn)對3個數(shù)據(jù)中心的統(tǒng)一容災(zāi)管理。容災(zāi)管理軟件可以可視化的展示兩地三中心容災(zāi)方案物理拓撲和業(yè)務(wù)邏輯拓撲，并且支持在同城災(zāi)備中心以及異地災(zāi)備中心一鍵式容災(zāi)測試以及一鍵式容災(zāi)恢復(fù)。4.5.2 雙活組網(wǎng)架構(gòu)4 VIS雙活+異步方案圖2-3并聯(lián)組網(wǎng)（同步+異步）的兩地三中心容災(zāi)架構(gòu)位暮普if陷元it.燈&

15、#187;"fxlI附用*-FTM部.嗜一我翻i通向如2-3,在生產(chǎn)中心A和生產(chǎn)中心B分別部署磁盤陣列和VIS6600T存儲虛擬化網(wǎng)關(guān)，數(shù)據(jù)中心間通過裸光纖或者波分設(shè)備實現(xiàn)FC網(wǎng)絡(luò)互聯(lián)。通過VIS的虛擬化鏡像技術(shù)實現(xiàn)數(shù)據(jù)雙活鏡像；上層業(yè)務(wù)訪問時，數(shù)據(jù)被實時寫入生產(chǎn)中心A和生產(chǎn)中心B的磁盤陣列中。在異地災(zāi)備中心，部署磁盤陣列C,與生產(chǎn)中心A或B任一磁盤陣列建立異步遠程復(fù)制，將雙活鏡像的磁盤陣列數(shù)據(jù)定時地同步到磁盤陣列C。在異地災(zāi)備中心部署容災(zāi)管理軟件，實現(xiàn)對雙活+異步復(fù)制統(tǒng)一容災(zāi)管理。容災(zāi)管理軟件可以展示兩地三中心容災(zāi)方案物理拓撲和業(yè)務(wù)邏輯拓撲，并且支持在異地災(zāi)備中心一鍵式容災(zāi)測試以及

16、一鍵式容災(zāi)恢復(fù)。4 HyperMetro+異步級聯(lián)方案圖2-4HyperMetro+異步的兩地三中心容災(zāi)架構(gòu)如2-4,在生產(chǎn)中心A和生產(chǎn)中心B位于同城，可通過裸光纖或波分設(shè)備實現(xiàn)FC網(wǎng)絡(luò)互聯(lián)，也支持通過10GE網(wǎng)絡(luò)互聯(lián)。生產(chǎn)中心A和生產(chǎn)中心B同時對外提供業(yè)務(wù)，HyperMetro不僅實現(xiàn)數(shù)據(jù)實時雙向鏡像，而且保證任何數(shù)據(jù)中心陣列故障，對上層業(yè)務(wù)透明切換，業(yè)務(wù)不中斷。在異地災(zāi)備中心，部署磁盤陣列C,與生產(chǎn)中心A或B任意磁盤陣列建立異步遠程復(fù)制，將雙活鏡像的磁盤陣列數(shù)據(jù)周期性的同步到磁盤陣列Co在生產(chǎn)中心B和異地災(zāi)備中心部署容災(zāi)管理軟件，實現(xiàn)對雙活+異步復(fù)制統(tǒng)一容災(zāi)管理。容災(zāi)管理軟件可以展示兩地三

17、中心容災(zāi)方案物理拓撲和業(yè)務(wù)邏輯拓撲，并且支持在異地災(zāi)備中心一鍵式容災(zāi)測試以及一鍵式容災(zāi)恢復(fù)。4.6.2 關(guān)鍵組件技術(shù)實施要求城域網(wǎng)要求：（同步遠程復(fù)制，雙活）容災(zāi)網(wǎng)絡(luò)距離：100km,雙活建議100km,裸光纖連接。傳輸延遲：1ms（單向）。網(wǎng)絡(luò)真實帶寬：業(yè)務(wù)的峰值寫IO帶寬。廣域網(wǎng)要求：（異步遠程復(fù)制）容災(zāi)網(wǎng)絡(luò)距離：無限制。傳輸延遲：50ms（單向）。網(wǎng)絡(luò)真實帶寬：業(yè)務(wù)的平均寫IO帶寬。管理工作站:管理工作站需要三中心間通信。網(wǎng)絡(luò)距離要求：無限制。通信網(wǎng)絡(luò)帶寬要求：10Mb/s。3兩地三中心方案工作原理3 同步+異步級聯(lián)工作原理3.3 初始同步處理同步遠程復(fù)制關(guān)系建立時，系統(tǒng)自動啟動初始同步

18、，將主LUN的數(shù)據(jù)全部復(fù)制到從LUN,復(fù)制期間，主LUN如果接收到生產(chǎn)主機新寫入的數(shù)據(jù)，也會將其復(fù)制到從LUN。初始同步完成后，主LUN與從LUN的數(shù)據(jù)完全一致，同步遠程復(fù)制進入正常狀態(tài)。遠程復(fù)制關(guān)系建立時，系統(tǒng)自動啟動初始同步，將主LUN的數(shù)據(jù)全部復(fù)制到從LUN。初始同步完成后，異步遠程復(fù)制進入正常狀態(tài)。3.3 IO處理流程圖3-1級聯(lián)組網(wǎng)（同步+異步）IO處理流程A站點-一數(shù)據(jù)雙LUN2通時間息數(shù)據(jù)存偌系統(tǒng)CC站點存書系統(tǒng)B未索載數(shù)知的網(wǎng)線級聯(lián)組網(wǎng)（同步+異步）方案IO處理流程如上圖所示：3 .主機下發(fā)IO到磁盤陣列A的LUN1。4 .IO寫入A站點的LUN1,并通過同步復(fù)制同時寫入B站點

19、的LUN12（LUN12既是同步遠程復(fù)制的從LUN,又是異步遠程復(fù)制的主LUN）。5 .當異步遠程復(fù)制同步周期到來，磁盤陣列B生成LUN12在此時間點的數(shù)據(jù)（如t1時間點數(shù)據(jù)）。6 .磁盤B列C生成同步開始前LUN2的該時間點數(shù)據(jù)（如t2時間點數(shù)據(jù)）。如果異步遠程復(fù)制同步失敗，當需要使用LUN2運行業(yè)務(wù)時，系統(tǒng)自動回滾到該時間點數(shù)據(jù)，以保證磁盤陣列C中數(shù)據(jù)的可用性。7 .后臺啟動由LUN12在t1時間點的數(shù)據(jù)到LUN2的周期性同步。如果在異步遠程復(fù)制啟動同步時，同步遠程復(fù)制的從LUN（LUN12）狀態(tài)不允許啟動同步，則周期性同步不會被啟動，直到從LUN狀態(tài)允許啟動同步時才生成多時間點數(shù)據(jù)，并啟

20、動同步。7 災(zāi)難切換處理1）生產(chǎn)中心故障當生產(chǎn)中心發(fā)生災(zāi)難后，不能再提供業(yè)務(wù)。同城災(zāi)備中心的從LUN保存著與主LUN完全同步的數(shù)據(jù)，保障數(shù)據(jù)不丟失。如果同城災(zāi)備中心部署有備用主機，則備用主機可以訪問從LUN,接管業(yè)務(wù)。從LUN開始被主機訪問后，每次收到新寫入的數(shù)據(jù)，遠程復(fù)制會自動記錄其地址，以便用于后續(xù)增量恢復(fù)，縮短業(yè)務(wù)回切的時間。2）生產(chǎn)中心和同城災(zāi)備中心同時故障當生產(chǎn)中心和同城災(zāi)備中心在重大災(zāi)難導(dǎo)致數(shù)據(jù)都不可用時，異地備中心的從LUN保存著與主LUN相隔一定時間周期（1-2個復(fù)制周期）之前的數(shù)據(jù)，保障數(shù)據(jù)絕大部分不丟失。如果異地同城災(zāi)備中心部署有備用主機，則備用主機可以訪問從LUN,接管業(yè)

21、務(wù)。異地災(zāi)備中心從LUN開始被主機訪問后，每次收到新寫入的數(shù)據(jù)，遠程復(fù)制會自動記錄其地址，以便用于后續(xù)增量恢復(fù)，縮短業(yè)務(wù)回切的時間。7 災(zāi)難恢復(fù)處理1）數(shù)據(jù)未被破壞時當生產(chǎn)中心災(zāi)難恢復(fù)后，如果磁盤陣列A和B沒有受到破壞，主LUN能夠恢復(fù)其原有數(shù)據(jù)，則遠程復(fù)制可以將主LUN故障期間，從LUN12或者LUN2新寫入的數(shù)據(jù)增量復(fù)制到主LUN。復(fù)制完成后，主、從LUN保持復(fù)制關(guān)系。此時，可以將業(yè)務(wù)切換回生產(chǎn)中心，重新由生產(chǎn)主機訪問磁盤陣列A的主LUN,遠程復(fù)制重新保持由主LUN向從LUN實時同步數(shù)據(jù)。2）數(shù)據(jù)完全被破壞時當磁盤陣列A或B被破壞，數(shù)據(jù)不可修復(fù)時，需要重建磁盤陣列A或者磁盤陣列B,將從端數(shù)

22、據(jù)反向復(fù)制到主端B和主端A上，調(diào)整主從關(guān)系，在生產(chǎn)中心恢復(fù)業(yè)務(wù)。7 鏈路和災(zāi)備端故障處理當生產(chǎn)中心與同城災(zāi)備中心的復(fù)制鏈路故障或者任意災(zāi)備中心設(shè)備故障，則遠程復(fù)制自動斷開復(fù)制，不影響生產(chǎn)系統(tǒng)的正常運行。生產(chǎn)中心主LUN將記錄故障期間的數(shù)據(jù)差異變化，待故障恢復(fù)后，自動將增量數(shù)據(jù)同步到從LUN。3.2同步+異步并聯(lián)工作原理ZeroZeroZeroZeroZeroZeroZeroZeroZeroZeroZeroZero 初始同步處理同步遠程復(fù)制關(guān)系建立時，系統(tǒng)自動啟動初始同步，將主LUN的數(shù)據(jù)全部復(fù)制到從LUN,復(fù)制期間，主LUN如果接收到新的生產(chǎn)主機的寫入的數(shù)據(jù)，也會將其復(fù)制到從LUN。初始同步完

23、成后，主LUN與從LUN的數(shù)據(jù)完全一致，同步遠程復(fù)制進入正常狀態(tài)。異步遠程復(fù)制關(guān)系建立時，系統(tǒng)自動啟動初始同步，將主LUN的數(shù)據(jù)全部復(fù)制到從LUN。初始同步完成后，異步遠程復(fù)制進入正常狀態(tài)。HUAMf£lZeroZeroZeroZeroZeroZeroZeroZeroZeroZeroZeroZero IO處理流程圖3-2并聯(lián)組網(wǎng)（同步+異步）IO處理流程生產(chǎn)主機>"f陪系統(tǒng)A同力遠程芟多-t2lH間點數(shù)招一-一數(shù)據(jù)雙號一:-人LUN2'LUN12存儲事或C光纖線網(wǎng)我未承我數(shù)據(jù)的網(wǎng)線具體的處理流程如下：.主機下發(fā)IO到磁盤陣列A的LUN1。.A站點主機寫IO雙寫

24、到LUN1和B站點LUN12（LUN1既是同步遠程復(fù)制的主LUN,又是異步遠程復(fù)制的主LUN）。.當異步遠程復(fù)制同步周期到來，磁盤陣列A生成LUN1在此時間點的數(shù)據(jù)（如t1時間點數(shù)據(jù)）。.磁盤B列C生成LUN2的該時間點數(shù)據(jù)（如t2時間點數(shù)據(jù)）。如果異步遠程復(fù)制同步失敗，當需要使用LUN2運行業(yè)務(wù)時，系統(tǒng)自動回滾到該時間點數(shù)據(jù)，以保證磁盤陣列C中數(shù)據(jù)的可用性。.后臺啟動由LUN1在t1時間點的數(shù)據(jù)到LUN2的周期性同步。災(zāi)難切換處理1）生產(chǎn)中心故障當生產(chǎn)中心發(fā)生災(zāi)難后，不能再提供業(yè)務(wù)。同城災(zāi)備中心的從LUN保存著與主LUN完全同步的數(shù)據(jù)，保障數(shù)據(jù)不丟失。如果同城災(zāi)備中心部署有備用主機，則備用主

25、機可以訪問從LUN,接管業(yè)務(wù)。從LUN開始被主機訪問后，每次收到新寫入的數(shù)據(jù)，遠程復(fù)制會自動記錄其地址，以便用于后續(xù)增量恢復(fù)，縮短業(yè)務(wù)回切的時間。2）生產(chǎn)中心和同城災(zāi)備中心同時故障當生產(chǎn)中心和同城災(zāi)備中心在遭遇重大災(zāi)難導(dǎo)致數(shù)據(jù)均不可用時，異地災(zāi)備中心的從LUN保存著與主LUN間隔一定時間周期（復(fù)制周期）之前的數(shù)據(jù)，保障數(shù)據(jù)絕大部分不丟失。如果異地同城災(zāi)備中心部署有備用主機，則備用主機可以訪問從LUN,接管業(yè)務(wù)。異地災(zāi)備中心從LUN開始被主機訪問后，每次收到新寫入的數(shù)據(jù)，遠程復(fù)制會自動記錄其地址，以便用于后續(xù)增量恢復(fù)，縮短業(yè)務(wù)回切的時間。災(zāi)難恢復(fù)處理1）數(shù)據(jù)未被破壞時當生產(chǎn)中心災(zāi)難恢復(fù)后，如果磁

26、盤陣列A和B沒有受到破壞，主LUN能夠恢復(fù)其原有數(shù)據(jù)，則遠程復(fù)制可以將主LUN故障期間，從LUN1'新寫入的數(shù)據(jù)增量復(fù)制到主LUN。復(fù)制完成后，主、從LUN保持復(fù)制關(guān)系。此時，可以將業(yè)務(wù)切換回生產(chǎn)中心，重新由生產(chǎn)主機訪問磁盤陣列A的主LUN,遠程復(fù)制重新保持由主LUN向從LUN實時同步數(shù)據(jù)。2）數(shù)據(jù)完全被破壞時當磁盤陣列A或B被破壞，數(shù)據(jù)不可修復(fù)時，需要重建磁盤陣列A或者磁盤陣列B,將從端數(shù)據(jù)反向復(fù)制到主端磁盤陣列A和磁盤陣列B上，調(diào)整主從關(guān)系，在生產(chǎn)中心恢復(fù)業(yè)務(wù)。鏈路和災(zāi)備端故障當生產(chǎn)中心與災(zāi)備中心的復(fù)制鏈路故障或者災(zāi)備中心存儲設(shè)備故障，則遠程復(fù)制自動斷開復(fù)制，不影響生產(chǎn)系統(tǒng)的正常運

27、行。生產(chǎn)中心主LUN將記錄故障期間的數(shù)據(jù)差異變化，待故障恢復(fù)后，自動將增量數(shù)據(jù)同步到從LUN。3.3異步+異步級聯(lián)工作原理初始同步處理生產(chǎn)中心與同城災(zāi)備中心異步復(fù)制主從LUN之間和同城災(zāi)備中心與異地災(zāi)備中心異步復(fù)制主從LUN之間都需要進行初始同步，初始同步可以在線進行。復(fù)制帶寬足夠的情況下可以配置完就啟動初始同步，帶寬不足情況下，可以有幾種初始同步方式：.臨時增加復(fù)制帶寬完成初始同步。.將設(shè)備搬遷到一起來完成初始同步。.通過移動介質(zhì)存儲中轉(zhuǎn)進行初始同步。HUAMf£l異步復(fù)制初始同步系統(tǒng)自動創(chuàng)建快照，將主新增數(shù)據(jù)不會復(fù)制到從LUN中。LUN數(shù)據(jù)全部復(fù)制到從LUN,復(fù)制期間3.3.2正

28、常狀態(tài)處理IIIIafiI1生產(chǎn)中心口存儲系統(tǒng)B備用主機具體處理流程如下:.主機下發(fā)IO到存儲系統(tǒng)A的LUN1。LUN2和LUN3分別是LUN1不同時間點的副本，LUN3的數(shù)據(jù)副本比LUN2的數(shù)據(jù)副本時間要早。LUN2既是存儲系統(tǒng)A與存儲系統(tǒng)B異步遠程復(fù)制的從LUN,又是存儲系統(tǒng)B與存儲系統(tǒng)C異步遠程復(fù)制的主LUN）,B站點、C站點LUN對于主機默認均為只讀。.當A-B異步遠程復(fù)制同步周期到來，存儲系統(tǒng)A生成LUN1在此時間點的數(shù)據(jù)（如t1時間點數(shù)據(jù)）。.存儲系統(tǒng)B生成同步開始前LUN2的多時間點數(shù)據(jù)（如t2時間點數(shù)據(jù)）。如果異步遠程復(fù)制同步失敗，當需要使用LUN2運行業(yè)務(wù)時，系統(tǒng)自動回滾多時

29、間點數(shù)據(jù)，以保證存儲系統(tǒng)B中數(shù)據(jù)的可用性。當B-C異步遠程復(fù)制同步周期到老，存儲系統(tǒng)B生成LUN2在此時間點的數(shù)據(jù)（如t2時間點數(shù)據(jù)）.后臺啟動由LUN1在t1時間點的數(shù)據(jù)到LUN2的周期性同步。.存儲系統(tǒng)C生成同步開始前LUN3的多時間點數(shù)據(jù)（如臺t3時間點數(shù)據(jù)）。如果異步復(fù)制失敗，當需要使用LUN3運行業(yè)務(wù)時，系統(tǒng)自動回滾多時間點數(shù)據(jù)。.后臺啟動由LUN2在t2時間點的數(shù)據(jù)到LUN3的周期性同步。異步復(fù)制處理過程如下:1.主LUN1的寫IO處理2.在周期N,將新寫入主LUN的數(shù)據(jù)寫入Cache中。.在下一個周期N+1,將周期N緩存的數(shù)據(jù)復(fù)制到從LUN2,同時將周期N+1新收到的寫數(shù)據(jù)繼續(xù)寫

30、入Cache中。數(shù)據(jù)復(fù)制完成后，進入下一周期。.按照步驟2）重復(fù)進行。.從LUN2的寫IO處理.周期N開始時，對從LUN進行快照activating,即對周期N-1的數(shù)據(jù)在Cache和存儲介質(zhì)中進行快照activating。.在周期N中，接收由主LUN同步而來的數(shù)據(jù)，寫入從LUN的Cache。.該周期復(fù)制完成后，disable從LUN的快照。.從LUN3的寫IO處理.周期N-1開始時，對從LUN進彳tactivating,即對周期N-2的數(shù)據(jù)在Cache和存儲介質(zhì)中進行快照activating.在周期N-1中，接收由主LUN同步而來的數(shù)據(jù)，寫入從LUN的Cache。.該周期復(fù)制完成后，Disa

31、ble從LUN的快照。如果主LUN的寫IO帶寬臨時性增大，或者陣列間鏈路帶寬臨時減小使得復(fù)制周期變長，導(dǎo)致周期內(nèi)寫入數(shù)據(jù)過多，超過了Cache所能緩存的寫數(shù)據(jù)量，則遠程復(fù)制會采用日志對超出部分進行記錄，不會中斷周期性同步。遠程復(fù)制會嚴格保證從LUN的數(shù)據(jù)一致性，即寫IO的依賴關(guān)系。在主LUN的IO處理中，在每次周期間切換時，遠程復(fù)制會保證將有依賴關(guān)系的兩個寫IO納入同一個周期，或者按照其順序分別納入先、后周期，不會出現(xiàn)先寫入的IO納入后一周期，而后寫入的IO納入前一周期的情況。在從LUN的IO處理中，當主LUN故障后需要訪問從LUN時，遠程復(fù)制會檢查從LUN是否完成當前周期的復(fù)制，如果沒有完成

32、，則使用快照對從LUN進行回滾，使其數(shù)據(jù)保證為周期切換點時的狀態(tài)，保證其數(shù)據(jù)一致性。通過Cache中的異步復(fù)制，最高可以實現(xiàn)16s的秒級RPO的數(shù)據(jù)災(zāi)備要求。災(zāi)難切換處理1）生產(chǎn)中心故障當生產(chǎn)中心發(fā)生災(zāi)難后，不能再提供業(yè)務(wù)。同城災(zāi)備中心的從LUN保存著與主LUN較近時間點的數(shù)據(jù)，保障盡量少的數(shù)據(jù)丟失。如果同城災(zāi)備中心部署有備用主機，則備用主機可以訪問從LUN,接管業(yè)務(wù)，實現(xiàn)最短的業(yè)務(wù)恢復(fù)。從LUN開始被主機訪問后，每次收到新寫入的數(shù)據(jù)，遠程復(fù)制會自動記錄其地址，以便用于后續(xù)增量恢復(fù)，縮短業(yè)務(wù)回切的時間。2）生產(chǎn)中心和同城災(zāi)備中心都故障當生產(chǎn)中心和同城中心在重大災(zāi)難或者都故障后，異地備中心的從L

33、UN保存著與主LUN間隔一定時間周期（復(fù)制周期）之前的數(shù)據(jù)，保障數(shù)據(jù)絕大部分不丟失。如果異地同城災(zāi)備中心部署有備用主機，則備用主機可以訪問從LUN,接管業(yè)務(wù)。異地災(zāi)備中心從LUN開始被主機訪問后，每次收到新寫入的數(shù)據(jù)，遠程復(fù)制會自動記錄其地址，以便用于后續(xù)增量恢復(fù)，縮短業(yè)務(wù)回切的時間。災(zāi)難恢復(fù)處理數(shù)據(jù)未被破壞時當生產(chǎn)中心災(zāi)難恢復(fù)后，如果存儲系統(tǒng)A和B沒有受到破壞，主LUN能夠恢復(fù)其原有數(shù)據(jù)，則遠程復(fù)制可以將主LUN故障期間，從LUN1'新寫入的數(shù)據(jù)增量復(fù)制到主LUN。復(fù)制完成后，主、從LUN保持復(fù)制關(guān)系。此時，可以將業(yè)務(wù)切換回生產(chǎn)中心，重新由生產(chǎn)主機訪問存儲陣列A的主LUN,遠程復(fù)制重

34、新保持由主LUN向從LUN實時同步數(shù)據(jù)。數(shù)據(jù)完全被破壞時當存儲系統(tǒng)A或B被破壞，數(shù)據(jù)不可修復(fù)時，需要重建存儲系統(tǒng)A或者存儲系統(tǒng)B,將從端數(shù)據(jù)反向復(fù)制到主端存儲系統(tǒng)A和存儲系統(tǒng)B上，調(diào)整主從關(guān)系，在生產(chǎn)中心恢復(fù)業(yè)務(wù)。鏈路和災(zāi)備端故障當生產(chǎn)中心與災(zāi)備中心的復(fù)制鏈路故障或者災(zāi)備中心設(shè)備故障，則遠程復(fù)制自動斷開復(fù)制，不影響生產(chǎn)系統(tǒng)的正常運行。生產(chǎn)中心主LUN將記錄故障期間的數(shù)據(jù)差異變化，待故障恢復(fù)后，自動將增量數(shù)據(jù)同步到從LUNo3.4異步+異步并聯(lián)工作原理初始同步處理生產(chǎn)中心與同城災(zāi)備中心異步復(fù)制主從LUN之間和同城災(zāi)備中心與異地災(zāi)備中心異步復(fù)制主從LUN之間都需要進行初始同步，初始同步可以在線進行

35、。復(fù)制帶寬足夠的情況下可以配置完就啟動初始同步，帶寬不足情況下，可以有幾種初始同步方式：.臨時增加復(fù)制帶寬完成初始同步。.將設(shè)備搬遷到一起來完成初始同步。.通過移動介質(zhì)存儲中轉(zhuǎn)進行初始同步。異步復(fù)制初始同步系統(tǒng)自動創(chuàng)建快照，將主新增數(shù)據(jù)不會復(fù)制到從LUN中。LUN數(shù)據(jù)全部復(fù)制到從LUN,復(fù)制期間3.4.2正常狀態(tài)處理生產(chǎn)巾心AILUN1生產(chǎn)主機LUN3存儕系統(tǒng)息11IIfCZZZ11時總UaiL：導(dǎo)地災(zāi)備中心C備用主機LUN2管用主機同城;災(zāi)醬中心B存儲系統(tǒng)C存儲系統(tǒng)8具體處理流程如下:.主機下發(fā)IO到存儲系統(tǒng)A的LUN1。LUN2和LUN3分別是LUN1不同時間點的副本，LUN3的數(shù)據(jù)副本一

36、般比LUN2的數(shù)據(jù)副本時間要早（如果LUN2是10點的，LUN3可能是9點的數(shù)據(jù)）。LUN1既是存儲系統(tǒng)A與存儲系統(tǒng)B異步遠程復(fù)制的主LUN,又是存儲系統(tǒng)A與存儲系統(tǒng)C異步遠程復(fù)制的主LUN）,B站點、C站點LUN對于主機默認均為只讀。.當A-B異步遠程復(fù)制同步周期到來，存儲系統(tǒng)A生成LUN1在此時間點的數(shù)據(jù)（如t1時間點數(shù)據(jù)）。.存儲系統(tǒng)B生成同步開始前LUN2的多時間點數(shù)據(jù)（如t2時間點數(shù)據(jù)）。如果異步遠程復(fù)制同步失敗，當需要使用LUN2運行業(yè)務(wù)時，系統(tǒng)自動回滾多時間點數(shù)據(jù)，以保證存儲系統(tǒng)B中數(shù)據(jù)的可用性。當B-C異步遠程復(fù)制同步周期到老，存儲系統(tǒng)B生成LUN2在此時間點的數(shù)據(jù)（如t2時間

37、點數(shù)據(jù)）.后臺啟動由LUN1在t1時間點的數(shù)據(jù)到LUN2的周期性同步。.當A-C異步遠程復(fù)制同步周期到來，存儲系統(tǒng)A生成LUN1在此時間點的數(shù)據(jù)（如t3時間點數(shù)據(jù)）.存儲系統(tǒng)C生成同步開始前LUN3的多時間點數(shù)據(jù)（如臺t4時間點數(shù)據(jù)）。如果異步復(fù)制失敗，當需要使用LUN3運行業(yè)務(wù)時，系統(tǒng)自動回滾多時間點數(shù)據(jù)。.后臺啟動由LUN1在t3時間點的數(shù)據(jù)到LUN3的周期性同步。異步復(fù)制處理過程如下:存磕字由，.主LUN1的寫IO處理.在周期N,將新寫入主LUN的數(shù)據(jù)寫入Cache中。.在下一個周期N+1,將周期N緩存的數(shù)據(jù)復(fù)制到從LUN12,同時將周期N+1新收到的寫數(shù)據(jù)繼續(xù)寫入Cache中。數(shù)據(jù)復(fù)制

38、完成后，進入下一周期。.按照步驟2）重復(fù)進行。.從LUN1'的寫IO處理.周期N開始時，對從LUN進行快照activating,即對周期N-1的數(shù)據(jù)在Cache和存儲介質(zhì)中進行快照activating。.在周期N中，接收由主LUN同步而來的數(shù)據(jù)，寫入從LUN的Cache。.該周期復(fù)制完成后，disable從LUN的快照。.從LUN2的寫IO處理.周期N-1開始時，對從LUN進彳tactivating,即對周期N-2的數(shù)據(jù)在Cache和存儲介質(zhì)中進行快照activating.在周期N-1中，接收由主LUN同步而來的數(shù)據(jù)，寫入從LUN的Cache。.該周期復(fù)制完成后，Disable從LUN

39、的快照。如果主LUN的寫IO帶寬臨時性增大，或者陣列間鏈路帶寬臨時減小使得復(fù)制周期變長，導(dǎo)致周期內(nèi)寫入數(shù)據(jù)過多，超過了Cache所能緩存的寫數(shù)據(jù)量，則遠程復(fù)制會采用日志對超出部分進行記錄，不會中斷周期性同步。遠程復(fù)制會嚴格保證從LUN的數(shù)據(jù)一致性，即寫IO的依賴關(guān)系。在主LUN的IO處理中，在每次周期間切換時，遠程復(fù)制會保證將有依賴關(guān)系的兩個寫IO納入同一個周期，或者按照其順序分別納入先、后周期，不會出現(xiàn)先寫入的IO納入后一周期，而后寫入的IO納入前一周期的情況。在從LUN的IO處理中，當主LUN故障后需要訪問從LUN時，遠程復(fù)制會檢查從LUN是否完成當前周期的復(fù)制，如果沒有完成，則使用快照對

40、從LUN進行回滾，使其數(shù)據(jù)保證為周期切換點時的狀態(tài)，保證其數(shù)據(jù)一致性。通過Cache中的異步復(fù)制，最高可以實現(xiàn)16s的秒級RPO的數(shù)據(jù)災(zāi)備要求。災(zāi)難切換處理1）生產(chǎn)中心故障當生產(chǎn)中心發(fā)生災(zāi)難后，不能再提供業(yè)務(wù)。同城災(zāi)備中心的從LUN保存著與主LUN較短時間間隔的數(shù)據(jù)，保障盡量少的數(shù)據(jù)丟失，RPO可達06s,如果同城災(zāi)備中心部署有備用主機，則備用主機可以訪問從LUN,接管業(yè)務(wù)，保證最短時間的業(yè)務(wù)接管。從LUN開始被主機訪問后，每次收到新寫入的數(shù)據(jù)，遠程復(fù)制會自動記錄其地址，以便用于后續(xù)增量恢復(fù)，縮短業(yè)務(wù)回切的時間。2）生產(chǎn)中心和同城災(zāi)備中心都故障當生產(chǎn)中心和同城中心在重大災(zāi)難或者都故障后，異地備

41、中心的從LUN保存著與主LUN間隔一定時間周期（復(fù)制周期）之前的數(shù)據(jù)，保障數(shù)據(jù)絕大部分不丟失。如果異地同城災(zāi)備中心部署有備用主機，則備用主機可以訪問從LUN,接管業(yè)務(wù)。異地災(zāi)備中心從LUN開始被主機訪問后，每次收到新寫入的數(shù)據(jù)，遠程復(fù)制會自動記錄其地址，以便用于后續(xù)增量恢復(fù)，縮短業(yè)務(wù)回切的時間。災(zāi)難恢復(fù)處理數(shù)據(jù)未被破壞時當生產(chǎn)中心災(zāi)難恢復(fù)后，如果存儲系統(tǒng)A和B沒有受到破壞，主LUN能夠恢復(fù)其原有數(shù)據(jù)，則遠程復(fù)制可以將主LUN故障期間，從LUN1'新寫入的數(shù)據(jù)增量復(fù)制到主LUN。復(fù)制完成后，主、從LUN保持復(fù)制關(guān)系。此時，可以將業(yè)務(wù)切換回生產(chǎn)中心，重新由生產(chǎn)主機訪問存儲陣列A的主LUN,

42、遠程復(fù)制重新保持由主LUN向從LUN實時同步數(shù)據(jù)。數(shù)據(jù)完全被破壞時當存儲系統(tǒng)A或B被破壞，數(shù)據(jù)不可修復(fù)時，需要重建存儲系統(tǒng)A或者存儲系統(tǒng)B,將從端數(shù)據(jù)反向復(fù)制到主端存儲系統(tǒng)A和存儲系統(tǒng)B上，調(diào)整主從關(guān)系，在生產(chǎn)中心恢復(fù)業(yè)務(wù)。鏈路和災(zāi)備端故障當生產(chǎn)中心與災(zāi)備中心的復(fù)制鏈路故障或者災(zāi)備中心設(shè)備故障，則遠程復(fù)制自動斷開復(fù)制，不影響生產(chǎn)系統(tǒng)的正常運行。生產(chǎn)中心主LUN將記錄故障期間的數(shù)據(jù)差異變化,待故障恢復(fù)后，自動將增量數(shù)據(jù)同步到從LUNo3.5VIS雙活+異步工作原理初始同步處理雙活+異步復(fù)制初始同步主要包括雙活數(shù)據(jù)中心之間初始同步和雙活到異地災(zāi)備中心異步復(fù)制主從LUN之間的初始同步。復(fù)制帶寬足夠的

43、情況下可以配置完就啟動初始同步，帶寬不足情況下，可以有幾種初始同步方式：.臨時增加復(fù)制帶寬完成初始同步。.將設(shè)備搬遷到一起來完成初始同步。.通過移動介質(zhì)存儲中轉(zhuǎn)進行初始同步。異步復(fù)制初始同步系統(tǒng)自動創(chuàng)建快照，將主LUN數(shù)據(jù)全部復(fù)制到從LUN,復(fù)制期間新增數(shù)據(jù)不會復(fù)制到從LUN中。3.5.2正常狀態(tài)處理生源若爰落我弟瑁。交出盤VIS鏡像白寫I/O流程如下：.寫請求到鏡像卷；.鏡像卷將請求復(fù)制為兩份下發(fā)到兩中心的鏡像數(shù)據(jù)盤；.鏡像數(shù)據(jù)盤返回寫操作完成；.鏡像卷返回寫I/O操作完成。.T時間點定時發(fā)起遠程復(fù)制，創(chuàng)建一致性快照.異地災(zāi)備中心陣列自動創(chuàng)建時間戳快照（失敗時用于回滾）.數(shù)據(jù)增量復(fù)制到異地。

44、當單陣列或單數(shù)據(jù)中心故障時，鏡像卷選取正常數(shù)據(jù)中心的陣列響應(yīng)主機I/O,并采用差異位圖盤記錄故障期間數(shù)據(jù)的變化情況，待故障修復(fù)后進行增量同步，從而減少數(shù)據(jù)同步量，縮短數(shù)據(jù)同步時間，降低數(shù)據(jù)同步對帶寬的需求。參與復(fù)制的磁盤陣列出現(xiàn)故障后，可修復(fù)的條件下，自動繼續(xù)增量數(shù)據(jù)復(fù)制，無法修復(fù)時，需要重新進行數(shù)據(jù)初始同步。通過雙活+陣列復(fù)制的兩地三中心實現(xiàn)，最高可實現(xiàn)同城業(yè)務(wù)RPO和RTO低至零,實現(xiàn)同城數(shù)據(jù)中心的業(yè)務(wù)自動接管。通過對異地災(zāi)備中心的容災(zāi)一鍵式恢復(fù)，可以實現(xiàn)異地業(yè)務(wù)分鐘級別。災(zāi)難切換處理雙活+異步復(fù)制的災(zāi)難切換分成生產(chǎn)中心A、生產(chǎn)中心B和生產(chǎn)中心A和B均故障時的切換處理。1）生產(chǎn)中心A故障當

45、生產(chǎn)中心A發(fā)生災(zāi)難后，生產(chǎn)中心B自動接管業(yè)務(wù)。具體故障處理請參考雙活方案介紹。2）生產(chǎn)中心B故障當生產(chǎn)中心B與異地災(zāi)備中心實現(xiàn)異步復(fù)制時，生產(chǎn)中心B發(fā)生災(zāi)難后，不影響生產(chǎn)業(yè)務(wù)的接管。由于生產(chǎn)中心與異地災(zāi)備中心通過異步復(fù)制容災(zāi)，生產(chǎn)中心B發(fā)生災(zāi)難后，生產(chǎn)系統(tǒng)當前的數(shù)據(jù)無法繼續(xù)異步復(fù)制到異地。當生產(chǎn)中心B可以修復(fù)的條件下，修復(fù)之后，雙活自動將差異數(shù)據(jù)同步到生產(chǎn)中心B磁盤陣列中，異步復(fù)制繼續(xù)增量復(fù)制到異地災(zāi)備中心。當生產(chǎn)中心B無法修復(fù)的條件下，雙活需要重新初始同步鏡像數(shù)據(jù)，并重新初始復(fù)制到異地災(zāi)備中心磁盤陣列中。3）生產(chǎn)中心A和生產(chǎn)中心B都故障當生產(chǎn)中心A和B在重大災(zāi)難或者都故障后，異地備中心的從L

46、UN保存著與主LUN間隔一定時間周期（復(fù)制周期）之前的數(shù)據(jù)，保障數(shù)據(jù)絕大部分不丟失。如果異地同城災(zāi)備中心部署有備用主機，則備用主機可以訪問從LUN,接管業(yè)務(wù)。異地災(zāi)備中心從LUN開始被主機訪問后，每次收到新寫入的數(shù)據(jù)，遠程復(fù)制會自動記錄其地址，以便用于后續(xù)增量恢復(fù)，縮短業(yè)務(wù)回切的時間。災(zāi)難恢復(fù)處理數(shù)據(jù)未被破壞時有數(shù)據(jù)，則遠程復(fù)制可以將主LUN。復(fù)制完成后，主、從重新由生產(chǎn)主機訪問存儲陣列時同步數(shù)據(jù)。當生產(chǎn)中心災(zāi)難恢復(fù)后，如果存儲系統(tǒng)A和B沒有受到破壞，主LUN能夠恢復(fù)其原LUN故障期間，從LUN1'新寫入的數(shù)據(jù)增量復(fù)制到主LUN保持復(fù)制關(guān)系。此時，可以將業(yè)務(wù)切換回生產(chǎn)中心，A的主LUN

47、,遠程復(fù)制重新保持由主LUN向從LUN實數(shù)據(jù)完全被破壞時當存儲系統(tǒng)A或B被破壞，數(shù)據(jù)不可修復(fù)時，需要重建存儲系統(tǒng)A或者存儲系統(tǒng)B,將從端數(shù)據(jù)反向復(fù)制到主端存儲系統(tǒng)A和存儲系統(tǒng)B上，調(diào)整主從關(guān)系，在生產(chǎn)中心恢復(fù)業(yè)務(wù)。鏈路和災(zāi)備端故障當生產(chǎn)中心與災(zāi)備中心的復(fù)制鏈路故障或者災(zāi)備中心設(shè)備故障，則遠程復(fù)制自動斷開復(fù)制，不影響生產(chǎn)系統(tǒng)的正常運行。生產(chǎn)中心主LUN將記錄故障期間的數(shù)據(jù)差異變化,待故障恢復(fù)后，自動將增量數(shù)據(jù)同步到從LUNo3.6HyperMetro+異步級聯(lián)工作原理HyperMetro支持通過異步級聯(lián)和異步并聯(lián)兩種模式組成3DC,技術(shù)原理上比較類似，下面介紹HyperMetro+異步級聯(lián)模式的

48、工作原理。初始同步處理HyperMetro+異步復(fù)制初始同步主要包括雙活數(shù)據(jù)中心之間初始同步和雙活到異地災(zāi)備中心異步復(fù)制主從LUN之間的初始同步。HyperMetro雙活站點間推薦FC互聯(lián)，可直接通過配置完成初始同步，與異地容災(zāi)中心根據(jù)互聯(lián)帶寬的情況可選擇下面幾種初始同步方式的一種完成初始同步。.臨時增加復(fù)制帶寬完成初始同步。.將設(shè)備搬遷到一起來完成初始同步。.通過移動介質(zhì)存儲中轉(zhuǎn)進行初始同步。異步復(fù)制初始同步系統(tǒng)自動創(chuàng)建快照，將主LUN數(shù)據(jù)全部復(fù)制到從LUN,復(fù)制期間新增數(shù)據(jù)不會復(fù)制到從LUN中。.寫請求到雙活LUN;.雙活LUN將寫請求雙寫到兩中心的雙活數(shù)據(jù)LUN;.雙活數(shù)據(jù)LUN返回寫操

49、作完成；.雙活數(shù)據(jù)LUN返回寫I/O操作完成.周期性的啟動異步模式，主端創(chuàng)建時間戳快照，并通知災(zāi)備中心創(chuàng)建也創(chuàng)建時間戳快照.增量數(shù)據(jù)復(fù)制完成后，異地災(zāi)備中心陣列創(chuàng)建時間戳快照(用于復(fù)制過程中，出現(xiàn)任何異常，可在災(zāi)備中心拉起業(yè)務(wù)).將增量數(shù)據(jù)復(fù)制到異地災(zāi)備中心.增量數(shù)據(jù)復(fù)制完成后，異地災(zāi)備中心從LUN置為數(shù)據(jù)完整狀態(tài)，復(fù)制置為正常關(guān)系通過雙活+陣列復(fù)制的兩地三中心可實現(xiàn)同城業(yè)務(wù)RPO=0,RTO=0,對異地災(zāi)備中心通過多時間點技術(shù)可實現(xiàn)秒級RPO,通過容災(zāi)一鍵式恢復(fù)，可實現(xiàn)RTO分鐘級。災(zāi)難切換處理雙活+異步復(fù)制的災(zāi)難切換分成生產(chǎn)中心A、生產(chǎn)中心B和生產(chǎn)中心A和B均故障時的切換處理。1）生產(chǎn)中心

50、A故障當生產(chǎn)中心A發(fā)生災(zāi)難后，生產(chǎn)中心B自動接管業(yè)務(wù)，生產(chǎn)中心B記錄與生產(chǎn)中心A的數(shù)據(jù)差異，與災(zāi)備中心的異步復(fù)制不受影響。當生產(chǎn)中心A的存儲設(shè)備可修復(fù)并且雙活數(shù)據(jù)LUN和雙活配置都正常的情況下，生產(chǎn)中心B將故障期間的差量數(shù)據(jù)復(fù)制到生產(chǎn)中心A,直到雙活工作狀態(tài)全部恢復(fù)正常。2）生產(chǎn)中心B故障當生產(chǎn)中心B與異地災(zāi)備中心實現(xiàn)異步復(fù)制時，生產(chǎn)中心B發(fā)生災(zāi)難后，不影響生產(chǎn)業(yè)務(wù)的接管。由于生產(chǎn)中心與異地災(zāi)備中心通過異步復(fù)制容災(zāi)，生產(chǎn)中心B發(fā)生災(zāi)難后，生產(chǎn)系統(tǒng)當前的數(shù)據(jù)無法繼續(xù)異步復(fù)制到異地。當生產(chǎn)中心B在可修復(fù)并且雙活數(shù)據(jù)LUN和雙活配置都正常的情況下，修復(fù)后自動將差異數(shù)據(jù)同步到生產(chǎn)中心B磁盤陣列中，異步

51、復(fù)制繼續(xù)增量復(fù)制到異地災(zāi)備中心。當生產(chǎn)中心B無法修復(fù)的條件下，雙活需要重新初始同步鏡像數(shù)據(jù)，并重新初始復(fù)制到異地災(zāi)備中心。3）生產(chǎn)中心A和生產(chǎn)中心B都故障當生產(chǎn)中心A和生產(chǎn)中心B分布較近，在重大災(zāi)難時均可能出現(xiàn)故障，此時可在異地災(zāi)備中心拉起業(yè)務(wù)。在災(zāi)備中心拉起業(yè)務(wù)時，數(shù)據(jù)要回滾到最近的一致性點，最多可能丟失兩個復(fù)制周期的數(shù)據(jù)。異地災(zāi)備中心從LUN接管業(yè)務(wù)后，遠程復(fù)制會記錄差異數(shù)據(jù)，以便用于后續(xù)增量恢復(fù)，縮短業(yè)務(wù)回切的時間。災(zāi)難恢復(fù)處理1）生產(chǎn)中心A故障的恢復(fù)當生產(chǎn)中心A的存儲設(shè)備可修復(fù)并且雙活數(shù)據(jù)LUN和雙活配置都正常的情況下,生產(chǎn)中心B將故障期間的差量數(shù)據(jù)復(fù)制到生產(chǎn)中心A,直到雙活工作狀態(tài)全

52、部恢復(fù)正常。當生產(chǎn)中心A無法修復(fù)的條件下，需要在生產(chǎn)中心A與生產(chǎn)中心B重新建立雙活配置，重新完成初始數(shù)據(jù)同步。2）生產(chǎn)中心B故障的恢復(fù)當生產(chǎn)中心B在可修復(fù)并且雙活數(shù)據(jù)LUN和雙活配置都正常的情況下，修復(fù)后自動將差異數(shù)據(jù)同步到生產(chǎn)中心B磁盤陣列中，異步復(fù)制繼續(xù)增量復(fù)制到異地災(zāi)備中心。當生產(chǎn)中心B無法修復(fù)的條件下，需要在生產(chǎn)中心A與生產(chǎn)中心B重新建立雙活配置，在生產(chǎn)中心B與災(zāi)備中心建立異步復(fù)制配置，并完成初始數(shù)據(jù)同步，恢復(fù)生產(chǎn)中心A與生產(chǎn)中心B的雙活關(guān)系，生產(chǎn)中心B與災(zāi)備中心異步復(fù)制關(guān)系，雙活狀態(tài)和異步復(fù)制狀態(tài)均恢復(fù)正常后，結(jié)束故障恢復(fù)操作。3）生產(chǎn)中心A和生產(chǎn)中心B都故障當生產(chǎn)中心A和生產(chǎn)中心B

53、在均可修復(fù)并且雙活數(shù)據(jù)LUN和雙活配置都正常的情況下，確認是否需要將災(zāi)備中心的數(shù)據(jù)同步到生產(chǎn)中心，如果需要，先將災(zāi)備中心數(shù)據(jù)復(fù)制到B,然后由生產(chǎn)中心B同步到生產(chǎn)中心A,完成后再恢復(fù)業(yè)務(wù)。如果不需要將災(zāi)備中心數(shù)據(jù)復(fù)制到生產(chǎn)中心B,可在生產(chǎn)中心A和生產(chǎn)中心B上直接恢復(fù)業(yè)務(wù),災(zāi)備中心的新增數(shù)據(jù)會被覆蓋。當生產(chǎn)中心A和生產(chǎn)中心B完全被破壞時，需要將災(zāi)備中心的數(shù)據(jù)同步到生產(chǎn)中心B,然后重建生產(chǎn)中心A和生產(chǎn)中心B雙活配置，完成初始同步，然后再建立生產(chǎn)中心B到災(zāi)備中心異步復(fù)制關(guān)系，雙活狀態(tài)和異步復(fù)制狀態(tài)均恢復(fù)正常后，結(jié)束故障恢復(fù)操作。鏈路和災(zāi)備端故障為了應(yīng)對無仲裁或仲裁故障的場景，HyperMetro有優(yōu)先

54、站點的概念，就是當網(wǎng)絡(luò)故障后，優(yōu)先站點會獲得更多的機會接管業(yè)務(wù)。在HyperMetro+異步級聯(lián)模式下，建議將優(yōu)先站點設(shè)置在生產(chǎn)中心B,以便HyperMetro在網(wǎng)絡(luò)故障或生產(chǎn)中心A故障，會仲裁到生產(chǎn)中心B承擔業(yè)務(wù)，生產(chǎn)中心B與災(zāi)備中心的容災(zāi)仍能正常工作，保證RPO的達成。當生產(chǎn)中心A與生產(chǎn)中心B鏈路故障，HyperMetro將業(yè)務(wù)優(yōu)先仲裁到數(shù)據(jù)中心B,數(shù)據(jù)中心B與災(zāi)備中心的復(fù)制不受影響。業(yè)務(wù)切換到數(shù)據(jù)中心B后，數(shù)據(jù)中心B會記錄與數(shù)據(jù)中心A的差量數(shù)據(jù)，當網(wǎng)絡(luò)恢復(fù)后，數(shù)據(jù)中心B同步差量數(shù)據(jù)到數(shù)據(jù)中心A,同步完成后，雙活恢復(fù)到正常狀態(tài)。當生產(chǎn)中心B與災(zāi)備中心的復(fù)制鏈路故障或者災(zāi)備中心設(shè)備故障，則遠

55、程復(fù)制自動斷開，不影響生產(chǎn)系統(tǒng)的正常運行。遠程復(fù)制自動斷開后，生產(chǎn)中心B將記錄故障期間的差量數(shù)據(jù)，待故障恢復(fù)后，自動將差量數(shù)據(jù)同步到災(zāi)備中心。兩地三中心容災(zāi)關(guān)鍵技術(shù)原理存儲雙活訪問兩地三中心方案中雙活+異步復(fù)制實現(xiàn)的容災(zāi)方案中，同城雙活涉及到的關(guān)鍵技術(shù)包括:跨中心存儲集群，故障不間斷訪問和地域優(yōu)化訪問等幾大技術(shù)，相關(guān)技術(shù)主要利用集群技術(shù)提供雙活的存儲架構(gòu)，每個節(jié)點以共享卷方式向應(yīng)用服務(wù)器提供無差異的并行訪問，同時處理應(yīng)用服務(wù)器的I/O請求；各節(jié)點間互為備份，均衡負載，任何節(jié)點故障后，其承接的業(yè)務(wù)自動切換到正常節(jié)點，保證系統(tǒng)的可靠性、業(yè)務(wù)的連續(xù)性。相關(guān)詳細介紹請參考雙活數(shù)據(jù)中心技術(shù)白皮書遠程復(fù)制狀態(tài)轉(zhuǎn)移圖遠程復(fù)制有“同步中”、“已分裂”、“正?！薄ⅰ爱惓嚅_”、“失效”幾種狀態(tài)，對各種狀態(tài)的描述如下表：表3-1遠程復(fù)制狀態(tài)描述Pair狀態(tài)狀態(tài)描述正常（Normal）同步復(fù)制初始創(chuàng)建時選擇主、從LUN無差異、或者主、從LUN同步完成后進入HUAMf£lPai