HDSShadowImage實(shí)施過(guò)程

1、HDSShadowimage實(shí)施過(guò)程I.ShadowImage的基本原理與用途1.1基本原理ShadowImageHHDS1 供的獨(dú)特軟件。它使主機(jī)系統(tǒng)和存儲(chǔ)設(shè)備管理者能夠在后臺(tái)狀態(tài)下， 為主機(jī)處理的數(shù)據(jù)在USPVMJ部實(shí)時(shí)創(chuàng)建可獨(dú)立尋址多copy卷。 這些copy卷是應(yīng)用數(shù)據(jù)存放的現(xiàn)用生產(chǎn)卷的鏡象，可同時(shí)并行運(yùn)行任務(wù)。一旦生產(chǎn)數(shù)據(jù)的 copy卷建立后，通過(guò)命令可以與其生產(chǎn)卷分割開(kāi)，應(yīng)用系統(tǒng)數(shù)據(jù)庫(kù)可通過(guò)生產(chǎn)卷繼續(xù)做聯(lián)機(jī)應(yīng)用，與此同時(shí)，備份系統(tǒng)可利用 copy 卷進(jìn)行備份、報(bào)表生成和應(yīng)用開(kāi)發(fā)測(cè)試等工作。大大縮短了應(yīng)用系統(tǒng)因備份等原因 OFFLINE 兌機(jī)的時(shí)間。HDSUSPV/USPVM/USP

2、/9900V生產(chǎn)主機(jī)備份主機(jī)生產(chǎn)主機(jī)備份主機(jī),磁帶機(jī)磁帶機(jī)HDS9900另一方面由于 Shadowimage 是實(shí)時(shí)鏡像寫與盤組 RAID 保護(hù)，因此在同一Lightning 系統(tǒng)內(nèi)可得到 2 份或多份數(shù)據(jù)組， 并當(dāng)存放生產(chǎn)數(shù)據(jù)盤組發(fā)生故障不能恢復(fù)運(yùn)行時(shí)可通過(guò) Copy 卷的數(shù)據(jù)（兩邊是實(shí)時(shí)一致的）與切換地址定義恢復(fù)應(yīng)用，這樣比用磁帶恢復(fù)生產(chǎn)數(shù)據(jù)的速度要快得多。Shadowimage 可以通過(guò) USPV/VM、9900V/9900 的 SVP 或 RemoteConsole的圖形界面實(shí)施操作。也可以通過(guò)系統(tǒng)的命令行來(lái)操作，此時(shí)，需要在系統(tǒng)上安裝 HDS 的命令行接口軟件 CCI,并定義一個(gè) C

3、ommandDevice 磁盤，Shadowimag 瑜令通過(guò) CommandDevice 發(fā)送到存儲(chǔ)系統(tǒng)。如下圖：boragea/igatorJavaapplet1.2 Shadowimage主要用途對(duì)生產(chǎn)系統(tǒng)產(chǎn)生最近的快照，然后分離之后可以作為數(shù)據(jù)分析和查詢系統(tǒng)，提高設(shè)備利用率，一般快照部分不作更改，以只讀方式進(jìn)行，也可以更改，_eqendaRootVolume-vL2ParSIcascadedpair)/faLjinastureUSPsuDsysterncopyDownladVs-voiP-VOL(W上Server)StorageNavigatorComputer(WebCbemt)SV

4、OLNoJeVcdum三LeafVolumeLIPair(SIcascadedpair)但更改部分不保留，Shadowimage 跟蹤數(shù)據(jù)變化部分，在下一次執(zhí)行再同步的時(shí)候，由 Shadowimage 合并 P-Vol 和 S-Vol 不同的部分，既數(shù)據(jù)以 P-Vol 為基準(zhǔn)，S-Vol 和 P-Vol 比較，相同的部分不再?gòu)?fù)制，不同的部分則由P-vol 復(fù)制到 S-Vol;利用 USPV/VM 的 UniversalVolumeManager 可以實(shí)現(xiàn)數(shù)據(jù)遷移， 將其他存儲(chǔ)連接到 USP 作為外部存儲(chǔ)，可以作為 P-Vol 或者 S-Vol,再結(jié)合 Shadowimage 可以實(shí)現(xiàn)數(shù)據(jù)可以在

5、線從一臺(tái)存儲(chǔ)遷移到另外一臺(tái)存儲(chǔ)；對(duì) P-Vol 生成快照部分，S-Vol 和 P-Vol 分離，可以作為時(shí)間點(diǎn)的備份或者再通過(guò)磁帶庫(kù)等離線存儲(chǔ)設(shè)備進(jìn)行 HostFree(Serverless)備份，從而降低對(duì)生產(chǎn)系統(tǒng)的影響；采用時(shí)間點(diǎn)快照機(jī)制，S-Vol 在指定的時(shí)間點(diǎn)和 P-Vol 進(jìn)行增量同步復(fù)制，一旦 P-vol 和 S-Vol 的狀態(tài)成為 Pair,分離 P-vol 和 S-vol,在 P-Vol 出現(xiàn)邏輯故障或者物理故障，但分離開(kāi)的 S-Vol 數(shù)據(jù)完整的情況下可以將 S-vol 作為生產(chǎn)系統(tǒng)提供對(duì)外服務(wù)， 存在一定的數(shù)據(jù)丟失， 數(shù)據(jù)丟失的情況與同步分離時(shí)間的頻度有關(guān)，可以采用多份的

6、方式，可以保證數(shù)據(jù)至少有一份最近的完整的數(shù)據(jù)，在一定程度上實(shí)現(xiàn)容災(zāi)和本地快速恢復(fù)；基于上述第 4 點(diǎn)的說(shuō)明， Shadowimage 生產(chǎn)卷到快照卷的切換分為以下幾種情況：計(jì)劃內(nèi)切換，需要對(duì)生產(chǎn)卷進(jìn)行維護(hù)、調(diào)整或者演練等操作，過(guò)程如下：1)使用生產(chǎn)卷的所有應(yīng)用系統(tǒng) Shutdown,數(shù)據(jù)庫(kù)系統(tǒng) Shutdown,UMOUNT 文件系統(tǒng)，EXPORT 卷組，暫停對(duì)存儲(chǔ)系統(tǒng)的訪問(wèn) o 檢查HDSShadowimageP-vol 和 S-vol 的狀態(tài)o 當(dāng)對(duì)應(yīng)系統(tǒng)所有的卷都是 Pair 狀態(tài)時(shí)，執(zhí)行分離操作o 使用快照卷執(zhí)行 IMPORT,MOUNT 和啟動(dòng)數(shù)據(jù)庫(kù)以及應(yīng)用系統(tǒng)，提供對(duì)外服務(wù)2）系統(tǒng)

7、的回切過(guò)程（計(jì)劃內(nèi)）當(dāng)生產(chǎn)卷的維護(hù)結(jié)束或演練完成后，可以進(jìn)行系統(tǒng)的回切，即快照卷向生產(chǎn)卷的切換，其過(guò)程如下：o 在使用快照卷的應(yīng)用系統(tǒng)運(yùn)行時(shí)，執(zhí)行 P-Vols 與 S-Vols 的反向 resync 操作，加-restore 參數(shù)，這樣快照卷就成為 P-Vol,更新數(shù)據(jù)從快照卷向原生產(chǎn)卷進(jìn)行復(fù)制，如果采用 QuickRestore 模式，則系統(tǒng)在內(nèi)部調(diào)整指針，S-Vol 立即變成 P-Vol 提供對(duì)外服務(wù)，差異數(shù)據(jù)則在后臺(tái)執(zhí)行；o如果不采用QuickRestore模式， 則系統(tǒng)將S-Vol變成P-Vol,同時(shí)更新數(shù)據(jù)由S-vol（實(shí)際上已經(jīng)變成 P-vol）復(fù)制到 P-Vol（此時(shí)已經(jīng)變成

8、S-Vol）,數(shù)據(jù)更新完成之后，停止應(yīng)用，然后執(zhí)行分離，分離完成之后再次執(zhí)行 resync 力口-restore參數(shù)，調(diào)換角色；o 使用 P-Vol 啟動(dòng)相關(guān)的數(shù)據(jù)庫(kù)系統(tǒng)和應(yīng)用系統(tǒng)3）計(jì)劃外的切換（出現(xiàn)故障時(shí)的切換過(guò)程）系統(tǒng)的切換過(guò)程（生產(chǎn)中心到備份中心）在遇到生產(chǎn)卷出現(xiàn)故障，也就是進(jìn)行計(jì)劃外的切換時(shí)，生產(chǎn)中心的所有應(yīng)用系統(tǒng)都是非正常的結(jié)束，數(shù)據(jù)的完整性和一致性需要數(shù)據(jù)庫(kù)系統(tǒng)及操作系統(tǒng)來(lái)進(jìn)行恢復(fù)及修復(fù)。所以在計(jì)劃外的切換過(guò)程有如下幾種情況：o 對(duì)于出現(xiàn)邏輯故障而且只有一份快照卷的情況下，之前的設(shè)定必須為定期分離快照卷，而且出現(xiàn)故障的時(shí)候，P-vol 和 S-vol 不是正在進(jìn)行增量同步，否則邏

9、輯故障同樣復(fù)制到快照卷，快照卷或許同樣不可用；o 對(duì)于出現(xiàn)邏輯故障而且有多份快照卷的情況，之前的設(shè)定必須為定期分離快照卷，同時(shí)多份快照卷為分時(shí)進(jìn)行同步和分離，在出現(xiàn)故障的時(shí)候，可以有一份最近的完整數(shù)據(jù)；o 對(duì)于生產(chǎn)卷出現(xiàn)物理故障的情況如果快照卷同樣受到硬件的影響，則可能需要其他備份恢復(fù)方法來(lái)恢復(fù)數(shù)據(jù)如果快照卷沒(méi)有受到硬件的影響則分為：有一份或者多份快照卷，之前的設(shè)定為定期分離，而且出現(xiàn)故障的時(shí)候，P-vol 和 S-vol 不是正在進(jìn)行增量同步，則可以使用最近的完整的 S-Vol 作為生產(chǎn)系統(tǒng)提供對(duì)外服務(wù)；如果只有一份快照卷，在系統(tǒng)出現(xiàn)故障的時(shí)候，P-vol 和 S-vol 正在進(jìn)行增量同步，

10、則快照卷的數(shù)據(jù)是否可用依賴于數(shù)據(jù)自身的恢復(fù)能力o 出現(xiàn)故障的情況下，檢查 Shadowimage 的卷狀態(tài)o 分離 P-vol 和 S-vol,根據(jù)具體的情況使用掛起，或者刪除操作o 由滿足條件的快照卷提供對(duì)外服務(wù)4）計(jì)劃外故障的回切如果快照卷同樣受到硬件的影響而遭到破壞，則只能通過(guò)其他備份恢復(fù)方法來(lái)恢復(fù)數(shù)據(jù)；如果生產(chǎn)卷物理故障沒(méi)有影響到快照卷，或者說(shuō)快照卷可用的情況下，當(dāng)生產(chǎn)卷物理恢復(fù)正常，或者需要從快照卷恢復(fù)數(shù)據(jù)到生產(chǎn)卷，執(zhí)行以下操作:o 如果之前發(fā)生的為邏輯故障，Shadowimage 的 P-vol 和 S-vol 的關(guān)系還在，則使用反向同步的方法將數(shù)據(jù)復(fù)制回生產(chǎn)卷；o 如果系統(tǒng)發(fā)生的

11、為物理故障，Shadowimage 的 P-vol 和 S-vol 的關(guān)系已經(jīng)破壞，則使用現(xiàn)有的 Vol 作為 P-vol,創(chuàng)建鏡像對(duì)關(guān)系，在數(shù)據(jù)復(fù)制完成之后分離，執(zhí)行反向復(fù)制，調(diào)換角色即可。其他：為了提供高可靠性，或者減少對(duì)生產(chǎn)系統(tǒng)的影響以及實(shí)現(xiàn)異地容災(zāi)，在實(shí)際環(huán)境中，ShadowimageTrueCopy 和 UniversalReplicator 幾者之間進(jìn)行搭配，常見(jiàn)的模式有以下幾種：IneDopyDisk即山，#揖巾1DiskJtubft產(chǎn)TrueCop/Dsksubsystem1nisksi由systmi?TrueCopyUniversalReplicatorDisksubsyst

12、em1Di3ksubsystem2Unve-salRepllica：or但是以下環(huán)境是受到限制的UrnY也 0ReplcatorTrueCopyDsksubsystem1Disksubsystan2DiskSLOsstem3TrueCop/UniversalReplicatorDisksubsystem1Disksubsystem2Disksubsystem32.1實(shí)施前的準(zhǔn)備確定需要復(fù)制的 LDEV 的地址（源端）確定復(fù)制的目標(biāo) LDEV 的地址（目標(biāo)端）硬件安裝配置完成，確認(rèn)對(duì)應(yīng)的 P-Vol 和 S-Vol 以及配置完成和映射到相應(yīng)的端口;通過(guò) SVP,確認(rèn) Shadowimage 軟件

13、功能已經(jīng)打開(kāi)（Enable）.VW餐則UHIQ*刪I。.iiul|$j|曰度|1|iiuir-iMBii|SMIEIAL3|i&evSceMfyn?itonrfW|-U.HJrJ*rtGD3,1imnrrJTLJMVI：mnfwinr小 fJgmmrEfl二a( (KH巾Ijy*：iriTBTIPCCiQ|METltdV3lIfC.4HV1J/tqjjl5船口AI4ZUk,，加1111MI匚gdOPAHLDP向博un創(chuàng)OTFMIg抬rnPitfV4rCFNLDFVe0JUftMTHrM1jNIc:let-riseKtv|SNMPInforvMtTruecco/Mcbrod?wm/。Fi

14、Mnc：岡vimf“n”ypwmw，SadJwmagQermareHUriimtrdInstalledPEILL1UrliinlriJ七rtiWEurlimtedinMMixPcimcrcrtUrtimtcdIgtMXPennerenUriirrnealoabiiec“amurortummtocimetaiiMpm“EumrntedmmiixrjnrincnntfzainegiQrmi.rQftUrlirnlodIncHSd-1litm*InMallnlyIifft：I/ArrilnjAlIcr/riiliwtan|main;門卸1初旅tem國(guó)國(guó)GLf-A4-烹烹CLJ-Ar3CLS-AT2C

15、L-Aj-J?CLB不WCLJ-B3國(guó)國(guó)CU-BHCL1-C1固固CU-C因因CLCh2亡亡L0tCLIO-1*TGLi-DmCLT-DgCL-E4-JMCU-LCL5-E不WCLFjZug*2CLi序序王因因CLG十2Cl4j-KCL2ACLI-Ar國(guó)國(guó)CLI-AZrriiJijj-ri|&-0LLHrni丁日.Pert即rLI曄；JOLl-COinfir( (104791/PL-1；CLI-C0。00210.4SSI/PLtljCLI-CQiu遍gDOLC0Fv(pqCL3-CUQccoiomyjm-rnann*nxm0rnpYtpncii-r.nrnni(n?nmCLI-C000

16、0ti：0502-0COPYjPDjOL3-C0QQC2O71(IL”J二eijCLI-C.OIUQQ：W$：網(wǎng)0CWT沁沁CL3-C00W3JQ7muUU到的U4.uLUHT(PUJCLJ-UuuMU4|UI.一，。CLVCDmnnns晦tCOFYfPDiCL3-Cornc5to?rOiu皿j磔崎0|：CiE“陌陌cugQD皿喇tl島CLI-CtwonDinsanDcop( (pnC1LJ-CDEortortMjCLIGmoOQCn50BiqcoPY(F*raCIJ-CQUanfirnro4CLI-COiucCOFTrP)cu-cQDa帆門.拉GLI-COOtlUSOADEPT尸口cu-cC

17、Dq4更7_LJU口占1554Eir底中陷1DInBBflirvgdSID(51DQ191AqtkCaiDDl創(chuàng)建 SIPair:選中需要做 Shadowimage 的 LUN,右鍵選擇 PaircreatePodGHMlMJ5GDLTCL1-CI0(UDfltSCJL弓QL7:CL1CCDCMC1.64)SWLGF比CL1CD3m則18H5MSL*dOF匚心PdUUSdHCt.LI：3SelfedS-VolPai|cL?VjWcriiimeTMPBPliMCfOVOlPE?iMrMiValIttlrftNitBFRamiilFlintRraerwidFPairr.1,F4nMD必出.FarP

18、IJITICM：6PVc.1-：口Q(7(11-60)Iu即門Bl一一.10DW3D1;6C)0OPEN-0FQK降降CL1-CQiCDACI1.阻0CPEfJ-07042.啟啟CL1-C0：COBI.eFn0OPErj-9FM亡MJC-1-：00aQcjijflcj0口FEE-onacCJ，1I6D：0QPEM9河心kjajnnrWlE;111iF)0nPFfJ-97(U?昌昌GL1-G口口QJFC11WF口F-Ir.HLi-ui4cinnb、QFTE4-TimniHrfjLBr1nTnJl-l_2JIUigmgR|/gcrwi-|OKICancel選擇對(duì)應(yīng)的 S-Vol 和相關(guān)的參數(shù)進(jìn)行設(shè)

19、置；分離 SIPair,根據(jù)不同的情況選擇 Pairsplit（正常掛起），pairsplit-E（出錯(cuò)時(shí)使用）和 pairsplit6（刪除）再同步 SIPair,根據(jù)不同情況選擇 pairresync（正常同步），pairresync-restore 恢復(fù)）實(shí)施前的準(zhǔn)備如果使用 CCI 方式進(jìn)行管理 ShadowImage,則通過(guò) LUNManager 設(shè)置CommandDevice,并映射到相應(yīng)的端口被管理服務(wù)器進(jìn)行訪問(wèn).安裝與配置命令行控制軟件CCI 是通過(guò)命令行對(duì) Shadowimage 進(jìn)行控制和操作，前提是在存儲(chǔ)系統(tǒng)內(nèi)設(shè)置一個(gè)LUN 作為 CommandDevice（命令傳輸?shù)慕?/p>

20、口）,使用一臺(tái)服務(wù)器（可以是各種平臺(tái)）可以訪問(wèn)到 CommandDevice，但并不要求該服務(wù)器訪問(wèn)到 P-Vol 和 S-Vol;安裝對(duì)應(yīng)平臺(tái)的 CCI 軟件，配置實(shí)例和進(jìn)程（horcmn.conf）,修改services 文件，增加對(duì)應(yīng)實(shí)例名稱的解析，如下圖所示：兩臺(tái)服務(wù)器各負(fù)責(zé)連接和控制生產(chǎn)卷與快照卷的操作，兩臺(tái)服務(wù)器之間通過(guò)網(wǎng)絡(luò)進(jìn)行通訊，也可以使用同一臺(tái)服務(wù)器進(jìn)行操作，在同一臺(tái)啟動(dòng)兩個(gè)實(shí)例；在服務(wù)器發(fā)起命令使實(shí)例啟動(dòng)，兩臺(tái)服務(wù)器之間的實(shí)例可以通訊;發(fā)起相關(guān)命令進(jìn)行 ShadowImage 的操作，包括 Paircreate 創(chuàng)建，Pairsplit 分離（掛起或者刪除），Pairdis

21、play 顯示和查看，Pairresync 再同步（增量同步）等，這些命令搭配相關(guān)的參數(shù)實(shí)現(xiàn)對(duì) TrueCopy,ShadowImage,UniversalReplicator 等多個(gè)軟件進(jìn)行操作，例如無(wú) Fence 參數(shù)則建立的是 ShadowImage 卷，通過(guò) Fence=date,neve 課確認(rèn)TrueCopy 使用同步或 async 使用異步方式，F(xiàn)ence=async 以及-jp-js對(duì)應(yīng)journalgroupid 指明使用 UniversalReplicator;HDSShadowImage為 CCI 增加端口實(shí)施參數(shù)與當(dāng)前實(shí)施范例在/etc/services 下增加如下行#

22、AddedbyHDSforShadowImageCCIhorcm017777/udphorcm117778/udp#AddedEnd配置文件1)horcm0.conf#/*ForHORCMMON*周*ForHORCMCMD*/HORCM_CMD#dev_name/dev/rhdisk45*ForHORCMLDEV*#/*ForHORCMINST*1HORCM_MON#ip_addressservicelocalhosthorcm0poll(10ms)timeout(10ms)10003000devnamedevnameSerial#CU:LDEV(LDEV#)MU#yktdev12571700

23、:060yktdev22571701:060yktdev32571702:060yktdev42571703:060yktdev52571704:060yktdev62571705:060yktdev72571706:060yktdev82571707:060yktdev92571708:060yktdev102571709:060yktdev112571700:070yktdev122571701:070yktdev132571702:070HORCM_LDEV#dev_groupdev_nameHORCM_INST#dev_groupip_addressserviceyktlocalhosthorcml2)hor