HPXP存儲(OEMHDS)概念和安裝配置維護手冊

HPXP存儲(OEMHDS)概念和安裝配置維護手冊

一version1.0

2013年08月13日

目錄

HPXP存儲(OEMHDS)概念和安裝配置維護手冊.............................................1

1HP存儲產(chǎn)品線..................................................................4

2HPXP與IIDS存儲型號對應(yīng)關(guān)系..................................................4

3HDS高端存儲體系架構(gòu)............................................................5

4HDS高端存儲名詞概念............................................................6

5初始化安裝配置流程............................................................10

5.1安裝license.............................................................10

5.2初始化配置..............................................................10

5.3配置機柜硬件............................................................13

5.4B4規(guī)則定義RAIDGROUP..................................................15

5.5設(shè)置RAIDGROUP,并且劃分LDEV...........................................19

5.6分配LDEVID...........................................................22

5.1LunManager/HostGrp...................................................25

5.8ZONE規(guī)劃和配置.........................................................28

5.9主機識別LUN.安裝HDLM多路徑軟件........................................28

6添加新的LUN...................................................................33

7USP-V存儲開關(guān)機順序..........................................................35

7.1OperatorPanel操作面板說明.............................................35

7.2XP陣列關(guān)機步驟.........................................................36

7.3XP陣列開機步驟.........................................................36

8設(shè)備健康巡檢...................................................................37

8.1主機10健康巡檢內(nèi)容.....................................................37

8.2存儲端維保巡檢的內(nèi)容(詳見XP24000巡檢視頻.wrf):.......................37

9硬件故障簡單維護..............................................................38

9.1HardDriver維護.........................................................38

9.2BATTERY維護.............................................................45

9.3PowerSupply維護........................................................49

9.4FANCooling維護.........................................................52

未完待續(xù)…....................................................................53

文檔信息

文擋名稱初稿作者審核建立日期

HPXP存儲(OEMHDS)概念和安裝配置手冊童童2013/08/09

1HP存儲產(chǎn)品線

HP磁盤存儲產(chǎn)品線主要有P3000;P6000;P9000.

HPP3000為低端入門級的產(chǎn)品，有MSA500,MSA1000,MSA1500等

HPP6000為EVA企業(yè)級中端存儲:主要有EVA4400,EVA6400,EVA8400,這個系列存儲產(chǎn)品維護

使用方便,性能也不錯,其高級虛擬化數(shù)據(jù)保護功能具有不錯的效果.因此市場保有量也比較大.

HPP9500系列存儲產(chǎn)品是HPhigh-end最高端存儲,就是之前的XP存儲.而這個系列產(chǎn)品則

OEMHDS9900V（老XP不叫P9500）和USP以及USP-V.

當(dāng)然HP最新收購了3PAR的存儲作為第三代的存儲產(chǎn)品線延續(xù)，而在本文檔，我們主要涉及到

HPXP存儲即HDS9900V/USP/USP-V等等這些產(chǎn)品的信息和配置內(nèi)容.

2HPXP與HDS存儲型號對應(yīng)關(guān)系

HPOEM9900/9900V/USP,成XP系列(1998-2008年)

XP24000-----HDSTagmaStoreUSP-V===DKC610IDKC615I

XP12000——HDSTagmaStoreUSP=====(RD500系列)USP100USP600USP1100(DKC510I)

XP10000——HDSTagmaStoreNSC55===

XP1024-------HDSLighting9980V=====DKC465I

XP128-------HDSLighting9970V=====

XP512------HDSLighting9960======

XP48---------HDSLighting9910======

RSDisaunitofHitachiLtd.stands“RaidStorageDivision

HPXPDiskArraySystemProductinfo

3HDS高端存儲體系架構(gòu)

如下圖所示:

HDS高端存儲采用的是多點冗余的復(fù)合式的體系結(jié)構(gòu)，和EMCsymmetrix高端存儲一樣，有多

個專用的存儲控制器，類似directoradapter,有專用的前端控制器CHA（連接主機與存儲陣列CACHE

的通道），專用的后端控制器DKA（連接陣列的磁盤控制器DKU與CACHE）,每個卡上面有專用的處

理器,并且以以專用的cache控制器為核心（hds前后端連接到核心cache,是采用交換方式），CPU

集成在前/后端控制器中，操作系統(tǒng)以微碼方式集成在硬件中，并可以方便的升級維護。操作系統(tǒng)

SVP是微軟的操作系統(tǒng)。

前端卡與后端卡連接CACHE,是要經(jīng)過一個交換機的（CrossbarSwitch）,交換機最小可以是

2個（冗余需要），最大可以是4個，所有的主機數(shù)據(jù)請求通過I1BA連接的FC通道到達HDS存儲CI1A

前端卡/后端卡，再經(jīng)過交換機到CACHE,所以switch也是一個核心部件，而且數(shù)據(jù)流量會很大。

后端DKA連接CACHE和DKU磁盤控制器組成環(huán)路設(shè)計后端結(jié)構(gòu),當(dāng)前的存儲幾乎都是這結(jié)構(gòu).

每個后端卡也有各自的微處理器來進行數(shù)據(jù)處理.HDS的高端存儲都是雙環(huán)路設(shè)計，每個磁盤都有2

個環(huán)路可以達到，而且，這兩個環(huán)路可以負載均衡的工作。另外，為了避免一個環(huán)路，或者一個磁

盤太忙，RAID組的設(shè)計也有特殊的要求，一個RAID組中的磁盤，必須跨越在不同的環(huán)路上面。

下面這個例子，可以看到一個擴展柜前后磁盤分布，而建立的group則是按照B4原則從每個

HDU-BOX的相同位置選取一塊盤來組成RAIDGROUP.

DKU-R1

XDV-R153HDU-R152HDU-R1S1KDU-R150HIV-R1T3KDU-R172KDV-R171HDU-R170

HDI-R15MDU-R17

MDV-R154KDU-R155HDU-R156HDU-R157加U-R174KDV-R175MDU-R176MDU-Rin

KDU-R143MDU-R142KDU-R141KDU-R14O加KDU-R1&KDV-R161KDU-R160

MDV-RKKDU-R16

KDV-R144KDU-R145MDU-R146HDU-RI47HIU-R1MKDU-R165MDU-R166KDU-R167

KDV-RH3HDU-R1I2KDU-RI11KDlbRUOKDU-R133KDU-R132MDU-R131HDU-R13O

HDbRllMDU-R15

XDU-R1KHDU-R115KDV-R116KDU-R117mu-RiwKDU-R135KDV-R135MDU-R13?

MDU-R103HDU-R102HDU-R1O1HDU-R1OO加U-R123HDU-R122MDV-R121HDU-R12O

KDI-R10HDU-R12

MDV-R104KDV-R1O5MDU-R106MDV-R107KDU-R124MDU-R125HDV-R126MDV-R127

RRONTVIEIOJDOPO)||REARVIEWOJDOPl)

CU：')

GROUP1-2IHDU-RIOOIHDU-RIIOHDU-R120IHDU-R130GROUP1-2

CROW17HDU-R131GROUP1-4

HDU-R102]HDU-R112

GRO妒1-6HDU-R122HDU-R132GROUP1-6

HDU-R103|HDU-RU3HDU-R123HDU-R133

GROUP1-7HDU-R104IHDU-R114HUU-RIM]HUU-R13q

GROUP1-3IHDU-R106IHDU-R116HDU-R126IHDU-R136|CROUP1-3I

GROUP1-1IHDU-R107■l;疝

M小制?i;旭岫痼

HDU-R141|HDU-R151HDU-R161HDU-R171IGROUP2-8

GROUP2-11HDU-R142HDU-R152

GRO1P2-15HDU-R143HDU-R153

GROTP2-13HDU-R144HDU-R154HDU-R164HDU-R174GROUP2-14

GROUP2-9HDU-R145IHDU-KlbbHDU-R165HDU-R175GR0UP2-10

GROUP-HDU-R146HDU-R156HDU-R166HDU-R176GROUP2-6

IGRO1P2-1HDU-R147HDU-R157HDU-R167HDU-R177GROUP2-2

4HDS高端存儲名詞概念

了解體系架構(gòu)之后,我們就需要去了解存儲中所有所需要掌握的概念.每一個存儲多有哪些部

件,肯定有控制模塊,存儲模塊.控制模塊通過后端設(shè)備與存儲模塊連接,通過前端設(shè)備與主機連接

通訊.而控制模塊中間進行數(shù)據(jù)處理,緩存,分流等操作.

IIDS存儲按照硬件原件分為DKCFRAME和DKUFRAME

DKCFRAME可以分為DKC(logicbox),operatorpanel,SVP,DKURO,電池組,電源組，風(fēng)扇組.

DKC邏輯分為前clusterl和后cluster2,包含SM,CM,CSW,DKA,CHA這些部件.

IIDS9900V存儲硬件圖

DKC:

DKIMX2

)VfS2B

DK(MNIJVfSIA

SCBTSI-■SVP1S2

$3%TSL

USO)N

BAKTR-IO-

■BATCTR2O

BATCTR-II-

'BAKro-：!

WPSIBor-

M2WSIB■JVPSHor

八八2

JVPSIAof*

*3VPS2A?

1-I2VTSIA

31八QA

FUiFANIP

TRC^T

RGFANI”

LOGICBOX

TWP

H(iFAX2F

FLGFAN22<

DKU:

IHMX-4M)

/HfNK-nH

//IUMH4W

/fcilo,

除,

(即C)xl?DLBoxNo(0.I.2.3>

DKCLogicBox(clusterl的端口編號為1A,3A,5A,7A,IB,3B,5B,7B,

cluster2的端口編號為2A,4A,6A,8A,2B,4B,6B,8B)

ControaedbyCSW(Add)RearSide-Cluster2ContrdledDyCSW：Basic)

CKTW

(BMKI

czzf^

';MMA

C

H

Powersupply

sphere

DDboundary

KK

AA、Log?PL

S1O

//

WCC

HH

0AA

0MC)

IK1J1H1GICC1SA/1SC1CAIFIEIDIB

DKC-F5IOI-CSWFrontSide?Cluster1

以下名詞摘自HDS維護手冊(GLOSSARYSECTION):

DKC:磁盤系統(tǒng)的控制柜

DKU:磁盤系統(tǒng)的擴展柜,現(xiàn)在一個擴展柜應(yīng)該是有128塊磁盤

SVP:ServiceProcessor,服務(wù)程序，用來管理配置存儲.

HDU:USP一個HDU包括16塊硬盤，稱為一個BOX,這16塊硬盤接在兩個光纖環(huán)路上

CSW(CacheSwitchPCB):連接前端卡或后端卡到cache的設(shè)備.每個群集設(shè)置有兩個暗娼，

每個CSW可以連接4個高速緩存。CSW通過連接仲裁可以切換任意從高速緩存路連接到前端適配

器或后端磁盤適配器的路徑。這里很繞，說白了就是通道卡到達緩存的路徑具有高可用性.

Hotspare熱備盤是全局熱備,一般都在每個HDU最左上角的那塊盤.熱備盤的工作模式可以選

擇.如磁盤恢復(fù)是否數(shù)據(jù)回拷.如果不回拷,那么新更換的磁盤即為熱備盤.

SM和CM關(guān)系:他們處于同一塊PCB內(nèi)存板上.如圖視：

?IDKC-F4fi)|.?4X4O961!td?

?2DKC-F4?)l2tMX4096(2sets)

?yDKC-F4H)l-^MX4096(5

"4l)KC-l46)I-2O4M4O>M>(4y、)

SlurcdYemenMMukLoohon?S1>K<I4HI|.2<MM4OM6(5

rl)K<44?)l-2<MX409616K?t)

@SM00：SH"7.RC"1,7t)K(-14006(7y”

j~~OMOOSMK-Hl>K<44?)t-2O4X4OM|R?ci?)

,9DK<44<0I2<MX-MW*(9tc<M

■?SMOIsinmc,ADKC-F4?OI*2(MX4OMf10tcU)

,BDKC-F4(OI-2(MX?>?6(IIKU)

■JSM02SII2H1BC

,CDKCF4<OI-2(MX4046(12?ct>>

■isMOJSOi-BV

,DDKC-F4*OI2(MX44W6(l3?ct??

■SSMM-,EDKC-F4(OI-2<MA4046(14M(?|

°9SM05加.BC—,f40*.

,GDKC-F44OI-2<MK4OM<I*?ctt)

Coloro'Socket

(BISKconsidcnlion|

①forFeatureexpanswaI

tforFailurecipanvon2

?BASIC

?lorCACHEaFaturcapuiuonI

4forCACHE?Featurenpuivon2

tforCACHE?FeatureapanMcm3

(WM90-A)

SM:ShareMemory共享內(nèi)存，保存著陣列的配置信息以及數(shù)據(jù)CACHE的地址信息，在前端口過

來尋找數(shù)據(jù)的時候，會先經(jīng)過這里，如果能找到，則去數(shù)據(jù)CACHE,如果找不到，則可能需要磁盤

讀取。

CM:CacheMemory-intermediatebufferbetweenthechannelsanddrives數(shù)據(jù)內(nèi)存如果

采用4G的內(nèi)存標(biāo)準(zhǔn)，最大可以到128G,而如果采用8G的內(nèi)存標(biāo)準(zhǔn)，可以到256G,數(shù)據(jù)CACHE是

整個陣列的核心所在。

CACHE的命中率是一個陣列的響應(yīng)速度以及處理能力的一個重要體現(xiàn)，因為CACHE命中的話,

返回速度是非?？斓?，而不命中的話，就需要去磁盤尋找數(shù)據(jù)，可能會比較慢。而CACHE的命中率，

與應(yīng)用訪問規(guī)則，數(shù)據(jù)分布規(guī)則都有很大關(guān)系。

CIIA(ChannelAdapter):USP的前端卡,上面可以有多個(如8個)前端口,是連接主機與存

儲陣列CACHE的通道，一般默認是2Gb通道，現(xiàn)在可以配置到4Gb通道。

DKA(DiskAdapter):USP的后端卡，上面可以有多個(如8個)后端口，連接陣列的磁盤控

制器(DKU)與CACHE,現(xiàn)在還是2Gb的后端光纖環(huán)路通道。在USP的后端，磁盤放在DKU的HDU中，

每個IIDU最多可以放16個硬盤，而USP的一個環(huán)路最多可以接3個HDU,則一個環(huán)路最多可以是

48塊硬盤。

B4:四個HDU組成一個B4,在創(chuàng)建ECC時候，由每個HDU相同位置的磁盤組成.

ECCGROUP:RAIDGROUP

LDEV(LogicalDevice):存儲劃的邏輯設(shè)備，當(dāng)對應(yīng)了LUMNum之后輸出到CHA,就是LUN。

LU(LogicalUnit):LUN

Cluster:所有的板卡，包括CIIA,DKA,SM,CM都有兩塊對應(yīng)的卡，分別在柜子的前面和后面，將

整個柜子前面的所有卡稱為clusterA,將柜子后面的卡稱為clusterB.

SIM(ServiceInformationMessage):服務(wù)信息，系統(tǒng)出現(xiàn)故障時候會有日志.

SIMRC(ServiceInformationMessageReferenceCode),日志顯示了參考代碼，根據(jù)代碼查

詢故障的部件，以及需要執(zhí)行的動作稱為ACC.

CVS(CustomizableVolumeSize):自定義卷大小。當(dāng)前創(chuàng)建LUN都使用這種類型，模擬類型

選擇OPEN-V,這樣就可以自定義LDEV的大小.

CU:ControlUnit,IBM大型機的概念，在一般的系統(tǒng)中沒有實際含義，可以視為一組LDEVID

的組合,每個CU支持256個LDEV.

FICON,ESCON:IBM大型機主機的接口。

FibreChannel:通用系統(tǒng)的光纖接口。

SubsystemID:SSID,需要為每個CU指定一個唯一的ssid,無特殊用途，大型機的概念。

LCP(LinkControlProcessor):

WWN(WorldWideName):識別主機鏈路通道的適配器接口卡是唯一號碼.

FPC(FailurePartsCode):故障部件代碼.根據(jù)代碼查詢手冊.

以下不經(jīng)常使用，等到使用到再研究.

I1I1ISM(HitachiInternalHierarchyStorageManagement)

HMRCF(HitachiMultipleRAIDCouplingFeature)

HMRS(HitachiMultiplatformResourceSharing)

HODM(HitachiOnlineDataMigration)

IIOMRCF(HitachiOpenMultipleRAIDCouplingFeature)

5初始化安裝配置流程

?安裝license

?初始化配置

?配置機柜硬件

?B4規(guī)則定義RAIDGROUP

?設(shè)置RAIDGROUP,并且劃分LDEV

?分配LDEVID

?LUNMANAGER

?ZONE規(guī)劃和創(chuàng)建

?主機識別LUN.安裝多路徑軟件

5.1安裝license

SVP上進入ModifyMode

選擇INSTALL

選擇SYSTEMOPTION

選擇CHANGECONFIGURATION

選擇SYSTEMOPTION

點擊OPTION,此時出現(xiàn)軟件列表，選中要安裝的軟件

點擊INSTALL,此時提示輸入KEYCODE,輸入得到的KEYCODE,

安裝完成

5.2初始化配置

設(shè)置下基本時間日期

1IftUII

BdetCoofigurailonMicroProgramInstall

SetSubsystemJimc

L?fkaiDeviceFermatSet|Paddress

￡haafeCooflguritionInitializeQRMValue

圈

C?pyConfigFilesSettingBatteryLHeMMDD

-。/I26

.”

SeiMachineInstallDale

(w

mm

府.

HITACHI

OA'A?V*V■M(

按shift+ctrl_I組合鍵進入initialsetup模式

1.<ModeChange>

Changethemodeto[INITIALSETUP

Mode].

Select^hir+^Ctrr+'T；

Enterthepasswordandselect(CL)[OK].

Select(CL)[OK]inresponsetotheconfirmationmessage

*fc<ImportantCAUT1ON>

ThisMODEisINITIALSETUPMODE.YoumustnotexecuteNON-DISRUPTIVE

INSTALLandNON-DISRUPTIVEDEINSTALL!''

PleasecallTechnicalSupportDivisionforaskingthepassword.

Select(CL)[Install].

2.

Select(CL)[DefineConfigurationand

Install...].

HITACHI

3.

(1)

Select(CL)[OK]inresponsetothe

confirmationmessage

“<ImportantCAUTION〉

Thisoperationisnewinstallation.Ifyouwant

toNon-disruptivcInstallorNon-disrjptivede-install,terminatethisprocedureby[CANCEL]

buttonandselectINSTALL-CHANGECONFIGURATIONmenu”.

⑵

Select(CL)[OK]inresponsetothe

confirmationmessage

“〈ImportantCAUT1ON>

Whenyoucontinuethisoperation,finallyyou

needDKCPSOFF.Arcyousureyouwanttocontinuethisoperation?''.

⑶

Select(CL)[OK]inresponsetothe

confirmationmessage

“〈ImportantCAUTION>

Whenyoucontinuethisoperation,customer's

DATAisLOST.Arcyousureyouwanttocontinuethisoperation?*'.

Select(CL)[OK]inresponsetothe

confirmationmessage

“〈IMPORTANTCAUT1ON>

ExternalLUinformationandlogicalpartition

informationwillbeinitializedifyoucontinuethisoperation.Pleaserestoreconfigurationto

preventinitializationofthesedata.Areyousureyouwanttocontinuethisopcration?,\

(5)

Enterthepasswordandselect(CL)[OK].

Enteringthepasswordisrequiredin:his

operation.

PleasecallTechnicalSupportDivisionfor

askingit.

(6)

Select(CL)[OK]inresponsetothe

confirmationmessage"Installationdataof

optionproductintheConfigurationtablewill

beinitializedbythisoperation.Afterfinishing

thisprocedure,pleasesettheproduct

installationagain.''.

HITACHI

5.3配置機柜硬件

繼續(xù)上一步后，自動進入DKC機柜硬件配置，點擊systemoption和powersupply檢查.

點擊next,進入CHA/DKA配置.

HITACHI

OA<A?V*V■M?

點擊next,進入1E/2QCIIA刖端卡配置port界面.

FibiePCBConfiguration

1

AM

5

PAort]Irttator/TarcetChanndSpeedCuNuntwI(*Port|nutof/TaoetISmdSpeed|a/?mber|TT

7S統(tǒng)

AAUto00>3F2MAOO.3

1AUto00-3FOO-F

Bs*籃

B3

AUs00-6AOO-F

3AU00-3F8A