ARX存儲(chǔ)架構(gòu)介紹

文件存儲(chǔ)虛擬化李欣F5售前顧問(wèn)文件存儲(chǔ)系統(tǒng)存在的問(wèn)題如何解決問(wèn)題虛擬化文件存儲(chǔ)系統(tǒng)議程對(duì)于文件存儲(chǔ)，您最頭疼的問(wèn)題是什么？3Source:TheInfoProStorageStudyQ1,2007F5ARX幫助您解決這些問(wèn)題存儲(chǔ)的架構(gòu)混亂4NAS存儲(chǔ)已經(jīng)成為系統(tǒng)的瓶頸1984年制定的NFS協(xié)議標(biāo)準(zhǔn)已經(jīng)不能滿(mǎn)足今天的性能要求即使在一個(gè)10Gbps的網(wǎng)絡(luò)上，現(xiàn)有的NFS3.0運(yùn)行起來(lái)也就和在一個(gè)1Gbps網(wǎng)絡(luò)上的性能差不多NFS4.1(pNFS)還是在一個(gè)未來(lái)中當(dāng)NFSMount客戶(hù)端點(diǎn)超過(guò)16個(gè)的時(shí)候，性能將急劇下降高端的NAS服務(wù)器每秒鐘能執(zhí)行10萬(wàn)次I/O操作，但其價(jià)格已經(jīng)很難接受5用磁帶存儲(chǔ)還是用磁盤(pán)存儲(chǔ)HPLTO4Ultrium磁帶(C7974A)800GB500元IBMLTO4(46C5359)800GB680元希捷（Seagate）1TBST31000525SV7200轉(zhuǎn)32MSATAII監(jiān)控級(jí)硬盤(pán)719元西部數(shù)據(jù)（WesternDigital）1TBWD1000FYPS7200轉(zhuǎn)16MSATAII綠色環(huán)保企業(yè)級(jí)盒裝硬盤(pán)7*24880元6磁帶存儲(chǔ)的優(yōu)點(diǎn)是容量大，缺點(diǎn)是存取速度慢硬盤(pán)存儲(chǔ)的優(yōu)點(diǎn)是速度快，缺點(diǎn)是。。。文件存儲(chǔ)空間需求的快速增長(zhǎng)大多數(shù)企業(yè)的文件存儲(chǔ)空間是以倍數(shù)以上的每年增長(zhǎng)新的富媒體文件如圖片、視頻等導(dǎo)致存儲(chǔ)空間需求急劇增大法規(guī)遵從使企業(yè)必須保留多年的數(shù)據(jù)隨時(shí)備查Web2.0的興起導(dǎo)致了文件存儲(chǔ)空間需求呈指數(shù)方式上升7不同廠商的不同產(chǎn)品平臺(tái)企業(yè)在發(fā)展的過(guò)程中，必然的會(huì)采購(gòu)有不同廠家的存儲(chǔ)產(chǎn)品存儲(chǔ)產(chǎn)品的特性導(dǎo)致每個(gè)廠家基本上都采用封閉的解決方案一旦采用某一廠家的產(chǎn)品，將來(lái)的擴(kuò)容、備份、遷移、復(fù)制等職能采用同一廠家的產(chǎn)品8如何省錢(qián)?。。。〗?jīng)濟(jì)危機(jī)大環(huán)境下，必然承受的壓力如何有效的使用現(xiàn)有的存儲(chǔ)資源如何避免存儲(chǔ)設(shè)計(jì)的30%法則，提高資源的利用率？當(dāng)硬盤(pán)價(jià)格已經(jīng)跌倒1元1GB的時(shí)候，您的存儲(chǔ)是多少元1GB？9如何解決問(wèn)題？10基于于軟軟件件的的分分布布式式文文件件虛虛擬擬化化存存儲(chǔ)儲(chǔ)lustre,hadoop,pNFS,Moosefs,GFS,DFS,StorageX,Rainfinity11基于于硬硬件件的的文文件件虛虛擬擬化化存存儲(chǔ)儲(chǔ)F5ARX12VirtualIP“VirtualVolumeManager”RoutesvirtualpathtophysicalpathVirtualVolumeNetAppVolumeEMCVolumeNASVolumeApplications,Usersarx:/eng/project1/spec.docarx:/eng/project1/record.mp3arx:/eng/project1/specold.docVirtualPathna:/vol/vol1/project1/spec.docPhysicalPathemc:/vol/vol2/project1/record.mp3win:/vol/vol3/project1/specold.doc兩種方方式的的比較較軟件分布式存儲(chǔ)硬件虛擬化存儲(chǔ)數(shù)據(jù)完整性不完整，通常采用link方式或者文件分塊方式存放完整，對(duì)于單個(gè)文件完整存放，不采用link數(shù)據(jù)可恢復(fù)性一旦管理服務(wù)器崩潰，無(wú)法恢復(fù)數(shù)據(jù)只需要重新掃描文件系統(tǒng)性能高，但受限于客戶(hù)端代理的性能和管理服務(wù)器性能高，但受限于硬件芯片的吞吐能力可靠性低，核心系統(tǒng)的可靠性取決于操作系統(tǒng)和服務(wù)器硬件高，專(zhuān)用設(shè)計(jì)的硬件芯片穩(wěn)定、可靠技術(shù)支持開(kāi)源軟件沒(méi)有技術(shù)支持廠商提供專(zhuān)業(yè)技術(shù)支持功能擴(kuò)展性單一，只針對(duì)分布式存儲(chǔ)豐富，可實(shí)現(xiàn)分級(jí)存儲(chǔ)、動(dòng)態(tài)遷移、遠(yuǎn)程復(fù)制等多項(xiàng)功能客戶(hù)端Agent必須通過(guò)客戶(hù)端Agent截獲操作系統(tǒng)的文件讀寫(xiě)不需要安裝客戶(hù)端軟件13構(gòu)建高高性能能穩(wěn)定定可靠靠的虛虛擬化化文件件存儲(chǔ)儲(chǔ)系統(tǒng)統(tǒng)14F5硬硬件文文件存存儲(chǔ)交交換機(jī)機(jī)ARX架架構(gòu)采用專(zhuān)專(zhuān)用的的硬件件芯片片處理理數(shù)據(jù)據(jù)流量量采用高高性能能多核核CPU管理MetaData信息15ClientsNASandFileServersAdaptiveResourceSwitchTransactionLogControlPathRemotetransactionlog(mirror)LocalControlPathManagementDataPath(FastPath)實(shí)現(xiàn)負(fù)負(fù)載均均衡的的NAS集群通過(guò)ARX，可以以把多多臺(tái)NAS集合起起來(lái)，，整體體對(duì)外外提供供更高高的I/O讀寫(xiě)性性能和和吞吐吐率16ARX分級(jí)文文件存存儲(chǔ)/歸檔管管理/DD近線(xiàn)存存儲(chǔ)通過(guò)ARX，可以以輕松松的實(shí)實(shí)現(xiàn)文文件歸歸類(lèi)存存儲(chǔ)、、分級(jí)級(jí)存儲(chǔ)儲(chǔ)、歸歸檔管管理使用大大容量量的廉廉價(jià)存存儲(chǔ)空空間，，使近近線(xiàn)存存儲(chǔ)的的成本本降低低通過(guò)使使用DataDeDup存儲(chǔ)設(shè)設(shè)備，，可以以進(jìn)一一步降降低二二級(jí)存存儲(chǔ)成成本對(duì)于客客戶(hù)端端而言言，原原有的的存儲(chǔ)儲(chǔ)結(jié)構(gòu)構(gòu)沒(méi)有有任何何變化化17ARX關(guān)于數(shù)數(shù)據(jù)遷遷移通過(guò)ARX文件虛虛擬化化存儲(chǔ)儲(chǔ)，可可以實(shí)實(shí)現(xiàn)在在線(xiàn)的的數(shù)據(jù)據(jù)遷移移無(wú)需進(jìn)進(jìn)行冗冗長(zhǎng)的的遷移移規(guī)劃劃無(wú)需進(jìn)進(jìn)行多多次增增量拷拷貝18ARX關(guān)于災(zāi)災(zāi)備站站點(diǎn)復(fù)復(fù)制當(dāng)在生生產(chǎn)中中心和和備份份中心心都部部署ARX的時(shí)候候，可可以通通過(guò)ARX實(shí)現(xiàn)自自動(dòng)數(shù)數(shù)據(jù)復(fù)復(fù)制可支持持不同同品牌牌的后后端NAS設(shè)備支持NFS和CIFS支持文文件增增量復(fù)復(fù)制19如何省省錢(qián)？？存儲(chǔ)設(shè)設(shè)備節(jié)節(jié)省：：二級(jí)級(jí)存儲(chǔ)儲(chǔ)可以以采用用廉價(jià)價(jià)的大大容量量存儲(chǔ)儲(chǔ)方案案?jìng)浞莸牡馁M(fèi)用用節(jié)省?。嚎煽梢詾闉槎?jí)級(jí)存儲(chǔ)儲(chǔ)設(shè)定定更長(zhǎng)長(zhǎng)時(shí)間間的全全備份份窗口口系統(tǒng)空空間利利用率率提高高：可可以突突破30%的設(shè)計(jì)計(jì)界限限，使使系統(tǒng)統(tǒng)可以以使用用更高高的存存儲(chǔ)空空間利利用率率擴(kuò)展的的成本本節(jié)省省：不不再受受限于于單一一廠家家的擴(kuò)擴(kuò)容方方案功能擴(kuò)擴(kuò)展成成本節(jié)節(jié)?。海翰挥糜脝为?dú)獨(dú)購(gòu)買(mǎi)買(mǎi)歸檔檔軟件件、數(shù)數(shù)據(jù)遷遷移軟軟件、、遠(yuǎn)程程復(fù)制制軟件件管理運(yùn)運(yùn)維成成本節(jié)節(jié)?。海涸诰€(xiàn)線(xiàn)數(shù)據(jù)據(jù)遷移移無(wú)需需中斷斷業(yè)務(wù)務(wù)，在在線(xiàn)擴(kuò)擴(kuò)容、、在線(xiàn)線(xiàn)移動(dòng)動(dòng)文件件20智能文文件虛虛擬化化簡(jiǎn)化化數(shù)據(jù)據(jù)管理理90%使用率率10%使用率率AB文件存儲(chǔ)虛擬化AB存儲(chǔ)孤孤島復(fù)雜靜靜態(tài)映映射簡(jiǎn)化數(shù)數(shù)據(jù)管管理增增加IT靈活度度去減減少存存儲(chǔ)成成本分級(jí)存存儲(chǔ)降降低存存儲(chǔ)投投入成成本20%熱點(diǎn)數(shù)數(shù)據(jù)80%非熱點(diǎn)點(diǎn)數(shù)據(jù)據(jù)A25TBTier1$10/GB總成本=$250KA5TBB20TB文件存儲(chǔ)虛擬化Tier1$10/GBT1成本=$50KTier2$1/GBT2成本=$20K總成本=$70K削減50％以上的存存儲(chǔ)成本優(yōu)化備份減減少備份份數(shù)據(jù)和成成本每周全備份份，保留四四周100TB磁帶備份$0.75/GB$75K磁帶備份成成本.A25TB20%熱點(diǎn)數(shù)據(jù)80%非熱點(diǎn)數(shù)據(jù)據(jù)A5TBB20TB文件存儲(chǔ)虛擬化熱點(diǎn)文件90天內(nèi)訪(fǎng)問(wèn)的非熱點(diǎn)文件90內(nèi)未訪(fǎng)問(wèn)的每周全備份，保留四周20TB磁帶備份$0.75/GB$15K磁帶備份成本.減少備份成成本80%以上備份和和恢復(fù)的時(shí)時(shí)間節(jié)省現(xiàn)有存儲(chǔ)資資產(chǎn)的最大大化利用90%使用率10%使用率A10TBB10TB存儲(chǔ)孤島ABA10TBB10TB文件存儲(chǔ)虛擬化20TBAB\\WinA\sharedX\\WinB\sharedY“sharedX””“sharedY””90%使用率10%使用率合理設(shè)備使使用率減緩新采購(gòu)購(gòu)有效的利用用現(xiàn)有的存存儲(chǔ)資源減緩新存儲(chǔ)儲(chǔ)設(shè)備的采采購(gòu)\\org_name\sharedX\\org_name\sharedY透明平滑的的NAS合并和數(shù)據(jù)據(jù)遷移ABAB\\WinA\sharedX\\WinB\sharedY“sharedX””“sharedY””NAS無(wú)中斷、透透明遷移幾乎零宕機(jī)機(jī)時(shí)間靈活遷移日日程安排A10TBB10TB文件存儲(chǔ)虛擬化ABNAS減小遷移時(shí)時(shí)間，數(shù)據(jù)據(jù)遷移時(shí)減減少資源占占用率在90%以上關(guān)于性能對(duì)比于業(yè)界界目前能查查到的最高高性能NAS：并行I/O的主要好處處是它可以以提供很高高的應(yīng)用性性能和巨大大的可調(diào)整整性?！癇lueArc的Titan3200的速度性能能