云存儲解決方案成功案例與經(jīng)驗分享

漫步云端盡享輕松存儲

IBMXIV&SoNAS–云存儲的雙重基石

世界每天都在變得越來越智慧

是什么讓它越來越智慧?答案是越來越多的信息!2000200520102015需要控制存儲容量的增長存儲需求的增長超過了預(yù)算的增長預(yù)算數(shù)據(jù)控制您的開銷

立刻采取措施，也許還能控制住成本信息爆炸與預(yù)算的匹配情況TBPBEBZBGB越來越復(fù)雜的IT環(huán)境……廠商C廠商B廠商A驅(qū)動A驅(qū)動A驅(qū)動B驅(qū)動B驅(qū)動C遠程鏡像?能否跨存儲服務(wù)器實施拷貝服務(wù)?需要有幾套存儲管理接口?沒空間了沒空間了沒空間了空余空間數(shù)據(jù)遷移SAN管理控制臺A管理控制臺C管理控制臺B快照?存儲的利用率高嗎?數(shù)據(jù)遷移造成的停機時間是否很多?WindowsServersLinuxServersUNIXServersIslandsofcomputinganddataDisparatemanagementtoolsManualProvisioningManagement

ServersPhysicalConsolidationComplexityLogicalVirtualizationWindowsServerUNIX?ServerLinuxServerNetworkingNetworkingFewerdevicesandlicensesDisparatemanagementtoolsLaborintenseprovisioningPoolsofresourcesVirtualizedserversQuickprovisioningAutomatedmanagementStorageVirtualizationVirtualServers,Storage,NetworksStorageServers讓高效云存儲來幫您解決問題Networking云計算的核心要素BusinessandITWorkloads=

成本虛擬化+標(biāo)準(zhǔn)化自動化+SLA隨處訪問

隨時在線

自動按需擴展

用戶自我服務(wù)2024/5/257云計算

智慧的服務(wù)提供方式2024/5/258什么是云存儲?2024/5/259云存儲的特點IBM云存儲為用戶帶來的價值簡化了IT管理工作提高了IT管理的效率節(jié)約了成本，保護環(huán)境排放熱量減少60%以上空間占用減少80%災(zāi)難恢復(fù)時間減少85%快速滿足業(yè)務(wù)需求能夠監(jiān)控存儲資源，并根據(jù)已定義的規(guī)則自動地平衡資源的分配。動態(tài)性存儲資源的物理位置及底層的基礎(chǔ)架構(gòu)對于用戶來說是透明和不相關(guān)的虛擬性可以將復(fù)雜的工作負載分解成小塊的工作，并將工作分配到可逐漸擴展的架構(gòu)中。擴展性基于服務(wù)為導(dǎo)向的架構(gòu)，動態(tài)地分配和部署共享的存儲資源。有效性靈活性可以支持多種計算機應(yīng)用類型，且同時支持消費者應(yīng)用和商業(yè)應(yīng)用。2024/5/2510存儲云與傳統(tǒng)存儲平臺的區(qū)別塊存儲云文件存儲云塊存儲用戶文件存儲用戶LUN,iSCSILUNTargetsPOSIX(NFS,CIFS,WebDAV),快速為用戶部署存儲空間按實際用量計費降低存儲成本(存儲共享，重復(fù)數(shù)據(jù)刪除，數(shù)據(jù)壓縮)系統(tǒng)管理簡單彈性擴展11IBM云存儲解決方案BlockStorageFileStorageDataServices網(wǎng)格塊存儲虛擬化塊存儲集群文件存儲備份云存儲歸檔云存儲塊信息云存儲提供塊設(shè)備存儲服務(wù)，適用對性能、可靠性有一定要求的數(shù)據(jù)庫應(yīng)用彈性擴展，不影響業(yè)務(wù)的運行存儲的物理結(jié)構(gòu)對用戶透明易于管理按需供給存儲容量文件信息云存儲提供文件存儲服務(wù)海量、彈性擴展，支持PB級數(shù)據(jù)和數(shù)十億個文件存儲的物理結(jié)構(gòu)對用戶透明全局命名空間內(nèi)置數(shù)據(jù)存放策略和信息生命周期管理高性能和高可用性數(shù)據(jù)服務(wù)云存儲數(shù)據(jù)保護數(shù)據(jù)安全及合規(guī)更安全更可靠!安全的存儲和保護業(yè)務(wù)信息更快更持續(xù)應(yīng)對整合的多種業(yè)務(wù)更簡單易用讓信息人員專注于業(yè)務(wù)性價比更高更低的運維成本擴展和變更容易遷移/整合/升級簡單,平滑SVCXIVSoNAS企業(yè)級存儲云對存儲的要求14IBM存儲家族自動存儲分級存儲存儲虛擬化服務(wù)-SVC備份，恢復(fù)和去重服務(wù)系統(tǒng)在線和離線備份集中和異構(gòu)存儲管理系統(tǒng)-TPC共享文件服務(wù)SAN/IPDS8000DS5000DS3000XIVIBMIBM磁帶TivoliStorageManagerProtecTIERTivoliProductivityCenterSANVolumeControllerOthersHDSHPEMC非IBM存儲IBM磁盤IBM磁帶非IBMTivoliStorageManagerProtecTIERTivoliProductivityCenterV7000SVC:網(wǎng)絡(luò)級存儲虛擬化中心16SVC協(xié)助建立了一個十分靈活的虛擬存儲架構(gòu)StoragePoolSANHDSIBMVirtual

DiskVirtual

DiskVirtual

DiskVirtual

DiskSANVolumeControllerSUN

HPEMC把不同存儲陣列的存儲容量組成一個統(tǒng)一的存儲池AdvancedCopyServices在存儲池上應(yīng)用統(tǒng)一的拷貝服務(wù)功能通過中心控制點進行集中管理存儲設(shè)備發(fā)生改變時，主機應(yīng)用不會被迫中斷XIV:塊級網(wǎng)格云存儲自我管理自我優(yōu)化自我恢復(fù)包含全部企業(yè)功能降低總體擁有成本數(shù)據(jù)模塊UPSUPSUPS數(shù)據(jù)模塊數(shù)據(jù)模塊數(shù)據(jù)模塊主機主機FC內(nèi)部交換機iSCSI主機2024/5/2519塊存儲云–XIV網(wǎng)格虛擬存儲所有特性全部均可線性擴展2024/5/25205點要素,完全適應(yīng)塊級存儲云2024/5/2521XIV–數(shù)據(jù)分布算法VMwareERPOracle分布算法每個volume均跨越全部磁盤轉(zhuǎn)軸;數(shù)據(jù)被”分成”1MB“分區(qū)”以網(wǎng)格的方式存儲在磁盤上;XIV以”偽隨機”的算法自動將”分區(qū)”分布到

所有

的磁盤上;優(yōu)點無需調(diào)優(yōu);沒有熱點;恒定100%負載均衡;恒定100%磁盤利用率2024/5/2522XIV-存儲擴展VMwareERPOracle模塊被添加數(shù)據(jù)自動重新分布分布過程不影響性能無需人工干預(yù)無需調(diào)優(yōu)無需重新規(guī)劃2024/5/2523XIV–存儲擴展(2)VMwareERPOracleExchange新增數(shù)據(jù)和Volume被分布到整個網(wǎng)格架構(gòu)中新增和現(xiàn)存的volume共享相同網(wǎng)格的資源無需人工干預(yù)2024/5/2524XIV-存儲彈性數(shù)據(jù)會存儲在網(wǎng)格內(nèi)現(xiàn)有的組件中重建期間對性能影響極小“自我優(yōu)化”重建過程由全體驅(qū)動器參與DataModule2DataModule3DataModule4DataModule1[硬件故障!]…發(fā)生在網(wǎng)格中的全部組件上傳統(tǒng)架構(gòu)復(fù)雜,不主動隨容量增長,全手工調(diào)整需要更多的預(yù)先規(guī)劃對現(xiàn)有的生產(chǎn)系統(tǒng)的風(fēng)險更高需要更多的監(jiān)控和調(diào)整較低的容量利用率XIV完全自動化無需預(yù)先規(guī)劃自動負載均衡最優(yōu)的容量利用率2024/5/2525性能–存儲管理全部免費!2024/5/2526XIV:內(nèi)置企業(yè)級存儲管理軟件高性能快照提供:

更簡便的物理磁帶備份從邏輯備份即時恢復(fù)輕松創(chuàng)建開發(fā)測試環(huán)境易于回滾的Boot-from-SAN環(huán)境更易于完成基于生產(chǎn)數(shù)據(jù)上的數(shù)據(jù)挖掘DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1DataModule1在虛擬服務(wù)器環(huán)境中快速增加/部署虛擬機在存儲系統(tǒng)中快速為虛擬機分配存儲空間存儲系統(tǒng)自動為虛擬機優(yōu)化性能,消除熱點WINZ-LINAIXZ-LINAIXWINVMwareP-SeriesZ-Series優(yōu)化虛擬化環(huán)境:P-Series,VMware,Z-Series&XIV

2024/5/2528XIV:管理極其簡單2024/5/2529XIV帶來的TCO節(jié)省:管理成本

管理投入↓50%

硬件投入↓20%

軟件投入↓30%

設(shè)施投入↓25%

2009ITG(InternationalTechnologyGroup)報告XIV傳統(tǒng)高端存儲2024/5/2530總結(jié)可靠的高性能簡單易用靈活低TCO發(fā)射后不管!平均超過50%的SLA提升以及超過60%的TCO節(jié)省!2024/5/2531是什么原因使1,000個客戶放心的在4,000+XIV上運行關(guān)鍵業(yè)務(wù)?SoNAS:無限擴展的文件級云存儲33集群文件存儲

——IBMSONAS：為云時代準(zhǔn)備的存儲CIFS客戶端HTTP客戶端FTP客戶端NFS客戶端管理節(jié)點接入節(jié)點......IP網(wǎng)絡(luò)磁帶庫接入節(jié)點StoragePodStoragePodSCP客戶端....接入節(jié)點單一文件名空間存儲節(jié)點存儲節(jié)點存儲節(jié)點存儲節(jié)點Infiniband數(shù)據(jù)網(wǎng)絡(luò)IP管理網(wǎng)絡(luò)磁盤陣列磁盤陣列磁盤陣列磁盤陣列一級存儲：高速盤陣二級存儲：大容量盤陣三級存儲：磁帶庫SONAS簡單:只有3個基本組件接口節(jié)點–多快存儲節(jié)點–多大管理節(jié)點

所有節(jié)點都是集群方式的高可用模式

外部用戶通過IP方式接入

所有節(jié)點的內(nèi)部互聯(lián)通過高帶寬、低延時的私有Infiniband網(wǎng)絡(luò)并行網(wǎng)格架構(gòu)

優(yōu)秀的線性擴展性

高性能

高可用和冗余SONAS系統(tǒng)軟件在所有節(jié)點上運行

策略性的自動化

全局文件系統(tǒng)

圖形化管理界面及操作系統(tǒng)34SONASSoftware

EnhancedInterfacesSystemsSoftwareStandardcomponentsCIFSParallelFileSystemCentralPolicyEngineBaseoperatingsystem(EnterpriseLinux)IBMServers(x3650M2)MonitoringAgentsNFSFTPHTTPClusterManagerGUI/CLImgmtinterfacesFutureSecurityHSMandILMBackup&RestoreSnapshots,Replication35IBMScaleOutNAS

…被實施以后:

全局虛擬文件存儲器協(xié)議CIFSNFSHTTPFTPSCP

管理CentralAdministrationMonitoringFileMgmt可用性DataMigrationReplicationBackup

Globalnamespace在不同層的存儲池間自動移動自動切換的集群自動分層存儲高速文件掃描引擎分層存儲重復(fù)數(shù)據(jù)刪除的VTL或磁帶庫高性能PB級文件掃描和搜索終端用戶高端工作站應(yīng)用服務(wù)器數(shù)據(jù)庫SONASGlobalVirtualFileServerSONAS系統(tǒng)結(jié)構(gòu)36TSMnodeInterfaceNodeInterfaceNode

CustomerIPNetworkWindows用戶UNIX用戶InfiniBandClusterNetworkPrivateEthernetManagementNetworkManagementNodeInterfaceNodeTSMnodeStorageNodeStorageNodeHighDensityRAIDControllerStoragePodOneortwohighdensity4Ux60HDDRAIDControllersOnehighdensity4Ux60HDDstorageexpansionunitperRAIDcontrollerUpto30StoragePodsSONAS系統(tǒng)Upto30InterfacenodesInfiniBandClusterNetworkOptional:1stDiskExpansionuniton1stRAIDControllerHighDensityDiskEnclosureOptional:2ndRAIDControllerHighDensityRAIDControllerHighDensityDiskEnclosureOptional:Optional1stDiskExpansionuniton2ndRAIDControllerInterfaceNodeInterfaceNodeInterfaceNodeStoragePodTape37………>

…..….....scaleoutscaleout/home/appl/data/web/important_big_spreadsheet.xls/home/appl/data/web/big_architecture_drawing.ppt/home/appl/data/web/unstructured_big_video.mpg/home/appl/data/web/home/appl/data/web/important_big_spreadsheet.xls/home/appl/data/web/big_architecture_drawing.ppt/home/appl/data/web/unstructured_big_video.mpgIBMScaleOutNASPolicyEngineGlobalNamespace注意:

上示例中三個文件都在同一個文件系統(tǒng)目錄中，但根據(jù)業(yè)務(wù)需求和數(shù)據(jù)特點分別被分配到不同的后端存儲池中。數(shù)據(jù)在后端存儲設(shè)備間實現(xiàn)全局條帶化?！咝阅堋詣诱{(diào)優(yōu)—自動負載均衡Tier1:SASdrivesTier2:1TBSATAdrivesTier3:2TBSATAdrivesInterfacenodesInterfacenodesInterfacenodesStoragenodesStoragenodes>Storagenodes邏輯視圖物理視圖l文件存儲虛擬化——IBMSoNAS工作模式38IBMScaleOutNAS2024/5/25全集成的系統(tǒng)超級可括展網(wǎng)絡(luò)連接存儲系統(tǒng)(NAS)，包含一系列業(yè)界領(lǐng)先的軟件功能NFS,CIFS,FTP,HTTPandSCP網(wǎng)絡(luò)協(xié)議聚合各項高性能硬件，超越傳統(tǒng)文件存儲器.全局文件名字空間（Globalfilesystemnamespace）同步和異步的遠程復(fù)制文件數(shù)據(jù)文件系統(tǒng)快照和定額控制可括的，集成的數(shù)據(jù)生命周期管理(ILM)自動分層存儲AutomatictieredstorageHSM支持到外部TivoliStorageManager(TSM)服務(wù)器實時性能監(jiān)控集成的系統(tǒng)硬件總監(jiān)控（SystemHealthCenter）LDAP和WindowsActiveDirectory支持1GbE和10GbE外部端口內(nèi)部采用高速、超低延時的Infiniband集群網(wǎng)絡(luò)作為核心數(shù)據(jù)交換系統(tǒng)(20Gbit/sec)高密度RAID控制器和磁盤擴展柜(4Ux60HDD’s)支持高速SAS和高容量SATA磁盤，很快將要支持SSDPrimaryRack42GbESwitch#241GbESwitch#1403938373636-portIB3536-portIB#1343332313029282726252423221UBlankFillerPanel21Keyboard,Video,Mouse2019181716151413121110987654321ManagementNode#1iPDUiPDUManagementNode#2InterfaceNode#6InterfaceNode#5InterfaceNode#4Storagenode#2Storagenode#1iPDUStorageController#2.1DiskStorageExpansionUnit#1.2StorageController#1.1iPDUDiskStorageExpansionUnit#2.2InterfaceNode#3InterfaceNode#2InterfaceNode#139適合使用SONAS云存儲的環(huán)境數(shù)字媒體高性能、海量存儲能力、極高的擴展性、隨處訪問等特點適合于媒體行業(yè)對性能、容量及變化多端的環(huán)境網(wǎng)絡(luò)內(nèi)容存儲海量存儲能力及自動分級能力特別適合存儲Web內(nèi)容高性能計算和分析系統(tǒng)性能好，擴展能力強，并行共享適合于需要高性能計算的用戶協(xié)同工作及文件存儲海量存儲、自動分級、高擴展能力以及隨處訪問、隨時在線的特點適合于大型企業(yè)和文件數(shù)量眾多的場景能源地理科學(xué)能源探索和地理科學(xué)要求大量可訪問的命名空間作分析之用和非常高的性能汽車、飛機設(shè)計及數(shù)字模擬分析可高速處理、編排海量原始數(shù)據(jù)，在授權(quán)范圍內(nèi)共享數(shù)據(jù)40IBMTivoliStorageProductivityCenter控制中心

——存儲云的統(tǒng)一管理平臺TPC所提供的管理特征:從單個用戶界面管理整個數(shù)據(jù)中心配置,計劃,實施,指導(dǎo)配置變更管理跟蹤資產(chǎn),容量,利用&會計報表趨勢&性能分析告警&問題隔離復(fù)制管理支持廣泛的平臺TPCStorageServerSAN2024/5/2541存儲云的框架物理設(shè)備層設(shè)備管理層數(shù)據(jù)管理層服務(wù)接入層高可用性數(shù)據(jù)在線遷移數(shù)據(jù)備份數(shù)據(jù)歸檔數(shù)據(jù)合規(guī)重復(fù)數(shù)據(jù)刪除內(nèi)容管理專用APINFSCIFSLUN/iSCSILUNWebDAV數(shù)據(jù)安全信息挖掘存儲資源部署存儲云用戶Tier-1DiskTier-2DiskTier-3DiskSANSwitchTape塊存儲云