DCS分布式計(jì)算存儲(chǔ)系統(tǒng)產(chǎn)品介紹-20130208

1、SureSaveSureSave DCSDCS分布式計(jì)算存儲(chǔ)系統(tǒng)分布式計(jì)算存儲(chǔ)系統(tǒng) 2013.022013.02 大數(shù)據(jù)時(shí)代已經(jīng)來臨1600 EB5年的信息量年的信息量增加增加10倍倍!161 EB用戶新摩爾定理：新摩爾定理：每每18個(gè)月新增的存儲(chǔ)量等于有史以來存儲(chǔ)量之和個(gè)月新增的存儲(chǔ)量等于有史以來存儲(chǔ)量之和!傳統(tǒng)NAS面對(duì)大數(shù)據(jù)存儲(chǔ)的局限單系統(tǒng)容量性能有限設(shè)備的增加帶來管理的增加設(shè)備之間相互獨(dú)立，空間利用率低不能分擔(dān)IO負(fù)載，無法適應(yīng)高性能訪問要求無法提供設(shè)備間的高可用性支持，可靠性差面對(duì)海量數(shù)據(jù)存儲(chǔ)，高端NAS成本過高NFS、CIFS傳統(tǒng)相互獨(dú)立的NAS系統(tǒng)問題：?jiǎn)栴}：容量、性能、管理、可

2、靠性、成本！容量、性能、管理、可靠性、成本！SAN共享集群存儲(chǔ)的局限性 NAS頭上安裝集群文件系統(tǒng)客戶端，實(shí)現(xiàn)SAN存儲(chǔ)的并發(fā)訪問，通過NFS、CIFS等對(duì)應(yīng)用主機(jī)提供文件共享存儲(chǔ)局限性局限性SAN存儲(chǔ)成本較高；部署管理繼承了SAN架構(gòu)的復(fù)雜性；SAN共享存儲(chǔ)訪問成為性能瓶頸數(shù)據(jù)冗余保護(hù)主要依靠盤陣自身的raid技術(shù)，且重構(gòu)時(shí)間長(zhǎng)海量數(shù)據(jù)存儲(chǔ)訪問受限 FC/IP SANSAN存儲(chǔ)群集群NAS頭NFS、CIFS、http、FTP用戶應(yīng)用端主機(jī)以太網(wǎng)絡(luò)SAN FS集群NASSAN FSSAN FSSAN FS問題：?jiǎn)栴}：成本、管理、性能、可靠性、容量！成本、管理、性能、可靠性、容量！DCS分布式系

3、統(tǒng)架構(gòu)NFS、CIFS、http、FTP用戶應(yīng)用端主機(jī)。元數(shù)據(jù)訪問元數(shù)據(jù)訪問以太網(wǎng)絡(luò)數(shù)據(jù)讀寫數(shù)據(jù)讀寫數(shù)據(jù)讀寫SureSaveDCS數(shù)據(jù)節(jié)點(diǎn)元數(shù)據(jù)節(jié)點(diǎn) 每個(gè)數(shù)據(jù)節(jié)點(diǎn)有自己的存儲(chǔ)空間，通過分布式系統(tǒng)實(shí)現(xiàn)對(duì)全局命名空間的訪問SureSave DCS 4H特性SureSave DCS為大數(shù)據(jù)服務(wù)SureSave DCS 分布式計(jì)算存儲(chǔ)系統(tǒng)SureSave DCS為大數(shù)據(jù)服務(wù)SureSave DCS 分布式計(jì)算存儲(chǔ)系統(tǒng)SureSave DCS為大數(shù)據(jù)服務(wù)SureSave DCS 分布式計(jì)算存儲(chǔ)系統(tǒng)SureSave DCS為大數(shù)據(jù)服務(wù)SureSave DCS 分布式計(jì)算存儲(chǔ)系統(tǒng)SureSave DCS高效

4、的數(shù)據(jù)存儲(chǔ)訪問NFS、CIFS、SDCFS協(xié)議用戶應(yīng)用端主機(jī)。元數(shù)據(jù)訪問元數(shù)據(jù)訪問10Gb以太網(wǎng)絡(luò)SureSaveDCS數(shù)據(jù)節(jié)點(diǎn)元數(shù)據(jù)節(jié)點(diǎn)源端自動(dòng)分片多節(jié)點(diǎn)自動(dòng)負(fù)載均衡10GbE高速網(wǎng)絡(luò)通道SureSave DCS可選的數(shù)據(jù)冗余模式 冗余模式一：多副本模式冗余模式一：多副本模式 N份副本，保證N-1個(gè)節(jié)點(diǎn)同時(shí)故障情況下數(shù)據(jù)不丟失；節(jié)點(diǎn)故障時(shí)數(shù)據(jù)自動(dòng)遷移到其它節(jié)點(diǎn)。 無需數(shù)據(jù)備份（避免了備份時(shí)間窗口問題、恢復(fù)、備份管理等問題），所有數(shù)據(jù)隨時(shí)在線訪問； 6份數(shù)據(jù)3份冗余校驗(yàn)信息保證3個(gè)硬盤同時(shí)故障時(shí)數(shù)據(jù)訪問無影響。 提供大于66%的空間利用率 冗余模式二：冗余模式二：6+3高利用率模式高利用率模式

5、模式模式3份份副本冗余副本冗余6+3冗余冗余節(jié)點(diǎn)可靠性節(jié)點(diǎn)可靠性Shutdown 2 Node同時(shí)壞3塊盤/Shutdown One Node容量效率容量效率1/32/31231DDD2DDD3PPP4DDD5DDD6PPP7DDD8DDDXXXSureSave DCS可選的數(shù)據(jù)冗余模式6+3模式XSureSave DCS節(jié)點(diǎn)失效處理模式SureSave DCS應(yīng)用主機(jī)故障節(jié)點(diǎn)自動(dòng)隔離應(yīng)用主機(jī)停止往故障節(jié)點(diǎn)分發(fā)數(shù)據(jù)自動(dòng)轉(zhuǎn)到正常節(jié)點(diǎn)存儲(chǔ)故障節(jié)點(diǎn)數(shù)據(jù)通過冗余信息自動(dòng)遷移到正常節(jié)點(diǎn)SureSave DCS跨機(jī)柜數(shù)據(jù)保護(hù)多份副本情況下，每個(gè)副本可優(yōu)先存儲(chǔ)在不同的機(jī)柜中保證機(jī)柜斷電等整體故障情況下的數(shù)據(jù)

6、可用U1,1U1,2U1,3U1,4U1,5U1,13U1,14U5,1U5,2U5,3U5,4U5,5U5,13U5,14AU1,1 U2,1 U3,1副本1 副本2 副本3BU4,1 U5,1 U1,2寫數(shù)據(jù)AAA”BBB”SureSave DCS元數(shù)據(jù)的可靠性保證SureSave DCS應(yīng)用主機(jī)元數(shù)據(jù)節(jié)點(diǎn)數(shù)據(jù)節(jié)點(diǎn)down主備元數(shù)據(jù)節(jié)點(diǎn)冗余設(shè)計(jì)（A-S）同步元數(shù)據(jù)信息故障情況下備節(jié)點(diǎn)自動(dòng)接管元數(shù)據(jù)控制管理自動(dòng)部署管理控制臺(tái)SureSave DCS節(jié)點(diǎn)代碼自動(dòng)部署5分鐘內(nèi)完成新節(jié)點(diǎn)添加管理控制臺(tái)統(tǒng)一下發(fā)升級(jí)監(jiān)控管理基于web管理全中文圖形化豐富的圖表報(bào)告SOUL分布式存儲(chǔ)平臺(tái)內(nèi)部高速網(wǎng)絡(luò)鏈路

7、以太網(wǎng)絡(luò)海量數(shù)據(jù)存儲(chǔ)管理海量數(shù)據(jù)訪問管理應(yīng)用客戶端大數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)分布式系統(tǒng)內(nèi)核:容量與性能按需擴(kuò)展SureSave DCS分布式計(jì)算存儲(chǔ)容量容量性能性能可靠性可靠性成本成本管理管理 easySureSave DCS1000 分布式體系結(jié)構(gòu) 4H特性為大數(shù)據(jù)存儲(chǔ)服務(wù)先進(jìn)的SDCFS支持大于1億文件的高效存儲(chǔ)與訪問節(jié)點(diǎn)按需增加，超過100GB/s的高速訪問冗余設(shè)計(jì)、多種數(shù)據(jù)保護(hù)機(jī)制自動(dòng)化部署、便捷管理 大容量歸檔數(shù)據(jù)節(jié)點(diǎn)，為歸檔數(shù)據(jù)提供經(jīng)濟(jì)的存儲(chǔ)方式 支持計(jì)算平臺(tái)整合SureSave DCS1000 SAS數(shù)據(jù)節(jié)點(diǎn)-面向高效IO密集訪問企業(yè)級(jí)15k SAS磁盤每節(jié)點(diǎn)3U，提供9.6TB容量10Gb

8、E高速通道主機(jī)端2x1GbE,可擴(kuò)展（1GbE、10GbE、infiniband）應(yīng)用領(lǐng)域：科學(xué)計(jì)算、生命科學(xué)、地質(zhì)勘探、云辦公、輿情分析、零售、電商等 SATA數(shù)據(jù)節(jié)點(diǎn)-面向大量持續(xù)數(shù)據(jù)流存儲(chǔ)訪問大容量7.2k SATA磁盤每節(jié)點(diǎn)3U，提供32TB容量10GbE高速通道主機(jī)端2x1GbE,可擴(kuò)展（1GbE、10GbE、infiniband）應(yīng)用領(lǐng)域：流媒體、媒資管理、動(dòng)畫渲染、醫(yī)療影像、公共安全等SureSave DCS1000 歸檔數(shù)據(jù)節(jié)點(diǎn)-面向歸檔存儲(chǔ)需求歸檔數(shù)據(jù)在線訪問用戶無感知的透明歸檔大容量7.2k SATA磁盤每節(jié)點(diǎn)標(biāo)配108TB容量（4U），單節(jié)點(diǎn)可擴(kuò)展至378TB10GbE高

9、速通道主機(jī)端2x1GbE,可擴(kuò)展（1GbE、10GbE、infiniband）應(yīng)用領(lǐng)域：醫(yī)療影像歸檔、檔案歸檔、歷史文檔歸檔、娛樂影音文件歸檔、勘探及科研歷史數(shù)據(jù)歸檔等SureSave DCS1000SureSave DCS1000產(chǎn)品形態(tài) 最小配置：2個(gè)元數(shù)據(jù)節(jié)點(diǎn)+3個(gè)數(shù)據(jù)節(jié)點(diǎn) 元數(shù)據(jù)節(jié)點(diǎn)每節(jié)點(diǎn)2U，標(biāo)配32GB cache，2個(gè)10GbE接口，4.8TB元數(shù)據(jù)存儲(chǔ)空間 數(shù)據(jù)節(jié)點(diǎn)每節(jié)點(diǎn)標(biāo)配8GB cache，2個(gè)10GbE接口SAS節(jié)點(diǎn)與SATA節(jié)點(diǎn)可選，不能混合SAS節(jié)點(diǎn)（ DSN1060 ）含9.6TB容量SATA節(jié)點(diǎn)（ DSN1200 ）含32TB容量 選配數(shù)據(jù)歸檔節(jié)點(diǎn)每節(jié)點(diǎn)標(biāo)配8GB

10、 cache，2個(gè)10GbE接口7.2k 2TB SATA磁盤每節(jié)點(diǎn)標(biāo)配108TB容量，單節(jié)點(diǎn)可擴(kuò)展至378TB 如需動(dòng)態(tài)負(fù)載均衡，需配置對(duì)應(yīng)主機(jī)數(shù)據(jù)量的分布式客戶端許可SureSave DCS的技術(shù)應(yīng)用海量數(shù)據(jù)高效的存儲(chǔ)與訪問16盤位SAS、SATA節(jié)點(diǎn)，為海量非結(jié)構(gòu)化數(shù)據(jù)提供高效存儲(chǔ)訪問高效存儲(chǔ)訪問大流量訪問加速:10GbE X N加速應(yīng)用:醫(yī)療影像流媒體科研設(shè)計(jì)公共安全廣告高清企業(yè)生產(chǎn) 等大數(shù)據(jù)存儲(chǔ)需求10GbSureSave DCSSureSave DCS的技術(shù)應(yīng)用海量數(shù)據(jù)高效的存儲(chǔ)+歸檔訪問16盤位高性能節(jié)點(diǎn)為海量非結(jié)構(gòu)化數(shù)據(jù)提供高效存儲(chǔ)高效存儲(chǔ)訪問訪問的同時(shí)，通過單節(jié)點(diǎn)126盤位大

11、容量歸檔節(jié)點(diǎn)為低使用率數(shù)據(jù)提供經(jīng)濟(jì)的歸檔存經(jīng)濟(jì)的歸檔存儲(chǔ)儲(chǔ)更為低成本的大容量節(jié)點(diǎn)，為歸檔提供經(jīng)濟(jì)的轉(zhuǎn)儲(chǔ)方式歸檔路徑對(duì)用戶透明，歸檔數(shù)據(jù)在線訪問應(yīng)用:醫(yī)療影像流媒體科研設(shè)計(jì)檔案管理企業(yè)生產(chǎn)等大數(shù)據(jù)存儲(chǔ)及歸檔需求10GbSureSave DCS數(shù)據(jù)節(jié)點(diǎn)SureSave DCS歸檔節(jié)點(diǎn)10GbSureSave DCS的技術(shù)應(yīng)用海量數(shù)據(jù)的經(jīng)濟(jì)存儲(chǔ)與訪問單節(jié)點(diǎn)126盤位大容量歸檔節(jié)點(diǎn)為海量非結(jié)構(gòu)化數(shù)據(jù)提供經(jīng)濟(jì)的存儲(chǔ)與訪問經(jīng)濟(jì)的存儲(chǔ)與訪問應(yīng)用:視頻監(jiān)控歷史文檔娛樂影音文件歸檔等海量歷史數(shù)據(jù)存儲(chǔ)需要10GbSureSave DCS傳統(tǒng)并行運(yùn)算架構(gòu)運(yùn)算存儲(chǔ)傳統(tǒng)存儲(chǔ)架構(gòu)SureSave DCS的技術(shù)應(yīng)用海量數(shù)據(jù)高性能計(jì)算與存儲(chǔ) 傳統(tǒng)存儲(chǔ)架構(gòu)共享存儲(chǔ)訪問模式；計(jì)算與存儲(chǔ)分離；僅適合于計(jì)算相關(guān)數(shù)據(jù)量較小的高并發(fā)、計(jì)算密集型應(yīng)用 大數(shù)據(jù)情況下：存儲(chǔ)將成為訪問的性能瓶頸；海量文件的管理、訪問難題；傳統(tǒng)盤陣數(shù)據(jù)冗余保護(hù)機(jī)制不能滿足高性能要求。計(jì)算存儲(chǔ)節(jié)點(diǎn)=并行式運(yùn)算 + 分布式存儲(chǔ)大數(shù)據(jù)并行計(jì)算架構(gòu) 分布式文件系統(tǒng) 計(jì)算與存儲(chǔ)一體，