QData數(shù)據(jù)庫(kù)一體機(jī)方案介紹

1、QData數(shù)據(jù)庫(kù)一體機(jī)方案介紹杭州沃趣科技股份有限公司Hangzhou WOQU Technology Co.,Ltd.1QData 產(chǎn)品介紹讓用戶用上最好的數(shù)據(jù)庫(kù)技術(shù)2QData 一體機(jī)平臺(tái)架構(gòu)3數(shù)據(jù)庫(kù)平臺(tái)的選型傳統(tǒng)技術(shù)架構(gòu)/類IOE虛擬化/超融合云架構(gòu)一體機(jī)分布式云架構(gòu)穩(wěn)定性穩(wěn)定性極好穩(wěn)定性一般穩(wěn)定性極好數(shù)據(jù)庫(kù)性能性能較好性能一般性能極強(qiáng)可視化管理硬件管理平臺(tái)基礎(chǔ)平臺(tái)監(jiān)控軟硬件、數(shù)據(jù)庫(kù)深度監(jiān)控可擴(kuò)展性擴(kuò)展性差擴(kuò)展性好擴(kuò)展性好兼容性封閉，品牌兼容性差兼容性好兼容性好產(chǎn)品形態(tài)“IOE三層架構(gòu)融合架構(gòu)三層分離架構(gòu)容災(zāi)備份生態(tài)依靠外部產(chǎn)品依靠外部產(chǎn)品產(chǎn)品線完整綜合成本高中中產(chǎn)品架構(gòu)采用標(biāo)準(zhǔn) x86

2、 Server架構(gòu)開(kāi)放, 性價(jià)比高, 可維護(hù)性高開(kāi)放式計(jì)算 & 存儲(chǔ)消除單點(diǎn)故障性能 & 容量水平擴(kuò)展分布式Infiniband，RDMA，NVMe，SSD , RDMA , Flash高性能計(jì)算層, 存儲(chǔ)層, 網(wǎng)絡(luò)層全冗余架構(gòu)可用性對(duì)標(biāo)小機(jī)+存儲(chǔ)架構(gòu)全冗余存儲(chǔ)節(jié)點(diǎn)1存儲(chǔ)節(jié)點(diǎn)2存儲(chǔ)節(jié)點(diǎn)3計(jì)算節(jié)點(diǎn)1計(jì)算節(jié)點(diǎn)2QData一體機(jī)架構(gòu)拓?fù)鋱D5計(jì)算節(jié)點(diǎn):6臺(tái)兩路/3臺(tái)四路服務(wù)器2 x Intel Xeon Platinum 8160 CPU384 GB Memory (12 x 32GB)2 x 2.5”1.2TB 10K SAS硬盤(pán)板載 2 x 1GbE + 2 x 10GbE 以太網(wǎng)卡2 x 56

3、Gb Dual-Port IB FDR HCA卡存儲(chǔ)節(jié)點(diǎn):12臺(tái)兩路服務(wù)器2 x Intel Xeon Silver 4108 CPU32GB Memory (4 x 8 GB)2 x 1.2TB 10K SAS硬盤(pán)板載4 x 1GbE 以太網(wǎng)卡2 x 56 Gb Single-Port IB FDR HCA卡22 x 1.6TB NVMe SSD存儲(chǔ)交換網(wǎng)絡(luò):2臺(tái)36口56/100Gb/s InfiniBand每個(gè)端口56/100Gb/s，全雙工模式存儲(chǔ)計(jì)算數(shù)據(jù)高速互聯(lián)Oracle RAC心跳網(wǎng)絡(luò)管理節(jié)點(diǎn):1 x Intel Xeon Bronze 3106 CPU16GB Memory (

4、2 x 8GB)2 x 1.2TB 10K SAS硬盤(pán)板載2 x 1GbE 以太網(wǎng)卡管理交換機(jī):48 x 1000 Base-T標(biāo)準(zhǔn)1U空間QData一體機(jī)硬件形態(tài)6QData平臺(tái)架構(gòu)高性能絕大多數(shù)數(shù)據(jù)庫(kù)性能瓶頸都在IO上7QLink高速互聯(lián)存儲(chǔ)軟件iSerNVMeoF RDMA傳輸訪問(wèn)技術(shù)，zero copy，kernel bypass NVMeoF消除傳統(tǒng)SCSI協(xié)議轉(zhuǎn)換，降低IO延遲 NVMe的原生命令和結(jié)構(gòu)端到端傳輸 Linux 7/Linux 6的多內(nèi)核兼容與支持存儲(chǔ)節(jié)點(diǎn)介質(zhì)輸出計(jì)算節(jié)點(diǎn)設(shè)備映射QLink實(shí)現(xiàn)設(shè)備遠(yuǎn)程IO訪問(wèn)的無(wú)損輸出iSer協(xié)議NVMeoF協(xié)議，未來(lái)兼容以太核心軟件

5、QLink基于NVMeoF加速數(shù)據(jù)庫(kù)IO8計(jì)算Intel Xeon Scalable CPU提供極致運(yùn)算能力QLink軟件與硬件的組合，提供極致的計(jì)算與IO性能！網(wǎng)絡(luò)56/100Gb Infiniband網(wǎng)絡(luò)提供高速網(wǎng)絡(luò)通道存儲(chǔ)新一代NVMe閃存介質(zhì)提供高速I(mǎi)O能力平衡的硬件組合提升IO帶寬，降低IO延遲9SATA SSDNVMe SSDHammerDB + 500GB數(shù)據(jù)量 + SGA 110GB + 150個(gè)用戶并發(fā)TPMNVMeoFiSer720萬(wàn)520萬(wàn)HammerDB + 500GB數(shù)據(jù)量 + SGA 110GB 150個(gè)用戶并發(fā) 2 * 計(jì)算節(jié)點(diǎn)，CPU: E5-2696 v4 8

6、8cores，320GB RAM，56Gb/s IB卡3 * 存儲(chǔ)節(jié)點(diǎn)，CPU: E5-2630 v4 40cores，32GB RAM，56Gb/s IB卡，20 * 480GB三星SSD結(jié)論：相同硬件環(huán)境下，QData T5 QLink可以提升超過(guò)30%的性能2 * 計(jì)算節(jié)點(diǎn)，CPU: E5-2696 v4 88cores，320GB RAM，56Gb/s IB卡3 * 存儲(chǔ)節(jié)點(diǎn)，CPU: E5-2630 v4 40cores，32GB RAM，56Gb/s IB卡，1 * 1.6TB HGST SN150 NVMe SSD結(jié)論：NVMe SSD + NVMeoF相較傳統(tǒng)SSD iSER模

7、式，TPM性能提升62%NVMe SSD + NVMeoF可以在保證QoS的前提下承載更大的并發(fā)量，延遲下降了20% - 40%左右基于NVMeoF的QLink性能提升TPMNVMeoFiSer847萬(wàn)633萬(wàn)10QData平臺(tái)架構(gòu)可擴(kuò)展11目前QData一體機(jī)上線的最大單套集群為26存儲(chǔ)節(jié)點(diǎn)計(jì)算節(jié)點(diǎn)1計(jì)算節(jié)點(diǎn)3計(jì)算節(jié)點(diǎn)2存儲(chǔ)節(jié)點(diǎn)1存儲(chǔ)節(jié)點(diǎn)4存儲(chǔ)節(jié)點(diǎn)2存儲(chǔ)節(jié)點(diǎn)5存儲(chǔ)節(jié)點(diǎn)3QLink over InfinibandInfiniband Switch計(jì)算層利用Oracle RAC實(shí)現(xiàn)節(jié)點(diǎn)擴(kuò)展存儲(chǔ)層可添加節(jié)點(diǎn)，并實(shí)現(xiàn)數(shù)據(jù)均勻分布QData架構(gòu)水平擴(kuò)展12QData一體機(jī)經(jīng)典應(yīng)用場(chǎng)景13為OLTP型數(shù)

8、據(jù)庫(kù)匠心設(shè)計(jì)內(nèi)存級(jí)事務(wù)提交速度100+并發(fā)處理核數(shù)，2TB內(nèi)存緩存數(shù)據(jù)庫(kù)深度優(yōu)化納秒級(jí)網(wǎng)絡(luò)延遲內(nèi)存級(jí)事務(wù)提交速度Redo日志IO獨(dú)占設(shè)計(jì)微秒級(jí)數(shù)據(jù)IO延遲CCTV官網(wǎng)融媒體系統(tǒng)自營(yíng)交易、私募漲樂(lè)財(cái)付通APP、集中交易查詢國(guó)網(wǎng)營(yíng)銷、農(nóng)網(wǎng)營(yíng)銷手機(jī)閱讀交易積分交易平臺(tái)BPM財(cái)務(wù)營(yíng)銷MES系統(tǒng)交易支付系統(tǒng)交警六合一系統(tǒng)1795萬(wàn)人同時(shí)在線觀眾規(guī)模超過(guò)10億同時(shí)支撐CCTV網(wǎng)站、APP央視客戶端、微博、724小時(shí)在線TPM 1000萬(wàn)+ 閃存容量1PB+SQL延遲us級(jí)別QData一體機(jī)聯(lián)機(jī)交易OLTP應(yīng)用場(chǎng)景14數(shù)倉(cāng)分析與查詢100GB+/秒IO吞吐，全面加快數(shù)據(jù)ETL，數(shù)據(jù)挖掘分析，ad-hoc查詢

9、速度數(shù)倉(cāng)生命周期管理NVMeFlash,SSD,SAS磁盤(pán)組合，靈活應(yīng)對(duì)數(shù)據(jù)冷熱分層，數(shù)據(jù)歸檔，數(shù)據(jù)清洗業(yè)務(wù)需求數(shù)倉(cāng)性能空間容量擴(kuò)展計(jì)算存儲(chǔ)資源橫向擴(kuò)展，滿足PB級(jí)的海量數(shù)據(jù)存儲(chǔ)與性能擴(kuò)容核查打印報(bào)表分析百事通機(jī)管系統(tǒng)集約化數(shù)據(jù)運(yùn)營(yíng)風(fēng)控管理大數(shù)據(jù)綜合平臺(tái)ODS經(jīng)營(yíng)分析系統(tǒng)營(yíng)銷費(fèi)控?cái)?shù)據(jù)綜合管理平臺(tái)風(fēng)控管理數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)QData一體機(jī)數(shù)倉(cāng)分析OLAP應(yīng)用場(chǎng)景15QData數(shù)據(jù)庫(kù)云化資源池整合場(chǎng)景16QData平臺(tái)架構(gòu)產(chǎn)品化17引領(lǐng)QData T5更高性能的新一代存儲(chǔ)軟件全面支持NVMe SSD全面支持100Gb/s網(wǎng)絡(luò) 智能化運(yùn)維標(biāo)準(zhǔn)的自動(dòng)化部署2018云化全面支持12C CDB/PDB管理自助化

10、2017核心部件產(chǎn)品化Qlink高速存儲(chǔ)管理軟件QMonitor數(shù)據(jù)庫(kù)監(jiān)控軟件2012一體化QData Manager命令行管理套件QData Control可視化管理套件DELL、Mellanox戰(zhàn)略合作2015技術(shù)孵化阿里TITAN項(xiàng)目組替換阿里CRM系統(tǒng)的IOE數(shù)據(jù)庫(kù)平臺(tái)2010完善生態(tài)Cloud Manger數(shù)據(jù)庫(kù)云平臺(tái)Cloud Monitor數(shù)據(jù)庫(kù)云監(jiān)控QData Infinite雙活數(shù)據(jù)庫(kù)平臺(tái)QPlus數(shù)據(jù)庫(kù)容災(zāi)備份云平臺(tái)2016產(chǎn)品更新迭代路線18SQLQData平臺(tái)功能亮點(diǎn)一鍵式智能巡檢與介質(zhì)恢復(fù)深度硬件監(jiān)控?cái)?shù)據(jù)庫(kù)DBaaS云化自助自動(dòng)化標(biāo)準(zhǔn)部署19 主機(jī)CPU/內(nèi)存/存儲(chǔ)/

11、網(wǎng)卡/風(fēng)扇/電源 IB交換機(jī)硬件狀態(tài)監(jiān)控 IO存儲(chǔ)設(shè)備的管理維護(hù)深度硬件監(jiān)控與管理20數(shù)據(jù)庫(kù)監(jiān)控管理菜單數(shù)據(jù)庫(kù)DBaaS云化自助21數(shù)據(jù)庫(kù)監(jiān)控管理菜單數(shù)據(jù)庫(kù)深度監(jiān)控22一體機(jī)巡檢功能DashBoard巡檢狀態(tài)實(shí)時(shí)儀表盤(pán)數(shù)據(jù)庫(kù)檢查硬件OS檢查交換網(wǎng)絡(luò)及Qlink檢查一鍵式智能巡檢23一鍵式數(shù)據(jù)庫(kù)層的介質(zhì)恢復(fù)數(shù)據(jù)庫(kù)故障介質(zhì)智能恢復(fù)24標(biāo)準(zhǔn)化安裝與自動(dòng)配置25成熟穩(wěn)定極致性能功能親民技術(shù)平衡國(guó)內(nèi)第一家一體機(jī)廠商產(chǎn)品行業(yè)覆蓋率最廣新一代存儲(chǔ)協(xié)議適配兼容800萬(wàn)IOPS，100GB吞吐，微秒級(jí)IO延遲精通數(shù)據(jù)庫(kù)，OS及存儲(chǔ)硬件經(jīng)歷過(guò)阿里巴巴的技術(shù)架構(gòu)變遷基于DBA的運(yùn)維習(xí)慣設(shè)計(jì)可視化管理，全層級(jí)監(jiān)控重資

12、投入生態(tài)完善100臺(tái)POC研發(fā)測(cè)試設(shè)備標(biāo)準(zhǔn)的產(chǎn)品組裝車(chē)間基礎(chǔ)平臺(tái)，容災(zāi)備份，同城雙活云化RDS，全套解決方案QData一體機(jī)產(chǎn)品優(yōu)勢(shì)總結(jié)26QData與市場(chǎng)主流產(chǎn)品及技術(shù)特性對(duì)比讓用戶用上最好的數(shù)據(jù)庫(kù)技術(shù)27數(shù)據(jù)庫(kù)一體機(jī)對(duì)比 數(shù)據(jù)庫(kù)一體機(jī)穩(wěn)定性穩(wěn)定性極好穩(wěn)定性極好產(chǎn)品形態(tài)三層分離架構(gòu)三層分離架構(gòu)可擴(kuò)展性擴(kuò)展性好擴(kuò)展性好數(shù)據(jù)庫(kù)性能性能極強(qiáng)性能極強(qiáng)可視化管理軟硬件、數(shù)據(jù)庫(kù)深度監(jiān)控 軟硬件、數(shù)據(jù)庫(kù)深度監(jiān)控兼容性兼容性好，兼容主流品牌封閉，品牌兼容性差產(chǎn)品生態(tài)數(shù)據(jù)生態(tài)方案全面數(shù)據(jù)生態(tài)方案全面綜合成本中高產(chǎn)品架構(gòu)某國(guó)際大廠一體機(jī)VS某國(guó)際大廠一體機(jī)同等配置下，OLTP場(chǎng)景，兩者持平；QLAP場(chǎng)景，國(guó)際大

13、廠一體機(jī)僅在某些特定場(chǎng)景下有優(yōu)勢(shì)可通過(guò)標(biāo)準(zhǔn)壓縮方案提供2-5倍的壓縮比，通用性比HCC更好沒(méi)有區(qū)別沒(méi)有區(qū)別EMCC龐大復(fù)雜難用， Control/Cloud Manager簡(jiǎn)單實(shí)用，極易上手提供從架構(gòu)設(shè)計(jì)到數(shù)據(jù)遷移等全套服務(wù)，售后響應(yīng)更及時(shí)，國(guó)際大廠幾乎不提供任何數(shù)據(jù)庫(kù)服務(wù)性能壓縮可用性擴(kuò)展性服務(wù)管理價(jià)格國(guó)際大廠一體機(jī)價(jià)格昂貴，切封閉性強(qiáng)?？蛻舭咐秊橛脩舫掷m(xù)提供整體解決方案及服務(wù)支持30數(shù)據(jù)管理平臺(tái)中國(guó)工商銀行深圳工行數(shù)據(jù)管理平臺(tái)一期項(xiàng)目項(xiàng)目背景數(shù)據(jù)管理平臺(tái)是深圳工行內(nèi)部核心系統(tǒng)，用于采集匯聚前置業(yè)務(wù)系統(tǒng)數(shù)據(jù)，進(jìn)行數(shù)據(jù)綜合管理，并為下游業(yè)務(wù)提供接口調(diào)用查詢，中間元數(shù)據(jù)訪問(wèn)服務(wù)。一期初始數(shù)據(jù)量5

14、T，后續(xù)規(guī)模預(yù)計(jì)50-60T，同時(shí)它也承載部分?jǐn)?shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)集市，報(bào)表分析業(yè)務(wù)，是一個(gè)OLTP和OLAP混合業(yè)務(wù)系統(tǒng)。問(wèn)題分行業(yè)務(wù)接口調(diào)用并發(fā)較大，數(shù)據(jù)增長(zhǎng)較快，采用傳統(tǒng)架構(gòu)無(wú)法滿足業(yè)務(wù)對(duì)數(shù)據(jù)庫(kù)的處理能力要求。傳統(tǒng)架構(gòu)x86+集中式存儲(chǔ)（例如，第三方支付系統(tǒng)）在節(jié)日催銷時(shí)數(shù)據(jù)庫(kù)遇到瓶頸，擴(kuò)容靈活性不能滿足業(yè)務(wù)增長(zhǎng)。解決方案QData對(duì)比傳統(tǒng)架構(gòu)有5-10倍以上性能提升，水平擴(kuò)展便捷，可以滿足業(yè)務(wù)性能與空間容量增長(zhǎng)需求。通過(guò)在數(shù)據(jù)管理平臺(tái)實(shí)踐運(yùn)行，為深工行其它系統(tǒng)遷移到QData高性能平臺(tái)探索一條可行之路小型機(jī)+集中存儲(chǔ)X86+集中存儲(chǔ)源數(shù)據(jù)系統(tǒng)核心業(yè)務(wù)系統(tǒng)第三方支付數(shù)據(jù)倉(cāng)庫(kù)ETL工具QData

15、基礎(chǔ)IaaS層QData“2+3”架構(gòu)數(shù)據(jù)集市與報(bào)表分析報(bào)表查詢系統(tǒng)數(shù)據(jù)外報(bào)系統(tǒng)&數(shù)據(jù)表管理業(yè)務(wù)接口層數(shù)據(jù)查詢分析元數(shù)據(jù)中轉(zhuǎn)元數(shù)據(jù)API監(jiān)管報(bào)送接口應(yīng)用查詢下游業(yè)務(wù)系統(tǒng)業(yè)務(wù)系統(tǒng)查詢業(yè)務(wù)系統(tǒng)查詢業(yè)務(wù)系統(tǒng)查詢31舊架構(gòu)新架構(gòu)背 景央視網(wǎng)絡(luò)的融媒體系統(tǒng)平臺(tái)老舊，Exadata性能不足，軟硬件過(guò)保，架構(gòu)需要升級(jí)。問(wèn) 題融媒體系統(tǒng)，承載CCTV網(wǎng)站的全媒體信息，包括新聞、圖片、視頻等的元數(shù)據(jù)信息，性能要求極高，現(xiàn)架構(gòu)為1主2備，冗余度需要進(jìn)一步提升，現(xiàn)有架構(gòu)性能不足，軟硬過(guò)保。方 案將原有數(shù)據(jù)庫(kù)平臺(tái)遷移到沃趣科技QData平臺(tái)，軟硬件通過(guò)統(tǒng)一平臺(tái)維護(hù)管理，將1主2備擴(kuò)展為1主3備，實(shí)現(xiàn)讀寫(xiě)分離，為后續(xù)雙

16、活的實(shí)現(xiàn)做好架構(gòu)準(zhǔn)備。計(jì)算層提供計(jì)算資源安裝oracle RAC軟件網(wǎng)絡(luò)層提供高速互聯(lián)存儲(chǔ)層配備Flash 或SSD提供高速I(mǎi)O資源8GB/秒的吞吐性能60萬(wàn)IOPS性能IO延遲小于1ms高可用冗余架構(gòu)極大降低運(yùn)維成本X86服務(wù)器X86服務(wù)器X86服務(wù)器X86服務(wù)器X86服務(wù)器Infiniband交換機(jī)Infiniband交換機(jī)QData在央視網(wǎng)絡(luò)媒體網(wǎng)站上的應(yīng)用32擴(kuò)展性靈活性易維護(hù)性安全性前瞻性容災(zāi)備份保護(hù)中央國(guó)債登記結(jié)算有限責(zé)任公司（中債）中央國(guó)債登記結(jié)算有限責(zé)任公司（簡(jiǎn)稱“中央結(jié)算公司”）是經(jīng)國(guó)務(wù)院批準(zhǔn)并出資設(shè)立的國(guó)有獨(dú)資中央金融企業(yè)，是承擔(dān)中央登記托管結(jié)算職能的國(guó)家重要金融市場(chǎng)基礎(chǔ)設(shè)

17、施。33華夏銀行核心業(yè)務(wù)“雙活”平臺(tái)高可用測(cè)試時(shí)TPS展現(xiàn)系統(tǒng)拓?fù)浔?景華夏銀行的數(shù)據(jù)倉(cāng)庫(kù)運(yùn)行在Exadata X3-2滿配，支持核心查詢打印系統(tǒng)等查詢報(bào)表系統(tǒng)。核心業(yè)務(wù)系統(tǒng)采用主備模式建設(shè)，存在切換導(dǎo)致的業(yè)務(wù)中斷，難以滿足業(yè)務(wù)的更高要求。困 境數(shù)據(jù)量持續(xù)增加，Exadata X3-2 滿配遇到空間和性能的瓶頸，已經(jīng)無(wú)法擴(kuò)容。數(shù)據(jù)庫(kù)已增長(zhǎng)到130TB，部分場(chǎng)景運(yùn)算速度變慢，性能不能滿足要求。Exadata維保與新一代產(chǎn)品采購(gòu)成本高昂采用沃趣雙活QData，應(yīng)用系統(tǒng)無(wú)需改造的基礎(chǔ)上，建設(shè)一套自主可控的數(shù)據(jù)庫(kù)一體機(jī)系統(tǒng)，提升性能的同時(shí)增加擴(kuò)展性及易管理性。全庫(kù)130TB數(shù)據(jù)遷移到雙活平臺(tái)，實(shí)現(xiàn)了核

18、心查詢打印，數(shù)據(jù)抽取報(bào)表展現(xiàn)，網(wǎng)銀歷史查詢，風(fēng)險(xiǎn)控制等業(yè)務(wù)性能提升10倍以上。收 益1448條業(yè)務(wù)SQL語(yǔ)句性能對(duì)比原環(huán)境Exadata X3-2滿配（7+14）：87%優(yōu)于Exadata9%持平Exadata4%與略低于Exadata金融電子化創(chuàng)新獎(jiǎng)34存儲(chǔ)節(jié)點(diǎn)1存儲(chǔ)節(jié)點(diǎn)2存儲(chǔ)節(jié)點(diǎn)3計(jì)算節(jié)點(diǎn)1計(jì)算節(jié)點(diǎn)2Infiniband交換機(jī)CDP備份保護(hù)節(jié)點(diǎn)QDataQPlusQQLinkQQ背 景吉林省交警總隊(duì)綜合應(yīng)用平臺(tái)系統(tǒng)數(shù)據(jù)庫(kù)始建于2010年，采用當(dāng)時(shí)較為先進(jìn)的IBM 770小型機(jī)和一臺(tái)NCS 7700磁盤(pán)陣列搭建的Oracle 10g RAC數(shù)據(jù)庫(kù)系統(tǒng)，數(shù)據(jù)量已達(dá)25TB。伴隨著移動(dòng)手機(jī)APP

19、的普及，各種自助式交通出行服務(wù)豐富，業(yè)務(wù)壓力和數(shù)據(jù)量已經(jīng)呈現(xiàn)出高速增長(zhǎng)的態(tài)勢(shì)問(wèn) 題現(xiàn)有綜合應(yīng)用平臺(tái)系統(tǒng)數(shù)據(jù)庫(kù)運(yùn)行緩慢，業(yè)務(wù)高峰辦事窗口響應(yīng)緩慢，月度查詢效率較低，嚴(yán)重影響業(yè)務(wù)辦公效率合。主機(jī)、存儲(chǔ)、備份設(shè)備和數(shù)據(jù)庫(kù)運(yùn)維監(jiān)控管理界面獨(dú)立，產(chǎn)品報(bào)警難于及時(shí)追蹤?，F(xiàn)有備份體系的單次全量備份時(shí)間已經(jīng)超過(guò)34小時(shí)，備份時(shí)嚴(yán)重影響業(yè)務(wù)系統(tǒng)性能收 益搭建QData 數(shù)據(jù)庫(kù)高性能平臺(tái)，搭建“六合一”警務(wù)綜合應(yīng)用平臺(tái)，提供10倍以上性能提升，業(yè)務(wù)操作明顯提升，系統(tǒng)穩(wěn)定性增強(qiáng)。通過(guò)QPlus CDP備份平臺(tái)，對(duì)六合一庫(kù)進(jìn)行CDP備份保護(hù)，并且秒級(jí)備份、即時(shí)回溯的數(shù)據(jù)保護(hù)功能。全棧式監(jiān)控體系，通過(guò)一站式可視化運(yùn)維平

20、臺(tái)提供主機(jī)、存儲(chǔ)、網(wǎng)絡(luò)、備份、數(shù)據(jù)庫(kù)等運(yùn)維自動(dòng)化監(jiān)控平臺(tái)，對(duì)異常進(jìn)行準(zhǔn)確定位。吉林省交警核心“六合一”數(shù)據(jù)庫(kù)運(yùn)行平臺(tái)項(xiàng)目吉林省交警綜合應(yīng)用平臺(tái)“六合一”數(shù)據(jù)庫(kù)運(yùn)行平臺(tái)存儲(chǔ)節(jié)點(diǎn)435背 景平安付科技是平安集團(tuán)下屬的從事互聯(lián)網(wǎng)業(yè)務(wù)的企業(yè)，面向互聯(lián)網(wǎng)公眾和平安集團(tuán)的會(huì)員客戶提供壹錢(qián)包支付業(yè)務(wù)和萬(wàn)里通積分業(yè)務(wù)。困 境原萬(wàn)里通CRM系統(tǒng)基于Siebal CRM系統(tǒng)開(kāi)發(fā)，采用HP Superdome和XP高端存儲(chǔ)，在業(yè)務(wù)高峰出現(xiàn)嚴(yán)重IO延時(shí)，影響每秒的交易性能。原萬(wàn)里通CRM系統(tǒng)不滿足用戶的業(yè)務(wù)需求，重新上線新萬(wàn)里通積分，提供更多樣化的業(yè)務(wù)功能，對(duì)平臺(tái)性能也提出了更高要求。收 益2013年采用QData數(shù)

21、據(jù)庫(kù)平臺(tái)承載Siebal CRM數(shù)據(jù)庫(kù)，業(yè)務(wù)承載能力提升3倍，IO延時(shí)降為1毫秒。采用上海和深圳兩地機(jī)房各搭建一套QData數(shù)據(jù)庫(kù)平臺(tái)承載新萬(wàn)里通。容災(zāi)復(fù)制2017年新萬(wàn)里通積分Siebal CRM2013年替換上線Siebal CRM萬(wàn)里通積分容災(zāi)庫(kù)萬(wàn)里通積分深圳觀瀾上海寶山平安付萬(wàn)里通積分交易平臺(tái)36小型機(jī)+集中存儲(chǔ)源系統(tǒng)O,域數(shù)據(jù)庫(kù)CRM、計(jì)費(fèi)部分模塊數(shù)據(jù)集市QData基礎(chǔ)IaaS層QData“8+24”架構(gòu)Oracle 12C 容器數(shù)據(jù)庫(kù)綜合資源傭金結(jié)算綜合結(jié)算QData云管平臺(tái)一站式監(jiān)控自助服務(wù)QoS管理資源隔離彈性伸縮遷移整合IDEP新服開(kāi)服保實(shí)施裝維流量精準(zhǔn)消息推送數(shù)據(jù)集合終端系

22、統(tǒng)短廳甘肅電信三期資源池項(xiàng)目一套8+24，為了滿足超大集群規(guī)模，心跳網(wǎng)絡(luò)獨(dú)立出來(lái)連接到2臺(tái)12端口交換機(jī)數(shù)據(jù)庫(kù)版本使用12C R2版本，通過(guò)QData Cloud實(shí)現(xiàn)PDB的監(jiān)控運(yùn)維通過(guò)統(tǒng)一的運(yùn)維平臺(tái)實(shí)現(xiàn)統(tǒng)一管理結(jié)合業(yè)務(wù)特點(diǎn)對(duì)數(shù)據(jù)進(jìn)行分割引入數(shù)據(jù)生命周期管理設(shè)計(jì)結(jié)合新平臺(tái)特點(diǎn)，引入數(shù)據(jù)QoS設(shè)計(jì)背 景困境收益從2015年ODS項(xiàng)目到2016年的EDW項(xiàng)目，甘肅電信經(jīng)過(guò)兩期項(xiàng)目，對(duì)全X86化分布式架構(gòu)的穩(wěn)定性和高性能有了全面了解三期數(shù)據(jù)庫(kù)資源池項(xiàng)目，把原來(lái)煙囪式分散的O域數(shù)據(jù)庫(kù)和CRM、計(jì)費(fèi)的部分功能模塊整合到數(shù)據(jù)庫(kù)云平臺(tái)上37南京奧體主生產(chǎn)中心私募自營(yíng)兩融經(jīng)紀(jì)溫庫(kù)查詢平臺(tái)生產(chǎn)交易平臺(tái)數(shù)據(jù)邏輯復(fù)

23、制深圳異地容災(zāi)中心兩融經(jīng)紀(jì)私募自營(yíng)溫庫(kù)查詢異地容災(zāi)CRM全帳戶風(fēng)控?cái)?shù)據(jù)抽取數(shù)據(jù)庫(kù)容災(zāi)復(fù)制華泰證券核心交易查詢建設(shè)各類管理分析業(yè)務(wù)對(duì)交易數(shù)據(jù)有較多的需求，數(shù)據(jù)查詢壓力較大，通過(guò)建設(shè)溫庫(kù)卸載查詢壓力。查詢業(yè)務(wù)對(duì)數(shù)據(jù)的實(shí)時(shí)性和響應(yīng)有較高的要求，溫庫(kù)平臺(tái)要具備較高的數(shù)據(jù)復(fù)制性能和查詢性能。高IOPS和吞吐性能的QData數(shù)據(jù)庫(kù)平臺(tái)能提供非常高的事務(wù)異步復(fù)制寫(xiě)入能力，有效地減少數(shù)據(jù)復(fù)制延遲，能提供非常高的數(shù)據(jù)查詢性能，有效地滿足管理分析業(yè)務(wù)的數(shù)據(jù)查詢和流轉(zhuǎn)需求。基于兩地QData數(shù)據(jù)庫(kù)平臺(tái)的DataGuard數(shù)據(jù)復(fù)制容災(zāi)體系，能滿足異地容災(zāi)業(yè)務(wù)的數(shù)據(jù)查詢需要，并保證業(yè)務(wù)持續(xù)性。背 景困 境收 益核心交易

24、系統(tǒng)業(yè)務(wù)數(shù)據(jù)為整個(gè)公司的生產(chǎn)運(yùn)營(yíng)和業(yè)務(wù)分析提供非常重要的數(shù)據(jù)支持。38背 景華泰證券漲樂(lè)財(cái)富通是國(guó)內(nèi)券商行業(yè)功能領(lǐng)先的手機(jī)APP，累計(jì)下載量超3300萬(wàn)。證券等金融資產(chǎn)價(jià)格變化較快，漲樂(lè)財(cái)富通集成全賬戶資產(chǎn)查詢功能向用戶快速推送賬戶中所有資產(chǎn)價(jià)格。問(wèn) 題全賬戶資產(chǎn)系統(tǒng)的原數(shù)據(jù)庫(kù)平臺(tái)基于EMC VMAX集中式存儲(chǔ)建設(shè)，性能難以支持互聯(lián)網(wǎng)的高并發(fā)場(chǎng)景下的資產(chǎn)查詢，資產(chǎn)價(jià)格信息是手工點(diǎn)擊觸發(fā)刷新，影響用戶體驗(yàn)。收 益QData數(shù)據(jù)庫(kù)平臺(tái)能提供非常高數(shù)據(jù)庫(kù)查詢性能，上線替換原平臺(tái)后，資產(chǎn)價(jià)格信息改成是5秒自動(dòng)刷新，提升用戶體驗(yàn)。QData數(shù)據(jù)庫(kù)平臺(tái)良好地支撐業(yè)務(wù)需求，custom1/2雙實(shí)例峰值壓力6

25、0000IOPS，每秒15000筆查詢SQL。高峰業(yè)務(wù)時(shí)間段1.2億次樂(lè)友資產(chǎn)刷新。平臺(tái)建設(shè)成本與EMC VMAX存儲(chǔ)平臺(tái)接近，業(yè)務(wù)性a能提升數(shù)十倍。 1500萬(wàn)漲樂(lè)樂(lè)友華泰證券漲樂(lè)財(cái)富通高頻交易查詢39QData云管平臺(tái)一站式監(jiān)控多租戶支持自助服務(wù)QoS管理彈性伸縮全生命周期管理專家系統(tǒng)資源隔離BPM團(tuán)險(xiǎn)核心短信平臺(tái).壽險(xiǎn)E行銷責(zé)任準(zhǔn)備金系統(tǒng)稅控系統(tǒng)QData基礎(chǔ)IaaS層QDATA “5 + 3”架構(gòu)計(jì)算資源池存儲(chǔ)資源池網(wǎng)絡(luò)資源池問(wèn) 題前海人壽主要業(yè)務(wù)系統(tǒng)運(yùn)行在傳統(tǒng)的IOE架構(gòu)數(shù)據(jù)庫(kù)平臺(tái)上，面對(duì)保險(xiǎn)用戶成倍增長(zhǎng)、新業(yè)務(wù)不斷增加，傳統(tǒng)架構(gòu)的不足逐漸凸顯，系統(tǒng)性能存在IO瓶頸，擴(kuò)展性能較差。方

26、 案20152015年搭建”2+3”的QData，完成了責(zé)任準(zhǔn)備金系統(tǒng)等7套系統(tǒng)的遷移改造，新數(shù)據(jù)庫(kù)平臺(tái)上線后業(yè)務(wù)承載能力提升明顯，各項(xiàng)業(yè)務(wù)執(zhí)行效率提升510倍。2016年擴(kuò)容一套”5+3”的QData，構(gòu)建了BPM系統(tǒng)、壽險(xiǎn)E行銷等9套系統(tǒng)的遷移改造。實(shí)現(xiàn)多系統(tǒng)、多數(shù)據(jù)庫(kù)，多存儲(chǔ)池化資源整合。功耗從原來(lái)的12KW降低到7KW，系統(tǒng)提升8倍以上。并且通過(guò)統(tǒng)一的云管理可視化平臺(tái)對(duì)多套數(shù)據(jù)庫(kù)資源進(jìn)行統(tǒng)一監(jiān)控管理，實(shí)現(xiàn)敏捷運(yùn)維。方 案2016前海人壽QData數(shù)據(jù)庫(kù)資源池40集約化數(shù)據(jù)運(yùn)營(yíng)平臺(tái)IDAP系統(tǒng)背景IDAP系統(tǒng)主要向電信內(nèi)部銷售經(jīng)理，客戶經(jīng)理提供各項(xiàng)經(jīng)營(yíng)分析。各區(qū)局按照行政區(qū)劃自行建設(shè)本單

27、位IDAP系統(tǒng)，多采用小型機(jī)架構(gòu)建設(shè)。困境各區(qū)局業(yè)務(wù)數(shù)據(jù)分布離散，數(shù)據(jù)訪問(wèn)不受限制，安全性存在隱患。各個(gè)區(qū)局獨(dú)立建設(shè)，資源不能統(tǒng)籌利用，部分區(qū)局平臺(tái)性能不足。存在重復(fù)投資，設(shè)備數(shù)量多，運(yùn)維難度大，維保費(fèi)用昂貴。收益基于QData建設(shè)新的IDAP平臺(tái)，提供70萬(wàn) IOPS和9GB/s IO吞吐量的平臺(tái)性能，完整接納14個(gè)區(qū)局及5個(gè)部門(mén)的上收數(shù)據(jù)，整合所有數(shù)據(jù)平臺(tái)。梳理業(yè)務(wù)表，確定時(shí)間分區(qū)鍵，按照范圍進(jìn)行分區(qū)，采用SSD和SAS盤(pán)的混合存儲(chǔ)介質(zhì)，存儲(chǔ)冷熱數(shù)據(jù)。良好的水平擴(kuò)展功能，經(jīng)歷多次節(jié)點(diǎn)擴(kuò)容，與業(yè)務(wù)數(shù)據(jù)的增長(zhǎng)和功能需求的增加良好匹配。一期初建二期擴(kuò)容14個(gè)區(qū)局及5個(gè)部門(mén)的數(shù)據(jù)庫(kù)41寧波公安輿情網(wǎng)警系統(tǒng)背景輿情網(wǎng)警信息系統(tǒng)，用于實(shí)時(shí)存放網(wǎng)絡(luò)輿情信息，通過(guò)智能BI分析數(shù)據(jù)，與公安身份證系統(tǒng)進(jìn)行關(guān)聯(lián)，進(jìn)行輿情信息追蹤。系統(tǒng)建設(shè)經(jīng)歷單臺(tái)小型機(jī)和MPP架構(gòu)的多次體系架構(gòu)驗(yàn)證。困境網(wǎng)警業(yè)務(wù)的數(shù)據(jù)量大和實(shí)時(shí)性要求高，有著批量數(shù)據(jù)加載與實(shí)時(shí)信息查