大數(shù)據(jù)服務(wù)平臺(tái)

大數(shù)據(jù)服務(wù)平臺(tái)目錄CONTENTS服務(wù)平臺(tái)架構(gòu)數(shù)據(jù)采集治理大數(shù)據(jù)分析大數(shù)據(jù)可視化經(jīng)典案例服務(wù)平臺(tái)架構(gòu)01應(yīng)用應(yīng)用一開發(fā)生態(tài)征詢服務(wù)服務(wù)數(shù)據(jù)湖泊分子數(shù)據(jù)原子數(shù)據(jù)分布式數(shù)據(jù)平臺(tái)產(chǎn)品共享中心治理中心開發(fā)中心……顧客數(shù)據(jù)過程數(shù)據(jù)評(píng)價(jià)數(shù)據(jù)……顧客門戶流程中心規(guī)則中心……能力開放平臺(tái)服務(wù)框架消息隊(duì)列緩存服務(wù)事務(wù)離線計(jì)算流計(jì)算實(shí)時(shí)計(jì)算搜索計(jì)算存儲(chǔ)網(wǎng)絡(luò)數(shù)據(jù)庫安全應(yīng)用二應(yīng)用三應(yīng)用四應(yīng)用五應(yīng)用六大數(shù)據(jù)平臺(tái)服務(wù)架構(gòu)數(shù)據(jù)治理人工智能數(shù)據(jù)洞察流計(jì)算可視化大數(shù)據(jù)平臺(tái)層數(shù)據(jù)存儲(chǔ)計(jì)算網(wǎng)絡(luò)爬蟲數(shù)據(jù)發(fā)現(xiàn)規(guī)則解析器融合數(shù)據(jù)批量采集實(shí)時(shí)采集實(shí)時(shí)消息數(shù)據(jù)地圖數(shù)據(jù)共享數(shù)據(jù)質(zhì)量數(shù)據(jù)原則批處理查詢非構(gòu)造化列式數(shù)據(jù)庫分布式文獻(xiàn)系統(tǒng)資源管理交互式查詢分布式計(jì)算內(nèi)存計(jì)算全文搜索數(shù)據(jù)挖掘機(jī)器學(xué)習(xí)算法庫模型庫數(shù)據(jù)探索記錄分析敏捷BIOLAP實(shí)時(shí)分析實(shí)時(shí)數(shù)據(jù)庫流數(shù)據(jù)處理數(shù)據(jù)流規(guī)則數(shù)據(jù)看板移動(dòng)/微應(yīng)用實(shí)時(shí)大屏關(guān)聯(lián)分析大數(shù)據(jù)服務(wù)功能模塊數(shù)據(jù)源（管理、交易、事務(wù)、傳感、監(jiān)控、文獻(xiàn)……）數(shù)據(jù)獲取和治理大數(shù)據(jù)存儲(chǔ)大數(shù)據(jù)分析計(jì)算處理大數(shù)據(jù)可視化數(shù)據(jù)驅(qū)動(dòng)決策數(shù)據(jù)提供服務(wù)大數(shù)據(jù)服務(wù)處理流程數(shù)據(jù)采集治理02大數(shù)據(jù)平臺(tái)層大數(shù)據(jù)交換匯集平臺(tái)融合數(shù)據(jù)網(wǎng)絡(luò)爬蟲共享服務(wù)大數(shù)據(jù)基礎(chǔ)平臺(tái)數(shù)據(jù)治理存儲(chǔ)計(jì)算搜索引擎運(yùn)維管理大數(shù)據(jù)可視化平臺(tái)可視化設(shè)計(jì)關(guān)聯(lián)分析根因分析大數(shù)據(jù)智能分析平臺(tái)人工智能數(shù)據(jù)洞察流計(jì)算數(shù)據(jù)采集及治理原始數(shù)據(jù)源數(shù)據(jù)采集互換區(qū)數(shù)據(jù)湖全種類數(shù)據(jù)采集滿足大數(shù)據(jù)應(yīng)用多種場景需求多種技術(shù)手段，平臺(tái)化系統(tǒng)，迅速布署，統(tǒng)一管理支持全兼容巨量數(shù)據(jù)混合架構(gòu)存儲(chǔ)原始構(gòu)造數(shù)據(jù)文獻(xiàn)數(shù)據(jù)流式數(shù)據(jù)互聯(lián)網(wǎng)數(shù)據(jù)數(shù)據(jù)采集互換及存儲(chǔ)數(shù)據(jù)治理戰(zhàn)略業(yè)務(wù)、政策規(guī)則、標(biāo)準(zhǔn)組織、角色質(zhì)量、安全數(shù)據(jù)架構(gòu)管理企業(yè)數(shù)據(jù)模型數(shù)據(jù)關(guān)聯(lián)關(guān)系價(jià)值鏈分析數(shù)據(jù)處理架構(gòu)數(shù)據(jù)質(zhì)量管理規(guī)范分析度量改進(jìn)數(shù)據(jù)開發(fā)分析建模設(shè)計(jì)實(shí)施數(shù)據(jù)操作管理獲取恢復(fù)調(diào)優(yōu)保留清除數(shù)據(jù)安全管理標(biāo)準(zhǔn)分級(jí)管理授權(quán)審計(jì)參考數(shù)據(jù)與主數(shù)據(jù)管理外部規(guī)范內(nèi)部規(guī)范對(duì)象數(shù)據(jù)環(huán)境數(shù)據(jù)維度管理數(shù)據(jù)倉庫和BI管理架構(gòu)實(shí)施培訓(xùn)與支持監(jiān)控與調(diào)優(yōu)文檔和內(nèi)容管理獲取和存儲(chǔ)備份、恢復(fù)內(nèi)容管理檢索保留元數(shù)據(jù)管理架構(gòu)整合控制交付以數(shù)據(jù)治理為關(guān)鍵旳數(shù)據(jù)資產(chǎn)管理體系數(shù)據(jù)比對(duì)規(guī)則行業(yè)規(guī)則數(shù)據(jù)/元數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)關(guān)系管理數(shù)據(jù)清洗比對(duì)參照規(guī)則多源數(shù)據(jù)中心前置緩存自動(dòng)/人工比對(duì)反向清洗數(shù)據(jù)中心資源維護(hù)階段數(shù)據(jù)中心中心資源治理階段數(shù)據(jù)整合階段數(shù)據(jù)字典數(shù)據(jù)依標(biāo)準(zhǔn)的格式轉(zhuǎn)換數(shù)據(jù)采集數(shù)據(jù)傳輸數(shù)據(jù)標(biāo)準(zhǔn)管理數(shù)據(jù)質(zhì)量管理數(shù)據(jù)資產(chǎn)管理規(guī)則定義與管理大數(shù)據(jù)治理化繁為簡大數(shù)據(jù)治理特色可視化智能建模設(shè)計(jì)數(shù)據(jù)融合可視化分析主數(shù)據(jù)整合、清洗敏感數(shù)據(jù)自動(dòng)識(shí)別、保護(hù)開放服務(wù)數(shù)據(jù)共享規(guī)范、統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)體系建設(shè)自動(dòng)化元數(shù)據(jù)采集多粒度元數(shù)據(jù)分析靈活的檢核規(guī)則配置規(guī)范的質(zhì)量管理流程大數(shù)據(jù)分析03人工智能數(shù)據(jù)洞察流式計(jì)算大數(shù)據(jù)分析建模數(shù)據(jù)挖掘?qū)傩院Y選分類預(yù)測回歸預(yù)測聚類分析關(guān)聯(lián)分析時(shí)間序列屬性篩選屬性重要性打分基于信息增益的屬性打分主成分分析決策樹分類回歸樹神經(jīng)網(wǎng)絡(luò)分類支撐向量機(jī)分類分類組合模型多元線性回歸神經(jīng)網(wǎng)絡(luò)回歸支撐向量機(jī)回歸回歸組合模型K均值聚類分布估計(jì)聚類基于K均值的層次聚類購物籃分析屬性關(guān)聯(lián)分析序列模式分析ARX時(shí)間序列ARMA時(shí)間序列基于卡方檢驗(yàn)的屬性篩選樸素貝葉斯貝葉斯網(wǎng)絡(luò)邏輯回歸廣義線性回歸兩階段聚類統(tǒng)計(jì)分析描述性統(tǒng)計(jì)數(shù)據(jù)探測異常檢測層次聚類方差分析歸納分析列聯(lián)表相關(guān)分析分布估計(jì)函數(shù)擬合因子分析單因子方差分析雙因子方差分析樣本層次聚類屬性層次聚類K-sigma異常檢測線箱圖異常檢測離散化大數(shù)據(jù)分析算法大數(shù)據(jù)分析算法支撐大數(shù)據(jù)洞察分析大數(shù)據(jù)人工智能大數(shù)據(jù)可視化04我旳報(bào)表數(shù)據(jù)建模RDBMS組件庫Excel/CVS實(shí)時(shí)數(shù)據(jù)其他數(shù)據(jù)源實(shí)時(shí)分析數(shù)據(jù)適配接口實(shí)時(shí)計(jì)算多維分析（OLAP）數(shù)據(jù)存儲(chǔ)安全管理可視化編排自助式分析事件引擎自助式分析GIS引擎運(yùn)行引擎工程化管理主題/布局管理數(shù)據(jù)源及建?；A(chǔ)管理資源管理可視化設(shè)計(jì)數(shù)據(jù)分析引擎數(shù)據(jù)看板交互式可視化WEB界面高級(jí)數(shù)據(jù)可視可視化應(yīng)用數(shù)據(jù)可視化應(yīng)用搭建過程大數(shù)據(jù)可視化服務(wù)架構(gòu)HBaseHDFS數(shù)據(jù)存儲(chǔ)ZookeeperYarn（分布式資源管理）Elasticsearch分布式數(shù)據(jù)存儲(chǔ)融合數(shù)據(jù)（ETL）實(shí)時(shí)采集批量采集校驗(yàn)與清洗TableauQlikView

可視化系列…

InsightMiner數(shù)據(jù)分析系列智能分析平臺(tái)SAS、SPSS

RapidMiner分布式緩存層（Alluxio、Redis）數(shù)據(jù)共享(Publication)數(shù)據(jù)運(yùn)維(Console)自動(dòng)化部署集群配置監(jiān)控管理告警管理性能管理安全管理租戶管理備份管理分布式計(jì)算引擎批處理MapReduce內(nèi)存計(jì)算Spark流處理StormHive、SparkSQL、Phoenix、Impala、HAWQ、presto、SparkStreaming、Kylin存儲(chǔ)設(shè)計(jì)數(shù)據(jù)計(jì)算數(shù)據(jù)治理XE