數(shù)據(jù)管理知識體系.ppt

1、數(shù)據(jù)管理知識體系,數(shù)據(jù)管理的演進(jìn),2,風(fēng)險回報： 風(fēng)險非常高，因?yàn)閿?shù)據(jù)問題會導(dǎo)致客戶流失（因?yàn)殄e誤理解客戶價值）或不合理的業(yè)務(wù)流程；雖然沒有制定相關(guān)的流程來分析孰是孰非，但還是有一些人成為替罪羊，從而受到指責(zé)；回報低，除了個別員工或部門獲得成功之外，企業(yè)幾乎沒有從數(shù)據(jù)管理中獲得任何收益,風(fēng)險回報： 風(fēng)險高，缺少數(shù)據(jù)整合，整個公司范圍內(nèi)數(shù)據(jù)的整體準(zhǔn)確性不佳；偶爾會進(jìn)行數(shù)據(jù)分析和更正，但涉及跨職能時仍然會發(fā)生一些數(shù)據(jù)錯誤； 回報有限，大多數(shù)都不確切；多數(shù)投資回報都是通過個體流程或員工個體取得的；公司層面幾乎沒有意識到數(shù)據(jù)管理的好處,風(fēng)險回報： 風(fēng)險中等到較低；通過提供更優(yōu)信息提高了決策的可靠性，從

2、而降低了風(fēng)險；回報中等到高；數(shù)據(jù)質(zhì)量的改進(jìn)通常只局限于某個職能領(lǐng)域，然后隨著更多員工加入其中，質(zhì)量改進(jìn)會拓展到更寬泛的領(lǐng)域,風(fēng)險回報： 風(fēng)險低；數(shù)據(jù)完全統(tǒng)一，并被嚴(yán)格控制，幫助企業(yè)維護(hù)有關(guān)客戶、前景、庫存、產(chǎn)品的高質(zhì)量信息；回報高；在全公司范圍內(nèi)執(zhí)行數(shù)據(jù)管理，有助于更好地理解企業(yè)當(dāng)前的業(yè)務(wù)概況，幫助管理層提高在根據(jù)數(shù)據(jù)做決策時的信心,當(dāng)前保險企業(yè)普遍存在不少數(shù)據(jù)的問題，如：數(shù)據(jù)來源不唯一、數(shù)據(jù)共享性差、數(shù)據(jù)準(zhǔn)確度低、指標(biāo)口徑不統(tǒng)一等.,國內(nèi)保險企業(yè)數(shù)據(jù)管理現(xiàn)狀分析-現(xiàn)狀,新一代數(shù)據(jù)中心-目標(biāo),4,新一代數(shù)據(jù)中心定義 新一代數(shù)據(jù)中心是基于標(biāo)準(zhǔn)構(gòu)建模塊，通過模塊化軟件實(shí)現(xiàn)自動化724H無人值守計算

3、與管理，并以供應(yīng)鏈方式提供共享的基礎(chǔ)設(shè)施、信息與應(yīng)用等IT服務(wù) 新一代數(shù)據(jù)中心特征 1：模塊化的標(biāo)注基礎(chǔ)設(shè)施 2：虛擬化資源與環(huán)境 3：自動化管理 4：快速的可擴(kuò)展能力 5：節(jié)能及節(jié)省空間 6：高IT資源利用率 7：高可靠性和低冗余 8：面向服務(wù)的計算平臺,數(shù)據(jù)倉庫設(shè)計-The Basic Structure of the CIF,5,External world,ERP,Internet,Enterprise transactions,Data acquisition,Reference Data,Applications,ERP(tx),Integration/ transformatio

4、n layer,ODS,Primary storage management,Historical Reference Data,Alternative storage,Data worehouse,Data delivery,Exploration warehouse,Data mining warehouse,Statistical Analysis,eComm,CRM,ERP(rpt),Bus Int,DSS applications,finance,sales,Marketing,Accounting,Data marts,Raw detailed data,External data

5、,Operational reports,數(shù)據(jù)倉庫設(shè)計-CIF&MD體系結(jié)構(gòu)比較,6,CIF體系結(jié)構(gòu),MD體系結(jié)構(gòu),準(zhǔn)備數(shù)據(jù)倉（ODS）,DW,DM,DM,DM,。E/R模型 。主題域 。事務(wù)級細(xì)節(jié) 。斜線以上限制終端 用戶存取,。多維設(shè)計和其他設(shè)計 。根據(jù)業(yè)務(wù)功能的數(shù)據(jù)集市設(shè)計 。匯總與細(xì)節(jié)級數(shù)據(jù) 。在一個數(shù)據(jù)庫實(shí)例中可能有多個數(shù)據(jù)集市,準(zhǔn)備數(shù)據(jù)區(qū),數(shù)據(jù)倉庫總線,原子DM,原子DM,聚集DM,聚集DM,個人DM,。多維的 。事務(wù)和匯總數(shù)據(jù) 。數(shù)據(jù)集市單主題域（即事實(shí)表） 。在一個數(shù)據(jù)庫實(shí)例中可能有多個數(shù)據(jù)集市,。E/R設(shè)計或平面文件 。斜線以上禁止終端 用戶存取,用戶存取事務(wù),數(shù)據(jù)的生命周期

6、如何映射到DW&其他系統(tǒng),7,映射,數(shù)據(jù)標(biāo)準(zhǔn)-標(biāo)準(zhǔn)規(guī)范的應(yīng)用&建設(shè),8,數(shù)據(jù)管理-數(shù)據(jù)模型,9,模型設(shè)計階段,模型建設(shè)方法,維度建模法,范式建模法,數(shù)據(jù)倉庫,實(shí)體建模法,實(shí)體,事件,實(shí)體,說明,數(shù)據(jù)管理-ESB企業(yè)數(shù)據(jù)服務(wù)總線,10,S O A 基本結(jié)構(gòu),S O A 服務(wù)協(xié)作,服務(wù)描述,服務(wù)描述,服務(wù),發(fā)現(xiàn),發(fā)布,綁定、調(diào)用,企業(yè)數(shù)據(jù)服務(wù)總線,服務(wù) 管理,其他 服務(wù),協(xié)作 服務(wù),應(yīng)用 服務(wù),訪問 服務(wù),表示 服務(wù),流程 服務(wù),信息 服務(wù),公共 服務(wù),數(shù)據(jù)管理-數(shù)據(jù)交換平臺功能架構(gòu),11,數(shù)據(jù)交換服務(wù)1,應(yīng)用功能,數(shù)據(jù)交換服務(wù)2,數(shù)據(jù)交換服務(wù)3,數(shù)據(jù)交換服務(wù)4,數(shù)據(jù)交換服務(wù),企業(yè)數(shù)據(jù)服務(wù)總線,元

7、數(shù)據(jù)管理,安全管理,平臺監(jiān)控,數(shù)據(jù)采集,數(shù)據(jù)采集任務(wù)調(diào)度,數(shù)據(jù)復(fù)制,ETL工具,全量復(fù)制,增量復(fù)制,全量抽取,增量抽取,數(shù)據(jù)清洗,數(shù)據(jù)轉(zhuǎn)換,數(shù)據(jù)裝載,數(shù)據(jù)存儲,專用數(shù)據(jù)采集接口,數(shù)據(jù)管理-數(shù)據(jù)交換（縱向&橫向）,12,一級數(shù)據(jù)交換平臺,一級業(yè)務(wù)系統(tǒng),一級業(yè)務(wù)系統(tǒng),二級業(yè)務(wù)系統(tǒng),二級業(yè)務(wù)系統(tǒng),二級數(shù)據(jù)交換平臺,三級業(yè)務(wù)系統(tǒng),三級業(yè)務(wù)系統(tǒng),三級數(shù)據(jù)交換平臺,一級ODS/DW,二級ODS/DW,橫向交換,橫向交換,橫向交換,縱 向 交 換,數(shù)據(jù)管理-元數(shù)據(jù)管理框架,13,元數(shù)據(jù)管理平臺,系統(tǒng)管理,數(shù)據(jù)規(guī)則管理,變化管理,業(yè)務(wù)邏輯管理,數(shù)據(jù)展現(xiàn)管理,外部數(shù)據(jù),靈活查詢,多維分析,報表,數(shù)據(jù)挖掘,數(shù)據(jù)利

8、用,業(yè)務(wù)數(shù)據(jù)庫,業(yè)務(wù)數(shù)據(jù)庫,ODS,EDW,DM,數(shù)據(jù)管理-數(shù)據(jù)挖掘,14,原始數(shù)據(jù),數(shù)據(jù) 集,目標(biāo)數(shù)據(jù),預(yù)處理數(shù)據(jù),模 式,知 識,發(fā)現(xiàn),集成,選擇,預(yù)處理,數(shù)據(jù)挖掘,解釋評價,運(yùn)用,數(shù)據(jù)準(zhǔn)備階段,數(shù)據(jù)挖掘階段,分析評價階段,基本步驟,挖掘類型,挖掘算法,數(shù)據(jù)管理實(shí)施規(guī)劃,數(shù)據(jù)管理實(shí)施規(guī)劃,人/流程/策略/規(guī)劃,建立 元數(shù)據(jù)管理機(jī)制,建立 企業(yè)數(shù)據(jù)標(biāo)準(zhǔn),IT技術(shù)/系統(tǒng),E-p平臺數(shù)據(jù)服務(wù),建立企業(yè)數(shù)據(jù)交換平臺,建立企業(yè)數(shù)據(jù)模型,建立企業(yè)數(shù)據(jù)架構(gòu),設(shè)計一體化數(shù)據(jù)服務(wù)架構(gòu),建立決策支持系統(tǒng),優(yōu)化整合企業(yè)數(shù)據(jù)模型,建立銷售管理系統(tǒng),建立數(shù)據(jù)挖掘系統(tǒng),建立數(shù)據(jù)分析平臺,建立元數(shù)據(jù)管理平臺,建立元數(shù)據(jù)質(zhì)量管理平臺,建立文檔、內(nèi)容管理平臺,建立數(shù)據(jù)安全管理機(jī)制,建立數(shù)據(jù)災(zāi)難備份系統(tǒng),建立ECIF系統(tǒng),建立ACRM系統(tǒng),建立OCRM系統(tǒng),GBUTtem,17,* 資料來源：,新一代數(shù)據(jù)中