移動(dòng)省級(jí)經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量管理系統(tǒng)業(yè)務(wù)技術(shù)規(guī)范標(biāo)準(zhǔn)

1、WORD.59/67WORD.中國(guó)移動(dòng)通信企業(yè)標(biāo)準(zhǔn)QB-J-XXX-2007中國(guó)移動(dòng)省級(jí)經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量管理系統(tǒng)業(yè)務(wù)技術(shù)規(guī)范（征求意見(jiàn)稿）版本號(hào)：2.0The Business and Technical Specification on Data Quality Management System in Business Analysis Support SystemV2.02007-05實(shí)施2007-05發(fā)布中國(guó)移動(dòng)通信 發(fā)布目錄TOC o 1-7 h z uHYPERLINK l _Toc1641409211.圍 PAGEREF _Toc164140921 h 1HYPERLINK

2、l _Toc1641409222.引用標(biāo)準(zhǔn) PAGEREF _Toc164140922 h 1HYPERLINK l _Toc1641409233.術(shù)語(yǔ)和定義 PAGEREF _Toc164140923 h 1HYPERLINK l _Toc1641409244.符號(hào)和縮略語(yǔ) PAGEREF _Toc164140924 h 2HYPERLINK l _Toc1641409255.概述 PAGEREF _Toc164140925 h 2HYPERLINK l _Toc1641409266.總體說(shuō)明 PAGEREF _Toc164140926 h 2HYPERLINK l _Toc16414092

3、76.1數(shù)據(jù)質(zhì)量管理概述 PAGEREF _Toc164140927 h 2HYPERLINK l _Toc1641409286.2主要容 PAGEREF _Toc164140928 h 3HYPERLINK l _Toc1641409296.3系統(tǒng)建設(shè)目標(biāo) PAGEREF _Toc164140929 h 3HYPERLINK l _Toc1641409306.4實(shí)施建議 PAGEREF _Toc164140930 h 4HYPERLINK l _Toc1641409317.數(shù)據(jù)質(zhì)量管理需求 PAGEREF _Toc164140931 h 4HYPERLINK l _Toc1641409327

4、.1數(shù)據(jù)質(zhì)量問(wèn)題 PAGEREF _Toc164140932 h 4HYPERLINK l _Toc1641409337.1.1信息問(wèn)題域 PAGEREF _Toc164140933 h 5HYPERLINK l _Toc1641409347.1.2技術(shù)問(wèn)題域 PAGEREF _Toc164140934 h 6HYPERLINK l _Toc1641409357.1.3流程問(wèn)題域 PAGEREF _Toc164140935 h 7HYPERLINK l _Toc1641409367.1.4管理問(wèn)題域 PAGEREF _Toc164140936 h 8HYPERLINK l _Toc164140

5、9377.2系統(tǒng)功能需求 PAGEREF _Toc164140937 h 8HYPERLINK l _Toc1641409387.2.1元數(shù)據(jù)管理 PAGEREF _Toc164140938 h 9HYPERLINK l _Toc1641409397.2.2數(shù)據(jù)質(zhì)量監(jiān)控 PAGEREF _Toc164140939 h 9HYPERLINK l _Toc1641409407.2.3項(xiàng)目管理支撐 PAGEREF _Toc164140940 h 9HYPERLINK l _Toc1641409418.系統(tǒng)架構(gòu) PAGEREF _Toc164140941 h 9HYPERLINK l _Toc1641

6、409428.1系統(tǒng)體系 PAGEREF _Toc164140942 h 9HYPERLINK l _Toc1641409438.2源系統(tǒng)層 PAGEREF _Toc164140943 h 10HYPERLINK l _Toc1641409448.2.1經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)處理流程 PAGEREF _Toc164140944 h 10HYPERLINK l _Toc1641409458.2.2數(shù)據(jù)質(zhì)量監(jiān)控點(diǎn) PAGEREF _Toc164140945 h 10HYPERLINK l _Toc1641409468.3存儲(chǔ)層 PAGEREF _Toc164140946 h 11HYPERLINK l

7、_Toc1641409478.3.1元數(shù)據(jù)存儲(chǔ) PAGEREF _Toc164140947 h 11HYPERLINK l _Toc1641409488.3.1.1業(yè)務(wù)元數(shù)據(jù) PAGEREF _Toc164140948 h 11HYPERLINK l _Toc1641409498.3.1.1.1業(yè)務(wù)術(shù)語(yǔ) PAGEREF _Toc164140949 h 11HYPERLINK l _Toc1641409508.3.1.1.2業(yè)務(wù)描述 PAGEREF _Toc164140950 h 11HYPERLINK l _Toc1641409518.3.1.1.3業(yè)務(wù)指標(biāo) PAGEREF _Toc16414

8、0951 h 11HYPERLINK l _Toc1641409528.3.1.1.4業(yè)務(wù)規(guī)則 PAGEREF _Toc164140952 h 12HYPERLINK l _Toc1641409538.3.1.2技術(shù)元數(shù)據(jù) PAGEREF _Toc164140953 h 12HYPERLINK l _Toc1641409548.3.1.2.1數(shù)據(jù)源接口 PAGEREF _Toc164140954 h 12HYPERLINK l _Toc1641409558.3.1.2.2ETL過(guò)程 PAGEREF _Toc164140955 h 12HYPERLINK l _Toc1641409568.3.1

9、.2.3數(shù)據(jù)倉(cāng)庫(kù)和數(shù)據(jù)集市存儲(chǔ) PAGEREF _Toc164140956 h 13HYPERLINK l _Toc1641409578.3.1.2.4分析應(yīng)用 PAGEREF _Toc164140957 h 13HYPERLINK l _Toc1641409588.3.1.2.5運(yùn)行環(huán)境信息 PAGEREF _Toc164140958 h 14HYPERLINK l _Toc1641409598.3.1.2.6質(zhì)量管理過(guò)程 PAGEREF _Toc164140959 h 14HYPERLINK l _Toc1641409608.3.1.3管理元數(shù)據(jù) PAGEREF _Toc164140960

10、 h 15HYPERLINK l _Toc1641409618.3.2運(yùn)行狀態(tài)信息存儲(chǔ) PAGEREF _Toc164140961 h 16HYPERLINK l _Toc1641409628.3.3質(zhì)量管理知識(shí)存儲(chǔ) PAGEREF _Toc164140962 h 16HYPERLINK l _Toc1641409638.4功能層 PAGEREF _Toc164140963 h 16HYPERLINK l _Toc1641409648.4.1元數(shù)據(jù)管理 PAGEREF _Toc164140964 h 16HYPERLINK l _Toc1641409658.4.1.1元數(shù)據(jù)維護(hù) PAGEREF

11、 _Toc164140965 h 17HYPERLINK l _Toc1641409668.4.1.2元數(shù)據(jù)導(dǎo)入/導(dǎo)出 PAGEREF _Toc164140966 h 17HYPERLINK l _Toc1641409678.4.1.3同步檢查 PAGEREF _Toc164140967 h 18HYPERLINK l _Toc1641409688.4.1.4實(shí)體查詢(xún) PAGEREF _Toc164140968 h 19HYPERLINK l _Toc1641409698.4.1.5過(guò)程查詢(xún) PAGEREF _Toc164140969 h 19HYPERLINK l _Toc164140970

12、8.4.1.6影響分析 PAGEREF _Toc164140970 h 19HYPERLINK l _Toc1641409718.4.1.7血統(tǒng)分析 PAGEREF _Toc164140971 h 20HYPERLINK l _Toc1641409728.4.1.8實(shí)體關(guān)聯(lián)度分析 PAGEREF _Toc164140972 h 20HYPERLINK l _Toc1641409738.4.1.9實(shí)體差異分析 PAGEREF _Toc164140973 h 20HYPERLINK l _Toc1641409748.4.1.10版本管理 PAGEREF _Toc164140974 h 20HYPE

13、RLINK l _Toc1641409758.4.1.11變更通知 PAGEREF _Toc164140975 h 21HYPERLINK l _Toc1641409768.4.2質(zhì)量監(jiān)控支撐功能 PAGEREF _Toc164140976 h 21HYPERLINK l _Toc1641409778.4.3知識(shí)庫(kù)管理 PAGEREF _Toc164140977 h 21HYPERLINK l _Toc1641409788.4.3.1.1知識(shí)積累和維護(hù) PAGEREF _Toc164140978 h 21HYPERLINK l _Toc1641409798.4.3.1.2知識(shí)使用 PAGERE

14、F _Toc164140979 h 21HYPERLINK l _Toc1641409808.4.4系統(tǒng)管理 PAGEREF _Toc164140980 h 21HYPERLINK l _Toc1641409818.5應(yīng)用層 PAGEREF _Toc164140981 h 21HYPERLINK l _Toc1641409828.5.1數(shù)據(jù)質(zhì)量監(jiān)控 PAGEREF _Toc164140982 h 21HYPERLINK l _Toc1641409838.5.2信息地圖 PAGEREF _Toc164140983 h 22HYPERLINK l _Toc1641409848.5.3需求變更影響評(píng)

15、估 PAGEREF _Toc164140984 h 22HYPERLINK l _Toc1641409858.5.4數(shù)據(jù)集市支撐 PAGEREF _Toc164140985 h 24HYPERLINK l _Toc1641409868.5.5項(xiàng)目管理支撐 PAGEREF _Toc164140986 h 24HYPERLINK l _Toc1641409878.5.5.1工作分配管理 PAGEREF _Toc164140987 h 24HYPERLINK l _Toc1641409888.5.5.2系統(tǒng)使用狀況分析 PAGEREF _Toc164140988 h 24HYPERLINK l _T

16、oc1641409898.5.5.3項(xiàng)目需求管理 PAGEREF _Toc164140989 h 24HYPERLINK l _Toc1641409908.5.5.4項(xiàng)目組織架構(gòu)管理 PAGEREF _Toc164140990 h 25HYPERLINK l _Toc1641409919.數(shù)據(jù)質(zhì)量監(jiān)控模塊 PAGEREF _Toc164140991 h 25HYPERLINK l _Toc1641409929.1概述 PAGEREF _Toc164140992 h 25HYPERLINK l _Toc1641409939.2數(shù)據(jù)質(zhì)量監(jiān)控模塊的目標(biāo) PAGEREF _Toc164140993 h

17、 25HYPERLINK l _Toc1641409949.3數(shù)據(jù)質(zhì)量監(jiān)控模塊功能要求 PAGEREF _Toc164140994 h 25HYPERLINK l _Toc1641409959.3.1數(shù)據(jù)質(zhì)量監(jiān)控流程 PAGEREF _Toc164140995 h 25HYPERLINK l _Toc1641409969.3.2采集 PAGEREF _Toc164140996 h 26HYPERLINK l _Toc1641409979.3.2.1指導(dǎo)原則 PAGEREF _Toc164140997 h 26HYPERLINK l _Toc1641409989.3.2.2信息采集 PAGERE

18、F _Toc164140998 h 26HYPERLINK l _Toc1641409999.3.3檢查 PAGEREF _Toc164140999 h 27HYPERLINK l _Toc1641410009.3.3.1數(shù)據(jù)質(zhì)量檢查基本功能 PAGEREF _Toc164141000 h 27HYPERLINK l _Toc1641410019.3.3.1.1數(shù)據(jù)稽核 PAGEREF _Toc164141001 h 27HYPERLINK l _Toc1641410029.3.3.1.2處理過(guò)程檢查 PAGEREF _Toc164141002 h 30HYPERLINK l _Toc1641

19、410039.3.3.2數(shù)據(jù)質(zhì)量檢查點(diǎn)的部署方式 PAGEREF _Toc164141003 h 30HYPERLINK l _Toc1641410049.3.4報(bào)告 PAGEREF _Toc164141004 h 31HYPERLINK l _Toc1641410059.3.4.1檢查結(jié)果報(bào)告基本過(guò)程 PAGEREF _Toc164141005 h 31HYPERLINK l _Toc1641410069.3.4.1.1報(bào)告定義 PAGEREF _Toc164141006 h 31HYPERLINK l _Toc1641410079.3.4.1.2報(bào)告生成 PAGEREF _Toc16414

20、1007 h 31HYPERLINK l _Toc1641410089.3.4.1.3報(bào)告提示 PAGEREF _Toc164141008 h 31HYPERLINK l _Toc1641410099.3.4.2檢查結(jié)果報(bào)告的容 PAGEREF _Toc164141009 h 31HYPERLINK l _Toc1641410109.3.4.3告警管理 PAGEREF _Toc164141010 h 32HYPERLINK l _Toc1641410119.3.4.3.1告警界面 PAGEREF _Toc164141011 h 32HYPERLINK l _Toc1641410129.3.4.

21、3.2告警形式 PAGEREF _Toc164141012 h 32HYPERLINK l _Toc1641410139.3.4.3.3告警升級(jí) PAGEREF _Toc164141013 h 33HYPERLINK l _Toc1641410149.3.4.3.4告警恢復(fù) PAGEREF _Toc164141014 h 33HYPERLINK l _Toc1641410159.3.5處理 PAGEREF _Toc164141015 h 33HYPERLINK l _Toc1641410169.3.5.1問(wèn)題處理的階段劃分 PAGEREF _Toc164141016 h 33HYPERLINK

22、 l _Toc1641410179.3.5.2問(wèn)題隔離階段 PAGEREF _Toc164141017 h 33HYPERLINK l _Toc1641410189.3.5.3問(wèn)題處理階段 PAGEREF _Toc164141018 h 34HYPERLINK l _Toc1641410199.3.6總結(jié) PAGEREF _Toc164141019 h 34HYPERLINK l _Toc1641410209.3.6.1總結(jié)的類(lèi)型 PAGEREF _Toc164141020 h 34HYPERLINK l _Toc1641410219.3.6.2問(wèn)題總結(jié) PAGEREF _Toc1641410

23、21 h 34HYPERLINK l _Toc1641410229.3.6.3階段性總結(jié) PAGEREF _Toc164141022 h 34HYPERLINK l _Toc1641410239.4數(shù)據(jù)質(zhì)量監(jiān)控模塊技術(shù)實(shí)現(xiàn) PAGEREF _Toc164141023 h 35HYPERLINK l _Toc1641410249.4.1技術(shù)實(shí)現(xiàn)架構(gòu) PAGEREF _Toc164141024 h 35HYPERLINK l _Toc1641410259.4.2數(shù)據(jù)質(zhì)量檢查代理 PAGEREF _Toc164141025 h 36HYPERLINK l _Toc1641410269.4.2.1目錄

24、掃描模塊 PAGEREF _Toc164141026 h 36HYPERLINK l _Toc1641410279.4.2.2檢查規(guī)則讀取模塊 PAGEREF _Toc164141027 h 36HYPERLINK l _Toc1641410289.4.2.3數(shù)據(jù)質(zhì)量檢查模塊 PAGEREF _Toc164141028 h 36HYPERLINK l _Toc1641410299.4.2.4檢查結(jié)果生成模塊 PAGEREF _Toc164141029 h 36HYPERLINK l _Toc1641410309.4.2.5代理活動(dòng)采集模塊 PAGEREF _Toc164141030 h 36H

25、YPERLINK l _Toc1641410319.4.2.6通信模塊 PAGEREF _Toc164141031 h 37HYPERLINK l _Toc1641410329.4.3數(shù)據(jù)質(zhì)量監(jiān)控服務(wù)器 PAGEREF _Toc164141032 h 37HYPERLINK l _Toc1641410339.4.3.1用戶(hù)管理模塊 PAGEREF _Toc164141033 h 37HYPERLINK l _Toc1641410349.4.3.2檢查規(guī)則處理模塊 PAGEREF _Toc164141034 h 37HYPERLINK l _Toc1641410359.4.3.3代理配置處理模塊

26、 PAGEREF _Toc164141035 h 37HYPERLINK l _Toc1641410369.4.3.4代理活動(dòng)監(jiān)控模塊 PAGEREF _Toc164141036 h 38HYPERLINK l _Toc1641410379.4.3.5檢查結(jié)果處理模塊 PAGEREF _Toc164141037 h 38HYPERLINK l _Toc1641410389.4.3.6數(shù)據(jù)庫(kù)接口模塊 PAGEREF _Toc164141038 h 38HYPERLINK l _Toc1641410399.4.3.7通信模塊 PAGEREF _Toc164141039 h 39HYPERLINK

27、l _Toc1641410409.4.4數(shù)據(jù)質(zhì)量檢查客戶(hù)端 PAGEREF _Toc164141040 h 39HYPERLINK l _Toc1641410419.4.4.1檢查規(guī)則查看 PAGEREF _Toc164141041 h 39HYPERLINK l _Toc1641410429.4.4.2檢查規(guī)則配置 PAGEREF _Toc164141042 h 39HYPERLINK l _Toc1641410439.4.4.3代理配置 PAGEREF _Toc164141043 h 39HYPERLINK l _Toc1641410449.4.4.4代理活動(dòng)監(jiān)控 PAGEREF _Toc

28、164141044 h 39HYPERLINK l _Toc1641410459.4.4.5檢查結(jié)果查看 PAGEREF _Toc164141045 h 40HYPERLINK l _Toc1641410469.4.4.6用戶(hù)管理 PAGEREF _Toc164141046 h 40HYPERLINK l _Toc1641410479.4.4.7通信模塊 PAGEREF _Toc164141047 h 40HYPERLINK l _Toc1641410489.5實(shí)施要求 PAGEREF _Toc164141048 h 40HYPERLINK l _Toc1641410499.6場(chǎng)景描述 PAG

29、EREF _Toc164141049 h 41HYPERLINK l _Toc16414105010.數(shù)據(jù)質(zhì)量管理流程 PAGEREF _Toc164141050 h 44HYPERLINK l _Toc16414105110.1概述 PAGEREF _Toc164141051 h 44HYPERLINK l _Toc16414105210.2管理機(jī)制 PAGEREF _Toc164141052 h 44HYPERLINK l _Toc16414105310.2.1組織機(jī)構(gòu)職責(zé) PAGEREF _Toc164141053 h 44HYPERLINK l _Toc16414105410.2.1.

30、1角色與職責(zé) PAGEREF _Toc164141054 h 44HYPERLINK l _Toc16414105510.2.1.1.1項(xiàng)目負(fù)責(zé)人 PAGEREF _Toc164141055 h 44HYPERLINK l _Toc16414105610.2.1.1.2項(xiàng)目經(jīng)理 PAGEREF _Toc164141056 h 44HYPERLINK l _Toc16414105710.2.1.1.3數(shù)據(jù)質(zhì)量管理員 PAGEREF _Toc164141057 h 45HYPERLINK l _Toc16414105810.2.1.1.4業(yè)務(wù)系統(tǒng)接口員 PAGEREF _Toc164141058

31、h 45HYPERLINK l _Toc16414105910.2.1.1.5文檔的設(shè)立和維護(hù) PAGEREF _Toc164141059 h 45HYPERLINK l _Toc16414106010.2.2相關(guān)外部組織 PAGEREF _Toc164141060 h 46HYPERLINK l _Toc16414106110.3質(zhì)量控制流程 PAGEREF _Toc164141061 h 46HYPERLINK l _Toc16414106210.3.1需求變更控制流程 PAGEREF _Toc164141062 h 47HYPERLINK l _Toc16414106310.3.1.1流

32、程進(jìn)入條件 PAGEREF _Toc164141063 h 47HYPERLINK l _Toc16414106410.3.1.2流程產(chǎn)生文檔 PAGEREF _Toc164141064 h 48HYPERLINK l _Toc16414106510.3.2數(shù)據(jù)質(zhì)量問(wèn)題處理流程 PAGEREF _Toc164141065 h 48HYPERLINK l _Toc16414106610.3.2.1流程進(jìn)入條件 PAGEREF _Toc164141066 h 49HYPERLINK l _Toc16414106710.3.2.2流程產(chǎn)生文檔 PAGEREF _Toc164141067 h 49HY

33、PERLINK l _Toc16414106810.3.3指標(biāo)口徑與業(yè)務(wù)規(guī)則問(wèn)題處理流程 PAGEREF _Toc164141068 h 50HYPERLINK l _Toc16414106910.3.3.1流程進(jìn)入條件 PAGEREF _Toc164141069 h 51HYPERLINK l _Toc16414107010.3.3.2流程產(chǎn)生文檔 PAGEREF _Toc164141070 h 51HYPERLINK l _Toc16414107110.3.4元數(shù)據(jù)變更維護(hù)流程 PAGEREF _Toc164141071 h 52HYPERLINK l _Toc16414107210.3.

34、4.1流程進(jìn)入條件 PAGEREF _Toc164141072 h 52HYPERLINK l _Toc16414107310.3.4.2流程產(chǎn)生文檔 PAGEREF _Toc164141073 h 52HYPERLINK l _Toc16414107410.3.5錯(cuò)誤數(shù)據(jù)維護(hù)流程 PAGEREF _Toc164141074 h 53HYPERLINK l _Toc16414107510.3.5.1流程進(jìn)入條件 PAGEREF _Toc164141075 h 53HYPERLINK l _Toc16414107610.3.5.2流程產(chǎn)生文檔 PAGEREF _Toc164141076 h 54

35、HYPERLINK l _Toc16414107710.4質(zhì)量檢查 PAGEREF _Toc164141077 h 54HYPERLINK l _Toc16414107810.4.1管理流程檢查 PAGEREF _Toc164141078 h 54HYPERLINK l _Toc16414107910.4.1.1組織結(jié)構(gòu)檢查 PAGEREF _Toc164141079 h 54HYPERLINK l _Toc16414108010.4.1.2管理流程與相關(guān)標(biāo)準(zhǔn)的檢查 PAGEREF _Toc164141080 h 55HYPERLINK l _Toc16414108110.4.1.3質(zhì)量管理流

36、程執(zhí)行情況檢查 PAGEREF _Toc164141081 h 55HYPERLINK l _Toc16414108210.4.2元數(shù)據(jù)質(zhì)量檢查 PAGEREF _Toc164141082 h 55HYPERLINK l _Toc16414108310.4.2.1與時(shí)性檢查 PAGEREF _Toc164141083 h 55HYPERLINK l _Toc16414108410.4.2.2完整性檢查 PAGEREF _Toc164141084 h 56HYPERLINK l _Toc16414108510.4.2.3準(zhǔn)確性檢查 PAGEREF _Toc164141085 h 56HYPERL

37、INK l _Toc16414108611.系統(tǒng)管理 PAGEREF _Toc164141086 h 56HYPERLINK l _Toc16414108711.1概述 PAGEREF _Toc164141087 h 56HYPERLINK l _Toc16414108811.2系統(tǒng)安全管理 PAGEREF _Toc164141088 h 57HYPERLINK l _Toc16414108911.3系統(tǒng)版本管理 PAGEREF _Toc164141089 h 57HYPERLINK l _Toc16414109012.編制歷史 PAGEREF _Toc164141090 h 57前言為更好地

38、與時(shí)獲取、分析、評(píng)估和解決省級(jí)經(jīng)營(yíng)分析系統(tǒng)各環(huán)節(jié)的數(shù)據(jù)質(zhì)量問(wèn)題，保證數(shù)據(jù)質(zhì)量的穩(wěn)定可靠，需要構(gòu)建一套省級(jí)經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量部控制的管理體系，利用數(shù)據(jù)質(zhì)量監(jiān)控模塊進(jìn)一步提升數(shù)據(jù)質(zhì)量管理系統(tǒng)對(duì)經(jīng)營(yíng)分析系統(tǒng)的支撐能力，特制訂本規(guī)。本標(biāo)準(zhǔn)由中國(guó)移動(dòng)通信提出并歸口。本標(biāo)準(zhǔn)以中移有限業(yè)2007XX號(hào)印發(fā)。本標(biāo)準(zhǔn)起草單位：中國(guó)移動(dòng)通信。本標(biāo)準(zhǔn)主要起草人：本標(biāo)準(zhǔn)解釋單位：中國(guó)移動(dòng)通信。圍本規(guī)包含了中國(guó)移動(dòng)經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量部控制的管理體系，以與數(shù)據(jù)質(zhì)量管理系統(tǒng)業(yè)務(wù)技術(shù)規(guī)方面的容。本規(guī)適用于中國(guó)移動(dòng)省級(jí)經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量管理系統(tǒng)(v2.0)的建設(shè)。本規(guī)重點(diǎn)描述了以元數(shù)據(jù)管理為基礎(chǔ)的數(shù)據(jù)質(zhì)量監(jiān)控功能，引入數(shù)

39、據(jù)質(zhì)量監(jiān)控模塊，并提出了數(shù)據(jù)質(zhì)量全程監(jiān)控的概念。旨在為數(shù)據(jù)運(yùn)營(yíng)打下基礎(chǔ)，提升數(shù)據(jù)質(zhì)量管理能力，使經(jīng)營(yíng)分析系統(tǒng)具有更高的實(shí)用價(jià)值。引用標(biāo)準(zhǔn)中國(guó)移動(dòng)省級(jí)經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量管理系統(tǒng)業(yè)務(wù)技術(shù)規(guī)（v1.5）中國(guó)移動(dòng)經(jīng)營(yíng)分析系統(tǒng)元數(shù)據(jù)管理規(guī)V1.0中國(guó)移動(dòng)省級(jí)經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量控制指導(dǎo)意見(jiàn)術(shù)語(yǔ)和定義序號(hào)名詞解釋1元數(shù)據(jù)是描述經(jīng)營(yíng)分析系統(tǒng)中數(shù)據(jù)的數(shù)據(jù)，為數(shù)據(jù)質(zhì)量管理等業(yè)務(wù)功能提供信息支撐。2技術(shù)元數(shù)據(jù)技術(shù)元數(shù)據(jù)包含關(guān)于經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)技術(shù)層面的信息，描述了數(shù)據(jù)源、ETL、數(shù)據(jù)倉(cāng)庫(kù)和數(shù)據(jù)集市、OLAP、一級(jí)經(jīng)營(yíng)分析系統(tǒng)接口等子系統(tǒng)的數(shù)據(jù)特征。3業(yè)務(wù)元數(shù)據(jù)業(yè)務(wù)元數(shù)據(jù)用業(yè)務(wù)術(shù)語(yǔ)、名稱(chēng)、定義來(lái)描述經(jīng)營(yíng)分析系統(tǒng)中

40、的各種業(yè)務(wù)信息，供業(yè)務(wù)人員使用。4管理元數(shù)據(jù)管理元數(shù)據(jù)主要是指經(jīng)營(yíng)分析系統(tǒng)日常建設(shè)過(guò)程中，涉與開(kāi)發(fā)、運(yùn)維等管理流程的基本信息。5CWMCWM標(biāo)準(zhǔn)是OMG組織定義的數(shù)據(jù)倉(cāng)庫(kù)和相關(guān)系統(tǒng)的國(guó)際元數(shù)據(jù)標(biāo)準(zhǔn)，CWM標(biāo)準(zhǔn)的目的在于使得數(shù)據(jù)倉(cāng)庫(kù)和商業(yè)智能軟件的元數(shù)據(jù)在分布異構(gòu)的數(shù)據(jù)分析工具，數(shù)據(jù)倉(cāng)庫(kù)平臺(tái)，元數(shù)據(jù)存儲(chǔ)等系統(tǒng)之間交互。6信息地圖信息地圖是在元數(shù)據(jù)基本功能基礎(chǔ)上對(duì)經(jīng)營(yíng)分析基礎(chǔ)元數(shù)據(jù)信息的全局、多視角的展現(xiàn)。7數(shù)據(jù)質(zhì)量監(jiān)控自動(dòng)獲取經(jīng)營(yíng)分析系統(tǒng)各環(huán)節(jié)的數(shù)據(jù)質(zhì)量信息，結(jié)合元數(shù)據(jù)庫(kù)中的有關(guān)檢查規(guī)則，對(duì)數(shù)據(jù)質(zhì)量情況進(jìn)行診斷，并與時(shí)向數(shù)據(jù)質(zhì)量監(jiān)控人員報(bào)告。8數(shù)據(jù)質(zhì)量監(jiān)控代理(Agent)是指部署在經(jīng)營(yíng)分析系統(tǒng)

41、數(shù)據(jù)處理流程各階段上的，完成數(shù)據(jù)質(zhì)量情況采集、檢查、報(bào)告等功能的駐留程序。9數(shù)據(jù)質(zhì)量監(jiān)控服務(wù)器對(duì)分布式數(shù)據(jù)質(zhì)量監(jiān)控代理進(jìn)行管理和服務(wù)的程序模塊。符號(hào)和縮略語(yǔ)縮寫(xiě)英文描述中文描述BOSSBusinessOperationSupportSystem業(yè)務(wù)運(yùn)營(yíng)支撐系統(tǒng)ODSOperationalDataStore操作型數(shù)據(jù)存儲(chǔ)CORBACommonObjectRequestBrokerArchitecture公共對(duì)象請(qǐng)求代理體系結(jié)構(gòu)CORBAIDLCORBAInterfaceDefinitionLanguageCORBA接口定義語(yǔ)言CWMCommonWarehouseMetamodel公共倉(cāng)庫(kù)元模型E

42、TLExtractionTransformationLoading抽取、轉(zhuǎn)換和加載JMIJavaMetadataInterfaceJava元數(shù)據(jù)接口OLAPOn-lineAnalysisProcess在線(xiàn)分析處理XMIXMLMetadataInterchangeXML元數(shù)據(jù)交換概述中國(guó)移動(dòng)省級(jí)經(jīng)營(yíng)分析系統(tǒng)（以下簡(jiǎn)稱(chēng)為省級(jí)經(jīng)營(yíng)分析系統(tǒng)）經(jīng)過(guò)多年發(fā)展，已初步建立了數(shù)據(jù)質(zhì)量管理機(jī)制，有效保障了經(jīng)營(yíng)分析系統(tǒng)的數(shù)據(jù)質(zhì)量。隨著省級(jí)經(jīng)營(yíng)分析系統(tǒng)價(jià)值的不斷顯現(xiàn)與穩(wěn)步提升，以與IT系統(tǒng)安全管理、風(fēng)險(xiǎn)部控制等重大管理舉措的實(shí)施，各省公司對(duì)經(jīng)營(yíng)分析系統(tǒng)如何保障數(shù)據(jù)質(zhì)量提出了更高要求。為了全面與時(shí)地采集、檢查、報(bào)告、

43、解決和總結(jié)經(jīng)營(yíng)分析系統(tǒng)各環(huán)節(jié)的數(shù)據(jù)質(zhì)量問(wèn)題，保證數(shù)據(jù)質(zhì)量的穩(wěn)定可靠，中國(guó)移動(dòng)特制定中國(guó)移動(dòng)省級(jí)經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量管理系統(tǒng)業(yè)務(wù)技術(shù)規(guī)（v2.0）（以下簡(jiǎn)稱(chēng)“本規(guī)”），旨在指導(dǎo)和規(guī)各?。ㄖ陛犑?、自治區(qū)）公司的數(shù)據(jù)質(zhì)量管理系統(tǒng)的建設(shè)、工程實(shí)施以與日常運(yùn)維管理工作。總體說(shuō)明數(shù)據(jù)質(zhì)量管理概述在經(jīng)營(yíng)分析系統(tǒng)發(fā)展的不同階段，經(jīng)營(yíng)分析系統(tǒng)對(duì)數(shù)據(jù)質(zhì)量的關(guān)注點(diǎn)也有所不同。早期對(duì)數(shù)據(jù)質(zhì)量的關(guān)注點(diǎn)主要是提高數(shù)據(jù)準(zhǔn)確性，隨著系統(tǒng)功能和定位的不斷延伸，用戶(hù)關(guān)注的重點(diǎn)逐步由數(shù)據(jù)準(zhǔn)確性擴(kuò)展至完整性、一致性、與時(shí)性等方面，這些容也屬于數(shù)據(jù)質(zhì)量的疇。根據(jù)中國(guó)移動(dòng)省級(jí)經(jīng)營(yíng)分析系統(tǒng)前期的建設(shè)經(jīng)驗(yàn)，目前系統(tǒng)關(guān)注的數(shù)據(jù)質(zhì)量問(wèn)題主要包括

44、以下幾個(gè)方面容：數(shù)據(jù)質(zhì)量的六大基本要素是否滿(mǎn)足，所謂六大基本要素是指：完整性：主要包括實(shí)體缺失、屬性缺失、記錄缺失和字段值缺失四個(gè)方面；唯一性：指主鍵唯一和候選鍵唯一兩個(gè)方面；一致性：指統(tǒng)一數(shù)據(jù)來(lái)源、統(tǒng)一冗余存儲(chǔ)和統(tǒng)一數(shù)據(jù)口徑；精確度：指計(jì)量誤差、度量單位等方面的精確度；合法性：主要包括格式、類(lèi)型、域值和業(yè)務(wù)規(guī)則的有效性；與時(shí)性：指數(shù)據(jù)刷新、修改和提取等操作的與時(shí)性和快速性。如何從用戶(hù)視角衡量數(shù)據(jù)質(zhì)量，重視用戶(hù)對(duì)數(shù)據(jù)的滿(mǎn)意程度；如何建立基于CWM規(guī)的元數(shù)據(jù)管理功能平臺(tái)，支持?jǐn)?shù)據(jù)質(zhì)量管理，為將來(lái)全網(wǎng)共享元數(shù)據(jù)奠定基礎(chǔ)；如何建立數(shù)據(jù)質(zhì)量監(jiān)控手段，與時(shí)發(fā)現(xiàn)、報(bào)告、處理經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量問(wèn)題；如何通

45、過(guò)建立有效的數(shù)據(jù)質(zhì)量管理體系來(lái)保障和提升數(shù)據(jù)的價(jià)值。主要容本規(guī)用以指導(dǎo)經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量管理系統(tǒng)建設(shè)的全過(guò)程。描述了經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量管理需求與圍、數(shù)據(jù)質(zhì)量管理總體應(yīng)用體系框架，明確規(guī)定了數(shù)據(jù)質(zhì)量管理系統(tǒng)中的元數(shù)據(jù)支撐功能與其它支撐功能，確定了數(shù)據(jù)質(zhì)量管理的基本功能和流程，重點(diǎn)強(qiáng)調(diào)了數(shù)據(jù)質(zhì)量監(jiān)控模塊的功能和作用。有關(guān)元數(shù)據(jù)建設(shè)的詳細(xì)容請(qǐng)參見(jiàn)中國(guó)移動(dòng)省級(jí)經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量管理系統(tǒng)業(yè)務(wù)技術(shù)規(guī)（v1.5）中的附件1 省級(jí)經(jīng)營(yíng)分析系統(tǒng)元數(shù)據(jù)管理功能技術(shù)規(guī).doc和附件2 中國(guó)移動(dòng)經(jīng)營(yíng)分析元數(shù)據(jù)管理規(guī).doc，上述兩個(gè)附件給出了元數(shù)據(jù)管理建設(shè)步驟的參考，包括省級(jí)元數(shù)據(jù)庫(kù)存儲(chǔ)邏輯模型、省級(jí)元數(shù)據(jù)庫(kù)的

46、訪(fǎng)問(wèn)接口實(shí)現(xiàn)方法、元數(shù)據(jù)管理工具選型參考標(biāo)準(zhǔn)等，為元數(shù)據(jù)支撐管理功能的建設(shè)提供參考依據(jù)。系統(tǒng)建設(shè)目標(biāo)本規(guī)借鑒了先期元數(shù)據(jù)試點(diǎn)和經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量管理系統(tǒng)（v1.5）部分省份的建設(shè)經(jīng)驗(yàn)，同時(shí)參考了經(jīng)營(yíng)分析系統(tǒng)元數(shù)據(jù)管理規(guī)v1.0和OMG組織的CWM國(guó)際標(biāo)準(zhǔn)等文獻(xiàn)，本期重點(diǎn)實(shí)現(xiàn)以下建設(shè)目標(biāo)：在經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)處理主要階段設(shè)置數(shù)據(jù)質(zhì)量監(jiān)控點(diǎn)，支持對(duì)數(shù)據(jù)質(zhì)量的全程監(jiān)控。在各數(shù)據(jù)監(jiān)控點(diǎn)上，實(shí)現(xiàn)多角度、多方式、可配置的約束規(guī)則，提供常見(jiàn)問(wèn)題的自動(dòng)處理方法。完善數(shù)據(jù)質(zhì)量監(jiān)控模塊，建立有效的數(shù)據(jù)質(zhì)量監(jiān)控機(jī)制，提供全面與時(shí)的數(shù)據(jù)質(zhì)量報(bào)告，控制和預(yù)防錯(cuò)誤圍的擴(kuò)大。加強(qiáng)數(shù)據(jù)質(zhì)量監(jiān)控技術(shù)與管理手段的配合，著重關(guān)注經(jīng)

47、營(yíng)分析系統(tǒng)數(shù)據(jù)來(lái)源和數(shù)據(jù)輸出的數(shù)據(jù)質(zhì)量，明確相關(guān)責(zé)任。建設(shè)符合CWM規(guī)的元數(shù)據(jù)管理平臺(tái)，為全網(wǎng)經(jīng)營(yíng)分析系統(tǒng)的數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)資源管理和數(shù)據(jù)運(yùn)營(yíng)奠定基礎(chǔ)。實(shí)施建議本規(guī)是省級(jí)經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量管理系統(tǒng)規(guī)劃和建設(shè)的基本指導(dǎo)，各省在實(shí)施過(guò)程中，可根據(jù)實(shí)際需要以本規(guī)為基礎(chǔ)進(jìn)行擴(kuò)充與細(xì)化。建議如下：在建立數(shù)據(jù)質(zhì)量管理系統(tǒng)后，需要建立配套的管理機(jī)制，確保有專(zhuān)人依照流程對(duì)數(shù)據(jù)質(zhì)量問(wèn)題進(jìn)行管理和維護(hù)；元數(shù)據(jù)管理是本次經(jīng)營(yíng)分析數(shù)據(jù)質(zhì)量管理系統(tǒng)的重要功能，是將來(lái)實(shí)現(xiàn)元數(shù)據(jù)共享和交換的基礎(chǔ)。元數(shù)據(jù)提供了對(duì)數(shù)據(jù)本身的描述，是關(guān)于數(shù)據(jù)的數(shù)據(jù)，主要包括技術(shù)元數(shù)據(jù)、業(yè)務(wù)元數(shù)據(jù)和管理元數(shù)據(jù)。各省在遵循CWM標(biāo)準(zhǔn)的前提下，可

48、以根據(jù)自身實(shí)際情況，決定自行建設(shè)還是采購(gòu)元數(shù)據(jù)管理工具；各省可以根據(jù)自身業(yè)務(wù)情況擴(kuò)展中國(guó)移動(dòng)省級(jí)經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量管理系統(tǒng)業(yè)務(wù)技術(shù)規(guī)（v1.5）附件中的元數(shù)據(jù)存儲(chǔ)邏輯模型，但必須遵循CWM元模型的擴(kuò)展規(guī)則；本規(guī)中列舉的各類(lèi)應(yīng)用，如數(shù)據(jù)質(zhì)量監(jiān)控、信息地圖、需求變更影響分析、項(xiàng)目管理支撐、數(shù)據(jù)集市支撐等應(yīng)用是本期建設(shè)重點(diǎn)關(guān)注的容，各省可以根據(jù)實(shí)際情況增加其它相關(guān)應(yīng)用。數(shù)據(jù)質(zhì)量管理需求數(shù)據(jù)質(zhì)量問(wèn)題經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量問(wèn)題按照問(wèn)題的來(lái)源和具體原因，可以分為信息、技術(shù)、流程、管理四個(gè)問(wèn)題域。如圖7-1所示。圖7-1數(shù)據(jù)質(zhì)量的四個(gè)問(wèn)題域信息問(wèn)題域圖7-2信息問(wèn)題域信息類(lèi)問(wèn)題是由于對(duì)數(shù)據(jù)本身的描述理解與其

49、度量標(biāo)準(zhǔn)的偏差而造成的數(shù)據(jù)質(zhì)量問(wèn)題。產(chǎn)生這部分?jǐn)?shù)據(jù)質(zhì)量問(wèn)題的原因主要有：元數(shù)據(jù)描述與理解錯(cuò)誤、數(shù)據(jù)度量的各種性質(zhì)得不到保證和變化頻度不恰當(dāng)?shù)取Ｔ獢?shù)據(jù)描述與理解錯(cuò)誤中的相關(guān)元數(shù)據(jù)主要包括：業(yè)務(wù)元數(shù)據(jù)主要包括業(yè)務(wù)描述、業(yè)務(wù)規(guī)則、業(yè)務(wù)術(shù)語(yǔ)、業(yè)務(wù)指標(biāo)口徑等。技術(shù)元數(shù)據(jù)主要包括接口規(guī)、執(zhí)行順序、依賴(lài)關(guān)系、ETL轉(zhuǎn)換、數(shù)據(jù)建模和工具等方面的容。數(shù)據(jù)度量和變化頻度提供了衡量數(shù)據(jù)質(zhì)量好壞的手段。數(shù)據(jù)度量主要包括完整性、唯一性、一致性、準(zhǔn)確性、合法性。變化頻度主要包括業(yè)務(wù)系統(tǒng)數(shù)據(jù)的變化周期和實(shí)體數(shù)據(jù)的刷新周期。技術(shù)問(wèn)題域圖7-3技術(shù)問(wèn)題域技術(shù)類(lèi)問(wèn)題是指由于具體數(shù)據(jù)處理的各技術(shù)環(huán)節(jié)的異常造成的數(shù)據(jù)質(zhì)量問(wèn)題，它產(chǎn)生

50、的直接原因是技術(shù)實(shí)現(xiàn)上的某種缺陷。數(shù)據(jù)質(zhì)量問(wèn)題的產(chǎn)生環(huán)節(jié)主要包括數(shù)據(jù)創(chuàng)建、數(shù)據(jù)獲取、數(shù)據(jù)傳遞、數(shù)據(jù)裝載、數(shù)據(jù)使用、數(shù)據(jù)維護(hù)等方面的容：1、數(shù)據(jù)創(chuàng)建質(zhì)量問(wèn)題主要包括業(yè)務(wù)系統(tǒng)話(huà)單延遲入庫(kù)、創(chuàng)建數(shù)據(jù)默認(rèn)值使用不當(dāng)和數(shù)據(jù)錄入的校驗(yàn)規(guī)則不當(dāng)，導(dǎo)致指標(biāo)統(tǒng)計(jì)結(jié)果不一致、數(shù)據(jù)無(wú)效、記錄重復(fù)等。2、數(shù)據(jù)獲取質(zhì)量問(wèn)題主要包括采集點(diǎn)不正確、取數(shù)時(shí)間點(diǎn)不正確以與接口數(shù)據(jù)在獲取過(guò)程中失真。如，編碼轉(zhuǎn)換處理錯(cuò)誤以與精度不夠，導(dǎo)致指標(biāo)統(tǒng)計(jì)結(jié)果不一致、數(shù)據(jù)無(wú)效等。3、數(shù)據(jù)傳遞質(zhì)量問(wèn)題主要包括接口數(shù)據(jù)與時(shí)率低，接口數(shù)據(jù)漏傳，網(wǎng)絡(luò)傳輸過(guò)程不可靠，如包丟失，文件傳輸方式錯(cuò)誤，傳輸技術(shù)問(wèn)題，協(xié)議使用不當(dāng)導(dǎo)致的數(shù)據(jù)不完整等。4、數(shù)據(jù)裝

51、載質(zhì)量問(wèn)題主要包括數(shù)據(jù)清洗算法、數(shù)據(jù)轉(zhuǎn)換算法、數(shù)據(jù)加載算法錯(cuò)誤。5、數(shù)據(jù)使用質(zhì)量問(wèn)題主要包括展示工具使用錯(cuò)誤、展示方式不合理和展示周期不合理。6、數(shù)據(jù)維護(hù)質(zhì)量問(wèn)題主要包括數(shù)據(jù)備份/恢復(fù)錯(cuò)誤、數(shù)據(jù)的存儲(chǔ)能力有限、維護(hù)過(guò)程缺乏驗(yàn)證機(jī)制和人為后臺(tái)調(diào)整數(shù)據(jù)。流程問(wèn)題域圖7-4流程問(wèn)題域流程類(lèi)問(wèn)題是指由于系統(tǒng)作業(yè)流程和人工操作流程設(shè)置不當(dāng)造成的數(shù)據(jù)質(zhì)量問(wèn)題，主要來(lái)源于經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)的創(chuàng)建流程、傳遞流程、裝載流程、使用流程、維護(hù)流程和稽核流程等各環(huán)節(jié)：1、創(chuàng)建流程質(zhì)量問(wèn)題主要指操作員數(shù)據(jù)錄入時(shí)缺乏審核流程；2、傳遞流程質(zhì)量問(wèn)題主要指通信流程溝通不暢；3、裝載流程質(zhì)量問(wèn)題主要指清洗流程缺乏/不當(dāng)、調(diào)度流程

52、邏輯錯(cuò)誤、數(shù)據(jù)加載流程邏輯錯(cuò)誤與數(shù)據(jù)轉(zhuǎn)換流程邏輯錯(cuò)誤；4、使用流程質(zhì)量問(wèn)題主要指數(shù)據(jù)使用流程缺乏流程管理；5、維護(hù)流程質(zhì)量問(wèn)題主要指缺乏變更維護(hù)流程、缺乏錯(cuò)誤數(shù)據(jù)維護(hù)流程、缺乏數(shù)據(jù)測(cè)試流程以與對(duì)人工后臺(tái)調(diào)整數(shù)據(jù)沒(méi)有嚴(yán)格的流程監(jiān)控；6、稽核流程質(zhì)量問(wèn)題主要指缺乏數(shù)據(jù)錯(cuò)誤反饋流程。管理問(wèn)題域圖7-5管理問(wèn)題域管理類(lèi)問(wèn)題是指由于人員素質(zhì)與管理機(jī)制方面的原因造成的數(shù)據(jù)質(zhì)量問(wèn)題，如人員管理、培訓(xùn)和獎(jiǎng)勵(lì)等方面的措施不當(dāng)導(dǎo)致的管理缺失。人員管理所產(chǎn)生的質(zhì)量問(wèn)題主要指：（1）針對(duì)省級(jí)數(shù)據(jù)質(zhì)量問(wèn)題，沒(méi)有建立管理數(shù)據(jù)質(zhì)量的專(zhuān)門(mén)機(jī)構(gòu)，出現(xiàn)數(shù)據(jù)質(zhì)量問(wèn)題后無(wú)專(zhuān)人負(fù)責(zé)；（2）沒(méi)有明確的數(shù)據(jù)質(zhì)量目標(biāo)；（3）經(jīng)營(yíng)分析系統(tǒng)中的

53、數(shù)據(jù)質(zhì)量問(wèn)題的優(yōu)先級(jí)不夠；（4）集團(tuán)公司缺少管理數(shù)據(jù)質(zhì)量的管理辦法等；人員培訓(xùn)所產(chǎn)生的質(zhì)量問(wèn)題主要指對(duì)數(shù)據(jù)質(zhì)量相關(guān)人員缺少長(zhǎng)期培訓(xùn)計(jì)劃；通過(guò)上述對(duì)經(jīng)營(yíng)分析數(shù)據(jù)質(zhì)量問(wèn)題的分類(lèi)，結(jié)合各省經(jīng)營(yíng)分析系統(tǒng)建設(shè)經(jīng)驗(yàn)，信息、流程和技術(shù)三個(gè)方面的數(shù)據(jù)質(zhì)量問(wèn)題相對(duì)集中和可控，是本系統(tǒng)實(shí)施的重點(diǎn)。在管理方面，本規(guī)側(cè)重于提供對(duì)開(kāi)發(fā)、運(yùn)維管理流程方面的支撐，并對(duì)管理元數(shù)據(jù)與其管理圍進(jìn)行了明確定義，具體參見(jiàn)第8章管理元數(shù)據(jù)的相關(guān)定義。系統(tǒng)功能需求在各省具體數(shù)據(jù)質(zhì)量問(wèn)題解決過(guò)程中，數(shù)據(jù)質(zhì)量問(wèn)題的定位和解決過(guò)程往往依賴(lài)具體人員的經(jīng)驗(yàn)，問(wèn)題處理效率和正確性難以保證。因此有必要引入元數(shù)據(jù)管理的相關(guān)功能，提供對(duì)數(shù)據(jù)模型、指標(biāo)統(tǒng)計(jì)

54、口徑與處理過(guò)程等數(shù)據(jù)實(shí)體和處理的標(biāo)準(zhǔn)定義和描述。數(shù)據(jù)質(zhì)量管理系統(tǒng)利用元數(shù)據(jù)庫(kù)存儲(chǔ)技術(shù)、業(yè)務(wù)、管理方面對(duì)數(shù)據(jù)質(zhì)量的約束規(guī)；利用知識(shí)庫(kù)存儲(chǔ)數(shù)據(jù)質(zhì)量問(wèn)題和處理過(guò)程；通過(guò)制定相關(guān)管理流程來(lái)保證經(jīng)營(yíng)分析數(shù)據(jù)質(zhì)量的日常管理。本規(guī)介紹如何在基于元數(shù)據(jù)管理的基礎(chǔ)上建立數(shù)據(jù)質(zhì)量管理系統(tǒng)，并通過(guò)制定相關(guān)管理流程來(lái)保證經(jīng)營(yíng)分析數(shù)據(jù)質(zhì)量的日常管理。數(shù)據(jù)質(zhì)量管理系統(tǒng)的基礎(chǔ)是遵循CWM標(biāo)準(zhǔn)的元數(shù)據(jù)管理支撐功能的實(shí)施。根據(jù)系統(tǒng)定位，數(shù)據(jù)質(zhì)量管理系統(tǒng)與元數(shù)據(jù)管理支撐功能之間的關(guān)系如下：數(shù)據(jù)質(zhì)量管理包含元數(shù)據(jù)管理元數(shù)據(jù)管理功能為數(shù)據(jù)質(zhì)量管理系統(tǒng)提供支撐元數(shù)據(jù)管理為了實(shí)施數(shù)據(jù)質(zhì)量管理，需要業(yè)務(wù)數(shù)據(jù)的有關(guān)統(tǒng)計(jì)口徑、數(shù)據(jù)來(lái)源、數(shù)據(jù)約

55、束關(guān)系等元數(shù)據(jù)的支撐。數(shù)據(jù)質(zhì)量管理系統(tǒng)要求建立符合國(guó)際主流規(guī)CWM的元數(shù)據(jù)管理支撐平臺(tái)。它負(fù)責(zé)管理整個(gè)經(jīng)營(yíng)分析系統(tǒng)的技術(shù)、業(yè)務(wù)和管理三類(lèi)元數(shù)據(jù)，形成元數(shù)據(jù)全局視圖，展現(xiàn)經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)實(shí)體的組成、關(guān)系以與處理轉(zhuǎn)換的過(guò)程。數(shù)據(jù)質(zhì)量監(jiān)控在數(shù)據(jù)質(zhì)量管理系統(tǒng)中，數(shù)據(jù)質(zhì)量監(jiān)控是基礎(chǔ)功能。數(shù)據(jù)質(zhì)量監(jiān)控實(shí)時(shí)采集數(shù)據(jù)處理過(guò)程的各個(gè)質(zhì)量監(jiān)控點(diǎn)上的質(zhì)量信息，執(zhí)行數(shù)據(jù)質(zhì)量監(jiān)控流程，進(jìn)行數(shù)據(jù)稽核診斷，然后直觀(guān)展現(xiàn)檢查結(jié)果。數(shù)據(jù)質(zhì)量管理人員可根據(jù)告警信息，采取相應(yīng)的質(zhì)量控制行動(dòng)。最后，還應(yīng)評(píng)估總結(jié)本次數(shù)據(jù)質(zhì)量監(jiān)控活動(dòng)的有效性和與時(shí)性，以利于以后質(zhì)量管理工作的改進(jìn)。在數(shù)據(jù)質(zhì)量監(jiān)控工作中對(duì)質(zhì)量問(wèn)題的監(jiān)控、診斷和處理結(jié)果應(yīng)整

56、理形成質(zhì)量問(wèn)題處理案例，并記錄到知識(shí)庫(kù)中，以便進(jìn)行知識(shí)共享。項(xiàng)目管理支撐數(shù)據(jù)質(zhì)量管理也涉與經(jīng)營(yíng)分析系統(tǒng)相關(guān)項(xiàng)目的日常管理。將項(xiàng)目管理的容納入質(zhì)量管理，可全面、與時(shí)記錄系統(tǒng)的建設(shè)狀況和使用情況，有效支持經(jīng)營(yíng)分析系統(tǒng)的全員使用。項(xiàng)目管理支撐包括：工作分配管理、系統(tǒng)使用狀況分析等。系統(tǒng)架構(gòu)系統(tǒng)體系數(shù)據(jù)質(zhì)量管理系統(tǒng)按照體系結(jié)構(gòu)劃分為源系統(tǒng)層、存儲(chǔ)層、功能層和應(yīng)用層，體系結(jié)構(gòu)如圖8-1所示：圖8-1數(shù)據(jù)質(zhì)量管理系統(tǒng)體系結(jié)構(gòu)源系統(tǒng)層經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)處理流程經(jīng)營(yíng)分析系統(tǒng)的數(shù)據(jù)處理流程主要涉與源系統(tǒng)接口數(shù)據(jù)、ETL過(guò)程、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)集市、前端應(yīng)用等處理階段。數(shù)據(jù)質(zhì)量管理系統(tǒng)對(duì)數(shù)據(jù)的管理和監(jiān)控圍涵蓋了全部這些

57、處理階段。數(shù)據(jù)質(zhì)量監(jiān)控點(diǎn)數(shù)據(jù)質(zhì)量管理系統(tǒng)在數(shù)據(jù)處理的各階段都應(yīng)設(shè)立數(shù)據(jù)質(zhì)量監(jiān)控點(diǎn)，并使稽核診斷工作盡量前移。本期系統(tǒng)規(guī)定的數(shù)據(jù)質(zhì)量監(jiān)控點(diǎn)設(shè)置如下：（1）各數(shù)據(jù)源接口（2）ETL處理過(guò)程（對(duì)數(shù)據(jù)抽取、轉(zhuǎn)換的主要階段，以與加載到數(shù)據(jù)倉(cāng)庫(kù)前都應(yīng)設(shè)置監(jiān)控點(diǎn)）（3）數(shù)據(jù)倉(cāng)庫(kù)（對(duì)各種數(shù)據(jù)粒度的匯總應(yīng)設(shè)置監(jiān)控點(diǎn)）（4）數(shù)據(jù)集市（對(duì)地市和部門(mén)的集市分別應(yīng)設(shè)置監(jiān)控點(diǎn)）（5）前端展現(xiàn)應(yīng)用存儲(chǔ)層存儲(chǔ)層中存儲(chǔ)的信息主要包括三個(gè)部分：（1）元數(shù)據(jù)庫(kù)：存儲(chǔ)技術(shù)元數(shù)據(jù)、業(yè)務(wù)元數(shù)據(jù)和管理元數(shù)據(jù)，為數(shù)據(jù)質(zhì)量管理系統(tǒng)提供基本的數(shù)據(jù)實(shí)體和處理描述與其映射關(guān)系，是質(zhì)量管理的支撐基礎(chǔ)；（2）運(yùn)行狀況信息庫(kù)：存儲(chǔ)從各個(gè)數(shù)據(jù)質(zhì)量監(jiān)控點(diǎn)上采

58、集的有關(guān)系統(tǒng)運(yùn)行狀況的信息與質(zhì)量稽核過(guò)程信息，是稽核診斷的主要輸入信息；（3）數(shù)據(jù)質(zhì)量知識(shí)庫(kù)：存儲(chǔ)數(shù)據(jù)質(zhì)量管理中對(duì)質(zhì)量問(wèn)題的識(shí)別、診斷和處理結(jié)果的記錄信息，作為解決質(zhì)量問(wèn)題的知識(shí)共享。以上三種數(shù)據(jù)庫(kù)，在邏輯上可進(jìn)行獨(dú)立設(shè)計(jì)，在物理實(shí)現(xiàn)上可以部署在同一臺(tái)服務(wù)器上。元數(shù)據(jù)存儲(chǔ)元數(shù)據(jù)是數(shù)據(jù)質(zhì)量管理系統(tǒng)實(shí)現(xiàn)的核心，是描述和控制經(jīng)營(yíng)分析系統(tǒng)中數(shù)據(jù)的數(shù)據(jù)，為數(shù)據(jù)質(zhì)量管理體系架構(gòu)的功能層和應(yīng)用層提供信息支撐。元數(shù)據(jù)庫(kù)中存儲(chǔ)的元數(shù)據(jù)分為三類(lèi)：技術(shù)元數(shù)據(jù)、業(yè)務(wù)元數(shù)據(jù)和管理元數(shù)據(jù)。業(yè)務(wù)元數(shù)據(jù)本部分將業(yè)務(wù)元數(shù)據(jù)劃分為業(yè)務(wù)術(shù)語(yǔ)、業(yè)務(wù)描述、業(yè)務(wù)指標(biāo)和業(yè)務(wù)規(guī)則四個(gè)部分，其中業(yè)務(wù)規(guī)則、業(yè)務(wù)術(shù)語(yǔ)和業(yè)務(wù)描述共同完成對(duì)業(yè)務(wù)相關(guān)信

59、息的事實(shí)表述。數(shù)據(jù)質(zhì)量管理系統(tǒng)通過(guò)對(duì)這些業(yè)務(wù)元數(shù)據(jù)的映射，可以得到對(duì)應(yīng)的數(shù)據(jù)質(zhì)量檢查規(guī)則。各省公司可以根據(jù)自身業(yè)務(wù)需求對(duì)業(yè)務(wù)元數(shù)據(jù)主題進(jìn)行擴(kuò)充，擴(kuò)充的元數(shù)據(jù)主題必須遵循CWM元數(shù)據(jù)擴(kuò)展規(guī)。業(yè)務(wù)術(shù)語(yǔ)是一個(gè)名詞或者名詞短語(yǔ)，是對(duì)一種共識(shí)的定義，例如：一個(gè)有效的賬戶(hù)被定義為此賬戶(hù)有余額且其有效期未過(guò)。業(yè)務(wù)描述提供對(duì)省公司各項(xiàng)主要業(yè)務(wù)的統(tǒng)一描述，這部分容應(yīng)與倉(cāng)庫(kù)模型的主題信息、相關(guān)業(yè)務(wù)的統(tǒng)計(jì)指標(biāo)建立關(guān)聯(lián)，描述容包括：業(yè)務(wù)基本描述業(yè)務(wù)管理規(guī)定，包括業(yè)務(wù)組織、業(yè)務(wù)流程、資費(fèi)標(biāo)準(zhǔn)業(yè)務(wù)統(tǒng)計(jì)業(yè)務(wù)描述是一個(gè)完整的描述，通過(guò)動(dòng)詞來(lái)連接術(shù)語(yǔ)使其成為一個(gè)有效的聲明，例如：開(kāi)通具體業(yè)務(wù)的客戶(hù)必須至少擁有一個(gè)有效的賬戶(hù)。業(yè)

60、務(wù)指標(biāo)面向業(yè)務(wù)分析人員，對(duì)業(yè)務(wù)關(guān)鍵信息的解釋。業(yè)務(wù)指標(biāo)需要提取的元數(shù)據(jù)主要包括指標(biāo)標(biāo)識(shí)、指標(biāo)名稱(chēng)、描述信息、建立時(shí)間、所屬部門(mén)、創(chuàng)建者、類(lèi)別、數(shù)據(jù)來(lái)源等。業(yè)務(wù)規(guī)則業(yè)務(wù)規(guī)則是一種描述信息，定義和約束了部分業(yè)務(wù)邏輯，可以用于對(duì)業(yè)務(wù)邏輯結(jié)構(gòu)進(jìn)行驗(yàn)證，用于控制或者影響業(yè)務(wù)邏輯的行為。技術(shù)元數(shù)據(jù)技術(shù)元數(shù)據(jù)包含關(guān)于經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)技術(shù)層面的信息，描述了數(shù)據(jù)源接口、ETL、數(shù)據(jù)倉(cāng)庫(kù)和數(shù)據(jù)集市、一級(jí)經(jīng)營(yíng)分析系統(tǒng)接口等子系統(tǒng)的數(shù)據(jù)特征。根據(jù)經(jīng)營(yíng)分析系統(tǒng)的特點(diǎn)和經(jīng)營(yíng)分析系統(tǒng)數(shù)據(jù)質(zhì)量管理的具體要求，本部分將技術(shù)元數(shù)據(jù)分為數(shù)據(jù)源接口、ETL過(guò)程、數(shù)據(jù)倉(cāng)庫(kù)和數(shù)據(jù)集市存儲(chǔ)、分析應(yīng)用、運(yùn)行環(huán)境信息、質(zhì)量管理過(guò)程六個(gè)部分，對(duì)