EDA數(shù)據(jù)質(zhì)量工作匯報(bào)--江西電信

數(shù)據(jù)質(zhì)量工作匯報(bào) 江西電信企業(yè)信息化部 2010年 7月 目 錄 數(shù)據(jù)組織 數(shù)據(jù)管理 系統(tǒng)支撐 運(yùn)營效果 經(jīng)驗(yàn)體會(huì) 2 江西電信企業(yè)信息化部 江西電信企業(yè)信息化部 3 數(shù)據(jù)質(zhì)量管理歷程 (CRM-計(jì)費(fèi)主產(chǎn)品一致性 ) 2007年 5月 93.23% 2007年 10月 98.73 2008年 10月 99.94% 2009年 12月 99.985% 2010年 6月 99.998% 數(shù)據(jù)質(zhì)量歷程 企業(yè)數(shù)據(jù)管理 江西電信企業(yè)信息化部 4 數(shù)據(jù)考核 江西電信企業(yè)信息化部 5 目 錄 數(shù)據(jù)組織 數(shù)據(jù)管理 系統(tǒng)支撐 運(yùn)營效果 經(jīng)驗(yàn)體會(huì) 6 江西電信企業(yè)信息化部 數(shù)據(jù)管理的五大內(nèi)容 江西電信企業(yè)信息化部 7 按照集團(tuán)規(guī)范，對(duì) CRM系統(tǒng)、計(jì)費(fèi)等系統(tǒng)的信息完整性進(jìn)行分析和整改。 數(shù)據(jù)完整性 使用系統(tǒng)功能對(duì)關(guān)鍵客戶信息進(jìn)行稽核并發(fā)分公司進(jìn)行清理。 在各主要系統(tǒng)開展數(shù)據(jù)提速工作。 根據(jù)比對(duì)結(jié)果處理方案對(duì)每月比對(duì)出的差異數(shù)據(jù)進(jìn)行清理，提高各系統(tǒng)數(shù)據(jù)一致性。 制定工號(hào)權(quán)限管理細(xì)則，對(duì)工號(hào)進(jìn)行審核和清理 進(jìn)行操作日志自查，完善系統(tǒng)日志功能 數(shù)據(jù)準(zhǔn)確性 數(shù)據(jù)及時(shí)性 數(shù)據(jù)一致性 數(shù)據(jù)安全性 將端到端收入稽核融入江西電信數(shù)據(jù) TOP管理，極大提升工作的推進(jìn)力度 圍繞 “ 五性 ” 開展工作，構(gòu)筑數(shù)據(jù)應(yīng)用完整體系。 主產(chǎn)品 提升數(shù)據(jù)一致性 關(guān)鍵指標(biāo) 江西電信企業(yè)信息化部 8 CRM與平臺(tái) -目標(biāo) 99.95% CRM與計(jì)費(fèi) 固網(wǎng)與平臺(tái) 窄 帶 寬帶 VPDN 速率 彩 鈴 預(yù) 付 費(fèi) 移動(dòng)與平臺(tái) 與 HLR的后付費(fèi) 與 OCS的預(yù)付費(fèi) 與 AAA平臺(tái)鑒權(quán)數(shù)據(jù) 與 AN-AAA平臺(tái)的 EVDO 彩鈴 與綜合 VPN 主產(chǎn)品 屬性 主產(chǎn)品 附屬 產(chǎn)品 產(chǎn)品 相關(guān) 根據(jù)數(shù)據(jù)的重要程度以及流程中可能存在的問題定位出影響數(shù)據(jù)一致性的關(guān)鍵指標(biāo)。 城鄉(xiāng)標(biāo)識(shí) 用 戶屬 性 產(chǎn) 品 標(biāo) 志 付 費(fèi) 模式 來顯 彩 鈴 銷售品 定價(jià) 目標(biāo)99.95% 目標(biāo)99.99% 提升數(shù)據(jù)一致性 業(yè)務(wù)流程 江西電信企業(yè)信息化部 9 1號(hào) 網(wǎng)支網(wǎng)優(yōu)將源文件送達(dá)指定的 FTP服務(wù)器。 4號(hào) 省業(yè)務(wù)支撐中心通過系統(tǒng)任務(wù)完成核心資料一致性比對(duì)工作。 5號(hào) 省業(yè)務(wù)支撐中心下發(fā)差異給分公司。 10號(hào) 分公司層面提出數(shù)據(jù)核查需求。 15號(hào) 省業(yè)務(wù)支撐中心、網(wǎng)支、網(wǎng)優(yōu)對(duì)分公司提出的問題進(jìn)行核查。 20號(hào) 分公司層面根據(jù)數(shù)據(jù)比對(duì)結(jié)果處理方案提出數(shù)據(jù)修改工單。 28號(hào) 省業(yè)務(wù)支撐中心、網(wǎng)支、網(wǎng)優(yōu)根據(jù)工單對(duì)數(shù)據(jù)進(jìn)行修改及同步。 省公司信息化部牽頭 、 推動(dòng)工作完成 提升數(shù)據(jù)一致性 數(shù)據(jù)修改工單流程 以清理彩鈴平臺(tái)數(shù)據(jù)為例描述工單流轉(zhuǎn)過程。 江西電信企業(yè)信息化部 10 需求人提需求 接口人送審批 網(wǎng)支審批 接口人派單 彩鈴平臺(tái)修改數(shù)據(jù) 接口人確認(rèn) 需求人驗(yàn)收 結(jié)束工單 接口人判斷是否送審批，送哪個(gè)部門審批。 接口人根據(jù)需求內(nèi)容將工單派發(fā)給相關(guān)系統(tǒng)或平臺(tái)。 驗(yàn)收不通過 主管部門對(duì)工單內(nèi)容進(jìn)行審批。 提升數(shù)據(jù)一致性 相關(guān)文件 江西電信企業(yè)信息化部 11 數(shù)據(jù)比對(duì)結(jié)果處理方案 按照集團(tuán)公司關(guān)于開展移動(dòng)業(yè)務(wù)用戶數(shù)據(jù)比對(duì)工作的文件要求，結(jié)合本省前期開展的數(shù)據(jù)比對(duì)工作的進(jìn)展情況，特制訂我省移動(dòng)業(yè)務(wù)用戶數(shù)據(jù)比對(duì)處理方案。 一、工作范圍 本次用戶數(shù)據(jù)比對(duì)工作，主要針對(duì)基礎(chǔ)語音業(yè)務(wù)、無線寬帶、短信、彩信、智能網(wǎng)、彩鈴六大類業(yè)務(wù)。在此基礎(chǔ)之上，逐步開展其他業(yè)務(wù)的用戶數(shù)據(jù)的比對(duì)工作。 二、工作原則 鑒于數(shù)據(jù)比對(duì)工作涉及到對(duì)用戶數(shù)據(jù)的修正，一旦出現(xiàn)差錯(cuò)，會(huì)直接影響用戶業(yè)務(wù)的使用，對(duì)用戶感知產(chǎn)生不好的影響，因此我省計(jì)劃采用先試點(diǎn)、再推廣的原則推進(jìn)該項(xiàng)工作。 三、工作目標(biāo) 提高移動(dòng)業(yè)務(wù)一次自動(dòng)開通成功率指標(biāo)，指標(biāo)逐步達(dá)到并超過 99 。 四 、 工作內(nèi)容 1 、基礎(chǔ)語音業(yè)務(wù) 中國電信江西公司 數(shù)據(jù) 一致性 清理流程 為了進(jìn)一步提高公司 IT 系統(tǒng)間數(shù)據(jù)一致性，達(dá)到“數(shù)據(jù)應(yīng)用能力提升” TOP 項(xiàng)目的考核目標(biāo)，特對(duì)數(shù)據(jù)清理流程進(jìn)行進(jìn)一步的明確： 一、 工作方式與流程 1 、工作方式 根據(jù)“數(shù)據(jù)應(yīng)用能力提升” T O P 項(xiàng)目的要求和工作現(xiàn)狀，省信息化部對(duì)數(shù)據(jù)清理的流程進(jìn)行優(yōu)化調(diào)整，將每月通報(bào)所有差異改為每月通報(bào)存量差異1，但是年中（ 6 月），年底（ 12 月）按照所有差異進(jìn)行考核。分公司每月應(yīng)針對(duì)存量差異進(jìn)行清理修改，針對(duì)新量差異進(jìn)行問題核查 并 提出解決建議，省公司根據(jù)這兩部分的工作情況綜合對(duì)分公司進(jìn)行評(píng)價(jià)。 2 、 清理流程 1 ） 每 月 1 日 各業(yè)務(wù)平臺(tái)數(shù)據(jù)源、 CRM 及計(jì)費(fèi)數(shù)據(jù)源按既定格式準(zhǔn)時(shí) 把源文件送達(dá)指定 ftp 服務(wù)器 ，具體文件格式、時(shí)間點(diǎn)、 F T P地址見附件 1 。 2 ） 每月 4 日 18 點(diǎn) 前，完成核心資料一致性比對(duì)工作 ，封網(wǎng)期間可不進(jìn)行相應(yīng)數(shù)據(jù)比對(duì)任務(wù) ； 5 日 18 點(diǎn) 前下發(fā)差異清單給分公司，通知分公司數(shù)據(jù)質(zhì)量負(fù)責(zé)同志開始核查 。 3 ） 分公司在 10 日前將數(shù)據(jù)協(xié)查需求提交省網(wǎng)支、網(wǎng)優(yōu)、業(yè)務(wù)中心、 IT 中心，省公司各單位要在 15 日前配合分公司完成差異 數(shù) 1 存量差異指上月比對(duì)出來的、但在當(dāng)月清單中還存在的差異，新量差異指在上月清單中不存在、但在當(dāng)月清單中存在的差異。對(duì)存量差異進(jìn)行通報(bào)能夠體現(xiàn)出分公司數(shù)據(jù)清理的進(jìn)度，對(duì)分公司新量差異的原因核查能夠避免影響數(shù)據(jù)一致性問題的持續(xù)出現(xiàn)，從根本上保證數(shù)據(jù)質(zhì)量，避免前清后亂。 規(guī)范化的流程管理保證了數(shù)據(jù)一致性清理工作有條不紊的進(jìn)行。 比對(duì)結(jié)果處理方案中明確了對(duì)差異結(jié)果數(shù)據(jù)的清理方法，有效指導(dǎo)實(shí)際操作。 目 錄 數(shù)據(jù)組織 數(shù)據(jù)管理 系統(tǒng)支撐 運(yùn)營效果 經(jīng)驗(yàn)體會(huì) 12 江西電信企業(yè)信息化部 企業(yè)數(shù)據(jù)質(zhì)量管理系統(tǒng) 功能框架 任務(wù)配置定義 質(zhì)量分析報(bào)告 數(shù)據(jù)采集 稽核過程管控 數(shù)據(jù)同步 稽核計(jì)劃管理 同步處理 同步規(guī)則 稽核結(jié)果報(bào)告 創(chuàng)建計(jì)劃 待審核計(jì)劃 數(shù)據(jù)采集管控 數(shù)據(jù)預(yù)處理管控 數(shù)據(jù)比對(duì)管控 規(guī)則比對(duì)稽核 命令腳本稽核 存儲(chǔ)過程稽核 異常數(shù)據(jù)報(bào)告 數(shù)據(jù)修正考核 在執(zhí)行計(jì)劃 13 江西電信企業(yè)信息化部 已完成計(jì)劃 數(shù)據(jù)同步管控 數(shù)據(jù)同步報(bào)告 數(shù)據(jù)預(yù)處理 預(yù)處理規(guī)則 差異確認(rèn) 一致性 準(zhǔn)確性 完整性 系統(tǒng)管理 用戶管理 日志管理 統(tǒng)計(jì)分析 監(jiān)控告警 數(shù)據(jù)比對(duì) 數(shù)據(jù)校驗(yàn) 采集計(jì)劃 數(shù)據(jù)提取 解析、過濾 校驗(yàn)、規(guī)整 合并 比對(duì)方式 比對(duì)周期 稽核計(jì)劃管理 江西電信企業(yè)信息化部 14 一致性準(zhǔn)確性完整性 稽核計(jì)劃管理 數(shù)據(jù)采集 數(shù)據(jù)預(yù)處理 數(shù)據(jù)比對(duì) 數(shù)據(jù)同步 稽核過程管控 數(shù)據(jù)采集 江西電信企業(yè)信息化部 15 稽核計(jì)劃管理 數(shù)據(jù)采集 數(shù)據(jù)預(yù)處理 數(shù)據(jù)比對(duì) 數(shù)據(jù)同步 稽核過程管控 采集計(jì)劃管理 采集計(jì)劃管理是把采集請(qǐng)求的信息如采集的范圍、時(shí)間等進(jìn)行管理。 數(shù)據(jù)提取是根據(jù)采集的范圍以及時(shí)間向 MBOSS或網(wǎng)元業(yè)務(wù)平臺(tái)提取數(shù)據(jù)。有批量采集和單個(gè)采集。 數(shù)據(jù)校驗(yàn) 數(shù)據(jù)校驗(yàn)是對(duì)從 MBOSS或網(wǎng)元業(yè)務(wù)平臺(tái)提取出來的數(shù)據(jù)進(jìn)行文件名稱、文件大小、采集點(diǎn)等完整性的校驗(yàn)。 數(shù)據(jù)提取 文件 FTP采集 實(shí)時(shí)接口查詢 人工取數(shù)輸入 數(shù)據(jù)采集根據(jù)采集請(qǐng)求，向 IT系統(tǒng)或網(wǎng)元提取原始數(shù)據(jù) ,數(shù)據(jù)的完整性校驗(yàn)。 數(shù)據(jù)預(yù)處理 江西電信企業(yè)信息化部 16 稽核計(jì)劃管理 數(shù)據(jù)采集 數(shù)據(jù)預(yù)處理 數(shù)據(jù)比對(duì) 數(shù)據(jù)同步 稽核過程管控 數(shù)據(jù)解析 提取原始數(shù)據(jù)集中的有效信息，并根據(jù)編碼規(guī)則對(duì)其統(tǒng)一編碼，經(jīng)過解析后的數(shù)據(jù)為標(biāo)準(zhǔn)格式數(shù)據(jù) 。 數(shù)據(jù)過濾 過濾是刪除標(biāo)準(zhǔn)格式數(shù)據(jù)中無用或重復(fù)的數(shù)據(jù) 。 數(shù)據(jù)校驗(yàn) 數(shù)據(jù)歸整 對(duì)經(jīng)過過濾、校驗(yàn)的數(shù)據(jù)進(jìn)行歸整，輸出為標(biāo)準(zhǔn)數(shù)據(jù)。 根據(jù)校驗(yàn)規(guī)則對(duì)數(shù)據(jù)的有效性進(jìn)行判斷 數(shù)據(jù)合并 數(shù)據(jù)合并是對(duì)經(jīng)過檢驗(yàn)、歸整的不同網(wǎng)元平臺(tái)或 IT系統(tǒng)的數(shù)據(jù)進(jìn)行合并，輸出為可比對(duì)的標(biāo)準(zhǔn)格式數(shù)據(jù) 數(shù)據(jù)預(yù)處理是對(duì)采集到的原始數(shù)據(jù)集進(jìn)行解析、過濾、校驗(yàn)以及修復(fù)等處理的過程，處理后的數(shù)據(jù)為符合編碼規(guī)則、可直接用于數(shù)據(jù)比對(duì)的標(biāo)準(zhǔn)格式數(shù)據(jù)。 數(shù)據(jù)比對(duì) 江西電信企業(yè)信息化部 17 稽核計(jì)劃管理 數(shù)據(jù)采集 數(shù)據(jù)預(yù)處理 數(shù)據(jù)比對(duì) 數(shù)據(jù)同步 稽核過程管控 采用規(guī)則庫配置，實(shí)現(xiàn)數(shù)據(jù)比對(duì) 比對(duì)方式 定義規(guī)則庫 存儲(chǔ)過程 命令腳本 數(shù)據(jù)比對(duì)根據(jù)比對(duì)方式和比對(duì)周期，對(duì)提供的標(biāo)準(zhǔn)化數(shù)據(jù)進(jìn)行兩兩比對(duì) ,查找數(shù)據(jù)雙方的差異。 比對(duì)周期 即時(shí)比對(duì) 定時(shí)比對(duì) 周期性比對(duì) 采用存儲(chǔ)過程，實(shí)現(xiàn)數(shù)據(jù)比對(duì) 采用命令腳本，實(shí)現(xiàn)數(shù)據(jù)比對(duì) 立即開始數(shù)據(jù)比對(duì) 設(shè)定某個(gè)時(shí)間，進(jìn)行數(shù)據(jù)比對(duì) 設(shè)定某個(gè)周期性時(shí)間點(diǎn)，如每月 1號(hào)，進(jìn)行數(shù)據(jù)比對(duì) 數(shù)據(jù)同步 -1 江西電信企業(yè)信息化部 18 稽核計(jì)劃管理 數(shù)據(jù)采集 數(shù)據(jù)預(yù)處理 數(shù)據(jù)比對(duì) 數(shù)據(jù)同步 稽核過程管控 數(shù)據(jù)同步 -2 江西電信企業(yè)信息化部 19 稽核計(jì)劃管理 數(shù)據(jù)采集 數(shù)據(jù)預(yù)處理 數(shù)據(jù)比對(duì) 數(shù)據(jù)同步 稽核過程管控 CRM有其它無： 以 CRM系統(tǒng)數(shù)據(jù)為準(zhǔn)，利用數(shù)據(jù)質(zhì)量管理系統(tǒng)的數(shù)據(jù)同步功能進(jìn)行同步，同步目標(biāo)包括計(jì)費(fèi)等外圍 IT系統(tǒng)、業(yè)務(wù)平臺(tái)以及網(wǎng)元，無則增加，有則覆蓋。 CRM無其它有 : 交由人工干預(yù)，如果確認(rèn)需要 CRM增加、刪除、修改，則利用數(shù)據(jù)質(zhì)量管理系統(tǒng)的數(shù)據(jù)同步功能進(jìn)行同步，同步包括計(jì)費(fèi)等外圍IT系統(tǒng)、業(yè)務(wù)平臺(tái)及網(wǎng)元。 數(shù)據(jù)一致性 數(shù)據(jù)一致性范圍 江西電信企業(yè)信息化部 20 比對(duì)項(xiàng)目 源系統(tǒng) 周期 范圍 數(shù)據(jù)抽取方式 CRM與 HLR的后付費(fèi)用戶數(shù)據(jù) CRM、 HLR 每月 1號(hào) 全量 CRM接口表方式， HLR文件 FTP方式 CRM與 AAA的 C網(wǎng)用戶鑒權(quán)數(shù)據(jù) CRM、 AAA 每月 1號(hào) 全量 CRM接口表方式， AAA文件 FTP方式 CRM與彩鈴平臺(tái)的 C網(wǎng)彩鈴用戶數(shù)據(jù) CRM、彩鈴 每月 1號(hào) 全量 CRM接口表方式，彩鈴文件 FTP方式 CRM與 OCS平臺(tái) C網(wǎng)預(yù)付費(fèi)用戶數(shù)據(jù) CRM、 OCS 每月 1號(hào) 全量 CRM接口表方式， OCS文件 FTP方式 CRM與綜合 VPN用戶數(shù)據(jù) CRM、綜合 VPN 每月 1號(hào) 全量 CRM接口表方式，綜合 VPN文件 FTP方式 CRM與 AN-AAA的 EVDO用戶數(shù)據(jù) CRM、 AN-AAA 每月 1號(hào) 全量 CRM接口表方式， AN-AAA文件 FTP方式 CRM與終端管理系統(tǒng) CRM、終端管理系統(tǒng) 即時(shí)比對(duì) 全量 CRM接口表方式，終端管理系統(tǒng)接口表方式 CRM與資源管理系統(tǒng) CRM、資源管理系統(tǒng) 即時(shí)比對(duì) 全量 CRM接口表方式，資源管理系統(tǒng)接口表方式 CRM每日竣工彩鈴與彩鈴平臺(tái) CRM、彩鈴 每日 增量 CRM接口表方式，彩鈴 WebService接口 目 錄 數(shù)據(jù)組織 數(shù)據(jù)管理 系統(tǒng)支撐 運(yùn)營效果 經(jīng)驗(yàn)體會(huì) 21 江西電信企業(yè)信息化部 運(yùn)營效果 移動(dòng)業(yè)務(wù)一次性開通 江西電信企業(yè)信息化部 22 2009年 6月統(tǒng)計(jì)數(shù)據(jù)（系統(tǒng)上線使用 3個(gè)月） 0.2% 0.14% 運(yùn)營效果 - 收入挽回與服務(wù)提升 江西電信企業(yè)信息化部 23 收入挽回?cái)?shù)量 寬帶拆機(jī) 1863 彩鈴拆除 47055 寬帶速率下調(diào) 1227 計(jì)費(fèi)補(bǔ)錄 1505 HLR拆機(jī) 2144 VPDN拆機(jī) 132 避免投訴數(shù)量 彩鈴等業(yè)務(wù)平臺(tái)補(bǔ)錄 4815 移動(dòng)網(wǎng)元補(bǔ)錄 5232 寬帶速率提高 5381 計(jì)費(fèi)拆機(jī) 189 預(yù)付費(fèi)補(bǔ)錄 351 本地網(wǎng) 預(yù)計(jì)年效益（元） 避免投訴數(shù) 南昌 883760 3769 九江 166323 6337 上饒 284040 1081 撫州 170628 738 宜春 687960 730 吉安 526272 2267 贛州 497628 415 景德鎮(zhèn) 189321 1452 萍鄉(xiāng) 107430 1094 新余 71840 887 鷹潭 57444 182 全省 3642646 18952 目 錄 數(shù)據(jù)組織 數(shù)據(jù)管理 系統(tǒng)支撐 運(yùn)營效果 經(jīng)驗(yàn)體會(huì) 24 江西電信企業(yè)信息化部 形成長效工作機(jī)制的保證 江西電信企業(yè)信息化部 25 收入挽回、服務(wù)提升 基礎(chǔ)管理 支撐隊(duì)伍： 形成省、市兩級(jí)互動(dòng)，專崗支撐的數(shù)據(jù)質(zhì)量稽核、清理隊(duì)伍 。 管理流程： 建立數(shù)據(jù)比對(duì)規(guī)則、處理流程、問題收集、通報(bào)機(jī)制 系統(tǒng)支撐： 以 CRM為核心的數(shù)據(jù)質(zhì)量比對(duì)系統(tǒng) 。 領(lǐng)導(dǎo)重視 省公司領(lǐng)導(dǎo)重視： 省公司領(lǐng)導(dǎo)高度重視， 2009年成立數(shù)據(jù)管理能力提升TOP， 2010年成立數(shù)據(jù)應(yīng)用能力提升 TOP。 納入分公司領(lǐng)導(dǎo)考核：數(shù)據(jù)管理納入分公司領(lǐng)導(dǎo)KPI考核，有助實(shí)現(xiàn)長效推進(jìn)。 集團(tuán)要求 收入保障： 以集團(tuán)收