國網(wǎng)數(shù)據(jù)中心_第1頁
國網(wǎng)數(shù)據(jù)中心_第2頁
國網(wǎng)數(shù)據(jù)中心_第3頁
國網(wǎng)數(shù)據(jù)中心_第4頁
國網(wǎng)數(shù)據(jù)中心_第5頁
已閱讀5頁,還剩83頁未讀, 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)

文檔簡介

1、國網(wǎng)數(shù)據(jù)中心概念 數(shù)據(jù)建 模設(shè)計(jì) 梳理采 集 (ETL) 數(shù)據(jù) 存儲 數(shù)據(jù)服 務(wù)總線 數(shù)據(jù)中心建設(shè)任務(wù) 數(shù)據(jù)整合3統(tǒng)一(模型、數(shù)據(jù)源、口 徑) 綜合分析橫向分析 專業(yè)應(yīng)用縱向關(guān)聯(lián)分析 數(shù)據(jù)共享數(shù)據(jù)服務(wù)、企業(yè)總線 3 數(shù)據(jù)中心目標(biāo)架構(gòu) 展示層 數(shù)據(jù)分析 應(yīng)用層 數(shù)據(jù) 集市層 企業(yè)數(shù)據(jù)倉庫(EDW) 數(shù)據(jù) 存儲層 數(shù)據(jù)源層 跨專業(yè)綜合分析 營銷分析 財務(wù)分析 生產(chǎn)分析 設(shè)備分析 人力分析計(jì)劃分析 綜合統(tǒng)計(jì)分析 電力市場分析 營銷生產(chǎn)電力市場綜合 ERP緊耦合業(yè)務(wù)應(yīng)用數(shù)據(jù) 營銷、生產(chǎn)、綜合等業(yè)務(wù)應(yīng)用和其它外部數(shù)據(jù) DSO PSA InfoCube 物資分析 項(xiàng)目分析 跨專業(yè) 綜合集市 企業(yè)門戶企業(yè)門

2、戶 ODS 數(shù)據(jù)抽取 數(shù)據(jù)整理 數(shù)據(jù)轉(zhuǎn)換 數(shù)據(jù)匯總 集中存儲 數(shù)據(jù)分析 應(yīng)用方式 展現(xiàn)方式 源系統(tǒng) 4 數(shù)據(jù)中心執(zhí)行架構(gòu) 批處理服務(wù) 性能與可用性服務(wù) 通用服務(wù) 最終用戶訪問數(shù)據(jù)抽取 數(shù)據(jù)源 系統(tǒng)、非系統(tǒng) 數(shù)據(jù)存儲 知識發(fā)現(xiàn) 在線分析 查詢 數(shù)據(jù)訪問 報表報表 元數(shù)據(jù)管理服務(wù) 技術(shù)元數(shù)據(jù)業(yè)務(wù)元數(shù)據(jù) 元數(shù)據(jù)知識庫 數(shù)據(jù)倉庫架構(gòu) 數(shù)據(jù)訪問 數(shù)據(jù)訪問架構(gòu) 門戶系 統(tǒng) 數(shù)據(jù)全域服務(wù) 任務(wù)重啟與 恢復(fù) 任務(wù)調(diào)度 監(jiān)控 被拒絕數(shù)據(jù) 管理 錯誤處理 異常 日志與審核 跟蹤 文件傳輸幫 助 數(shù)據(jù)歸檔 線程管理參數(shù)化 文檔管理服務(wù) 數(shù)據(jù)注解 應(yīng)用連接服務(wù) 中間件連接 器 抽取 轉(zhuǎn)換 數(shù)據(jù)集市 數(shù)據(jù)倉庫 加載 數(shù)

3、據(jù)緩存 ODS 排序過濾 清洗 抽取 轉(zhuǎn)換 關(guān)聯(lián) 更新 加載 DSO 套裝軟件業(yè)務(wù) 5 數(shù)據(jù)中心物理架構(gòu) 業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫服務(wù)器 心跳線 DSO/DM 磁帶庫 光纖交換機(jī) 光纖交換機(jī) 磁盤柜 存儲 WEB 備份服務(wù)器 BI 應(yīng)用服務(wù)器群 ETL/Monitor/Analysis ETL Analysis HP ODSDW/DM BI應(yīng)用服務(wù) 器可由多個 服務(wù)器組成 應(yīng)用集群 數(shù)據(jù)中心建設(shè)的終極目標(biāo) 統(tǒng)一且完善 的企業(yè)信息 模型 統(tǒng)一數(shù)據(jù)源、 統(tǒng)一數(shù)據(jù)口 徑 一致的數(shù)據(jù) 出入口(數(shù) 據(jù)服務(wù)總線) 管控中心 (各種專業(yè) 分析) 企業(yè)統(tǒng)一數(shù)據(jù)模型 數(shù)據(jù)邊界頂層信息模型 實(shí)現(xiàn)最終目標(biāo)的困難 數(shù)據(jù)源不健全

4、、數(shù)據(jù)質(zhì)量差 模型統(tǒng)一設(shè)計(jì)工作量大 底層建設(shè)成效緩慢 10 網(wǎng)省電力數(shù)據(jù)應(yīng)用所面臨的挑戰(zhàn) 業(yè)務(wù)挑戰(zhàn) 現(xiàn)有分析系統(tǒng)僅提供簡單的報表能力,功 能單薄 領(lǐng)導(dǎo)層無法從企業(yè)全局角度出發(fā)對企業(yè)各 個業(yè)務(wù)條線進(jìn)行跨業(yè)務(wù)、多角度、多層次 的綜合分析 業(yè)務(wù)分析系統(tǒng)多集中于各自專業(yè)領(lǐng)域,而 跨業(yè)務(wù)專題的分析應(yīng)用能力尚不具備 存在相同數(shù)據(jù)多頭上報并且上報數(shù)據(jù)不一 致的問題 缺乏對現(xiàn)有數(shù)據(jù)的高級分析應(yīng)用,沒有合 理地發(fā)揮和利用網(wǎng)省電力業(yè)務(wù)數(shù)據(jù)資產(chǎn)的 價值 技術(shù)挑戰(zhàn) 各個業(yè)務(wù)系統(tǒng)相互獨(dú)立,業(yè)務(wù)人員難以進(jìn) 行跨系統(tǒng)業(yè)務(wù)分析 現(xiàn)有分析型系統(tǒng)與相應(yīng)生產(chǎn)型系統(tǒng)耦合性 較強(qiáng),受到生產(chǎn)型系統(tǒng)影響較大,缺乏對 全業(yè)務(wù)分析的支持 數(shù)據(jù)

5、不一致問題較嚴(yán)重,對于相同業(yè)務(wù)數(shù) 據(jù)存在多個不同版本 各業(yè)務(wù)系統(tǒng)自行管理數(shù)據(jù),業(yè)務(wù)數(shù)據(jù)的含 義在企業(yè)的各個部門內(nèi)存在不一致的解釋 各類業(yè)務(wù)系統(tǒng)內(nèi)數(shù)據(jù)質(zhì)量較低 業(yè)務(wù)因素 數(shù)據(jù)分析類型劃分不夠明確 缺少統(tǒng)一的報表與指標(biāo)體系規(guī)范 缺乏明確的數(shù)據(jù)認(rèn)責(zé) 技術(shù)因素 缺乏規(guī)范的數(shù)據(jù)架構(gòu) 缺乏明確的數(shù)據(jù)定義 數(shù)據(jù)分布不合理 數(shù)據(jù)模型不一致 數(shù)據(jù)管理不規(guī)范 缺乏企業(yè)級整合的數(shù)據(jù) 缺乏有力的系統(tǒng)實(shí)施和使用管控機(jī)制 數(shù)據(jù)中心的建設(shè)策略 短期見效、應(yīng)用驅(qū)動 展現(xiàn)全局指標(biāo)數(shù)據(jù),早出成果,短期見效,以應(yīng)用促建設(shè) 非源頭數(shù)據(jù)直接導(dǎo)入,健全全局類指標(biāo)數(shù)據(jù) 轉(zhuǎn)移部分業(yè)務(wù)系統(tǒng)查詢功能 切斷統(tǒng)計(jì)途徑 推動數(shù)據(jù)中心應(yīng)用 數(shù)據(jù)中心建設(shè)

6、最終是為解決業(yè)務(wù)部門專業(yè)分析能力而服務(wù),在這個逐步推進(jìn)、 不斷完善成熟的過程中,應(yīng)著重解決影響應(yīng)用實(shí)用性不強(qiáng)的如下幾點(diǎn): q好的經(jīng)驗(yàn)、方法和操作流程是關(guān)鍵,促進(jìn)信任 關(guān)系的建立,解決互不信任的局面。 q在一套有效的方法的指導(dǎo)下,同時遵照一個好 的流程,就容易得到領(lǐng)導(dǎo)支持,得到業(yè)務(wù)人員的 有效參與和技術(shù)人員的有力配合 q解決長周期項(xiàng)目中期沒有任何產(chǎn)出的現(xiàn)狀 q消除領(lǐng)導(dǎo)及業(yè)務(wù)人員對數(shù)據(jù)中心建設(shè)疑慮 q建設(shè)期間、獲取業(yè)務(wù)人員對實(shí)施過程中的認(rèn)可 和支持,從而不斷增強(qiáng)他們對項(xiàng)目的信心及應(yīng)用 實(shí)用性的肯定 q解決企業(yè)數(shù)據(jù)“進(jìn)口”與“出口”數(shù)據(jù)統(tǒng)一 q切斷網(wǎng)省業(yè)務(wù)人員獲取統(tǒng)計(jì)數(shù)據(jù)的其他來源, 統(tǒng)一定義從數(shù)據(jù)

7、中心獲取 q切斷業(yè)務(wù)應(yīng)用向總部交換數(shù)據(jù)的其他途徑 123 業(yè)務(wù)部門主導(dǎo) 過程中不斷出成果 切斷原有數(shù)據(jù)統(tǒng)計(jì)、匯報方式 數(shù)據(jù)中心的建設(shè)方式 1、自頂向下(追溯法分析應(yīng)用法) 既先分析報表中指標(biāo)數(shù)據(jù),再根據(jù)指標(biāo)的構(gòu)成進(jìn)行追溯分析,直 至建設(shè)粒度到最小的、不可再分的業(yè)務(wù)細(xì)節(jié)數(shù)據(jù);這種方式有利 于梳理統(tǒng)計(jì)類指標(biāo),分析企業(yè)中各統(tǒng)計(jì)指標(biāo)的口徑。側(cè)重縱向數(shù) 據(jù)關(guān)聯(lián)。 2、自下而上(數(shù)據(jù)整合法) 這種建設(shè)思路是先建立企業(yè)的概念模型,然后利用數(shù) 據(jù)倉庫和企 業(yè)建模標(biāo)準(zhǔn)等思想進(jìn)行全面的數(shù)據(jù)模型設(shè)計(jì)、物理模型設(shè)計(jì)。側(cè) 重橫向分析和標(biāo)準(zhǔn)建設(shè)。 3、折中建設(shè) 建設(shè)方法對比 方法方法1. 1. 先數(shù)據(jù)整合先數(shù)據(jù)整合 、再

8、構(gòu)建分析應(yīng)用、再構(gòu)建分析應(yīng)用 方法方法2. 2. 先構(gòu)建分析先構(gòu)建分析 應(yīng)用、再進(jìn)行數(shù)據(jù)整應(yīng)用、再進(jìn)行數(shù)據(jù)整 合(或者不進(jìn)行全局合(或者不進(jìn)行全局 整合)整合) 方法方法3. 3. 邊構(gòu)建分析邊構(gòu)建分析 應(yīng)用、邊進(jìn)行數(shù)據(jù)整應(yīng)用、邊進(jìn)行數(shù)據(jù)整 合合 優(yōu)勢挑戰(zhàn)適用于 業(yè)務(wù)較為簡單或業(yè)務(wù)需 求明確 數(shù)據(jù)基礎(chǔ)較好 有成熟建模經(jīng)驗(yàn) 業(yè)務(wù)條線復(fù)雜、數(shù)據(jù)基 礎(chǔ)水平不一、應(yīng)用需求 層次不同 要具備成熟的數(shù)據(jù)標(biāo)準(zhǔn)和數(shù) 據(jù)模型 數(shù)據(jù)整合投入較大,短期內(nèi) 與分析應(yīng)用收益不能相符 可實(shí)行有效的數(shù)據(jù)質(zhì)量 管理 可快速進(jìn)行分析應(yīng)用的 擴(kuò)展 分析應(yīng)用快速見效數(shù)據(jù)質(zhì)量無法保障 只能滿足部門級使用 分析應(yīng)用快速見效 逐步深化的

9、建設(shè)方法, 兼顧效率和可擴(kuò)展性 調(diào)動業(yè)務(wù)驅(qū)動力工作方法的 統(tǒng)一一致 建設(shè)團(tuán)隊(duì)的有效分工、協(xié)作 建議采用方法3進(jìn)行數(shù)據(jù)中心數(shù)據(jù)整合的建設(shè) 分析應(yīng)用演進(jìn) 細(xì)節(jié)數(shù)據(jù) 單指標(biāo)分析 綜合分析 專業(yè)分析建設(shè)方法 16 業(yè)務(wù)驅(qū)動力梳 理 分工協(xié)作模式 確認(rèn) 建設(shè)任務(wù)分 工 實(shí)施驗(yàn)證 q業(yè)務(wù)部門專業(yè)分析建 設(shè)驅(qū)動力調(diào)研 q按專業(yè)分析建設(shè)指導(dǎo) 思路,深化業(yè)務(wù)部門專 業(yè)分析需求調(diào)研 q按數(shù)據(jù)耦合度分工建 設(shè) q可按源系統(tǒng)接入管理 、數(shù)據(jù)整合管理、分析 應(yīng)用建設(shè)管理的方式分 工建設(shè) q組建專業(yè)分析應(yīng)用建 設(shè)團(tuán)隊(duì),同數(shù)據(jù)中心運(yùn) 維團(tuán)隊(duì)建立分工協(xié)作機(jī) 制,有效推進(jìn)數(shù)據(jù)整合 工作 q按試點(diǎn)、推廣、驗(yàn)證 的數(shù)據(jù)中心建設(shè)流程

10、迭 代完成數(shù)據(jù)中心逐條線 建設(shè)策略的部署 17 選擇合適專業(yè)分析應(yīng)用選擇合適專業(yè)分析應(yīng)用 滿足業(yè)務(wù)部門需要量身 定制的業(yè)務(wù)需求 生產(chǎn)分析舉例 n典型日負(fù)荷曲線增長趨 勢分析 n峰谷差分析 n責(zé)任頻率合格率分析 n電壓合格率分析 n變壓器負(fù)載情況分析 安全生產(chǎn)分析舉例 n人身事故分析 n設(shè)備事故分析 n電網(wǎng)事故分析 n電力設(shè)施保護(hù)分析 n設(shè)備障礙情況分析 避免綜合統(tǒng)計(jì)查詢建 設(shè)涵蓋面廣、集中展 現(xiàn)指標(biāo)集合的現(xiàn)象 解決數(shù)據(jù)粒度粗放, 業(yè)務(wù)主題分析不夠深 入的問題 按專業(yè)分析條線逐步完 成數(shù)據(jù)整合,有利推動 一體化平臺數(shù)據(jù)中心的 建立 專業(yè)分析深入性強(qiáng)實(shí)施路線成熟度高 分析深入性強(qiáng),需求定義嚴(yán)謹(jǐn) 專

11、業(yè)分析內(nèi)部耦合性強(qiáng) 設(shè)計(jì)結(jié)構(gòu)要求 嚴(yán)謹(jǐn) 專業(yè)分析 18 數(shù)據(jù)數(shù)據(jù)中心共享演進(jìn)中心共享演進(jìn) p繼 續(xù) 完 善 數(shù) 據(jù) 交 換 平 臺 , 提 升 交 換 效 率 、 性 能 , 足 以 支 持 遠(yuǎn) 程 大 數(shù) 據(jù) 傳 輸 的 實(shí) 現(xiàn) 。 p在 服 務(wù) 質(zhì) 量 保 證 方 面 , 關(guān) 注 數(shù) 據(jù) 交 換 場 所 的 安 全 性 、 可 靠 性 。 p構(gòu) 建 數(shù) 據(jù) 交 換 接 口 區(qū) 數(shù) 據(jù) 接 口 規(guī) 范 , 隨 著 數(shù) 據(jù) 倉 庫 建 設(shè) 的 進(jìn) 度 而 擴(kuò) 展 接 口 區(qū) 數(shù) 據(jù) 規(guī) 范 。 綜合數(shù) 據(jù)交換 區(qū)域 營銷數(shù) 據(jù)交換 區(qū)域 生產(chǎn)數(shù) 據(jù)交換 區(qū)域 ERP數(shù)據(jù) 交換區(qū) 域 共享數(shù)據(jù)區(qū)

12、域 設(shè)計(jì) 完善優(yōu)化 完善特定業(yè)務(wù) 需求的級聯(lián)要 求 基本成型 完成基于細(xì)粒 度歷史數(shù)據(jù)的 專業(yè)分析數(shù)據(jù) 起步速成 完成基于粒度粗放 數(shù)據(jù)的綜合指標(biāo)查 詢數(shù)據(jù) 數(shù)據(jù)中心功能設(shè)計(jì) 20 展示層 數(shù)據(jù)分析 應(yīng)用層 數(shù)據(jù)集市層 八大業(yè)務(wù)應(yīng)用數(shù)據(jù)和其它外部數(shù)據(jù) 安全生產(chǎn)財務(wù)績效設(shè)備生產(chǎn) 企業(yè)數(shù)據(jù)倉庫(EDW) 數(shù)據(jù)倉庫層 數(shù)據(jù)的抽取/清洗/整合 數(shù)據(jù)源層 安全生產(chǎn)分析營銷分析財務(wù)績效分析 電網(wǎng)運(yùn)行分析 設(shè)備生產(chǎn)分析人力資源分析項(xiàng)目分析物資分析綜合統(tǒng)計(jì)分析 電網(wǎng)運(yùn)行 電力市場分析 人力資源 項(xiàng)目電力市場營銷物資 綜合統(tǒng)計(jì) 網(wǎng)省電力公司數(shù)據(jù)倉庫邏輯架構(gòu) 數(shù)據(jù)應(yīng)用分析通過 企業(yè)級數(shù)據(jù)倉庫及 數(shù)據(jù)集市提供數(shù)據(jù)

13、支持,并通過前端 展示層將分析的結(jié) 果用合適直觀的方 法展現(xiàn)給最終用戶 21 數(shù)據(jù)倉庫能力藍(lán)圖 數(shù)據(jù)倉庫 集中整合 信息描述 數(shù)據(jù)移動分析展現(xiàn) 質(zhì)量保障高級應(yīng)用 提供多維分析能力,使得用 戶能夠把一個實(shí)體的多項(xiàng)重 要屬性定義為多個維度進(jìn)行 深入分析,并能對不同維度 值的數(shù)據(jù)進(jìn)行比較;同時, 還需具備數(shù)據(jù)挖掘能力,幫 助業(yè)務(wù)分析人員在現(xiàn)有數(shù)據(jù) 中識別數(shù)據(jù)的模式,針對整 個企業(yè)的狀況和未來發(fā)展作 出較完整、合理、準(zhǔn)確的分 析和預(yù)測,從復(fù)雜難懂的數(shù) 據(jù)中發(fā)掘出指引企業(yè)發(fā)展需 要的路徑 提供標(biāo)準(zhǔn)的報表和圖表功能 來幫助不同管理層人員做出 正確決策;針對具體分析應(yīng) 用建立數(shù)據(jù)集市為前端提供 高效的數(shù)據(jù)查

14、詢和分析服務(wù) 為了方便整個數(shù)據(jù)倉庫保存信息的管理,需要具備強(qiáng)大的元數(shù)據(jù)管理 功能,以實(shí)現(xiàn)各類技術(shù)術(shù)語與流程在企業(yè)內(nèi)部的統(tǒng)一定義 通過數(shù)據(jù)倉庫,使得數(shù)據(jù)按照業(yè)務(wù)主題進(jìn)行存儲,完成對分 散數(shù)據(jù)的整合工作,形成企業(yè)內(nèi)部“唯一事實(shí)” 提供較強(qiáng)的數(shù)據(jù)抽取、轉(zhuǎn)換 與加載能力:能夠高效地將 前端業(yè)務(wù)分析所需要的各類 數(shù)據(jù)移動到數(shù)據(jù)倉庫內(nèi),根 據(jù)預(yù)先制定的業(yè)務(wù)規(guī)則對數(shù) 據(jù)進(jìn)行處理轉(zhuǎn)換使其符合目 標(biāo)數(shù)據(jù)格式,并根據(jù)前端展 現(xiàn)需求提供高性能數(shù)據(jù)加載 機(jī)制 數(shù)據(jù)倉庫應(yīng)該具備完善的數(shù) 據(jù)質(zhì)量管理機(jī)制,確保企業(yè) 內(nèi)部數(shù)據(jù)的一致性與準(zhǔn)確性, 提升數(shù)據(jù)倉庫分析結(jié)果的可 信性 22 數(shù)據(jù)應(yīng)用的業(yè)務(wù)目標(biāo) 根據(jù)對國際先進(jìn)電力企業(yè)

15、的研究,數(shù)據(jù)應(yīng)用工作可以通過提高四項(xiàng)能力(即電網(wǎng)安全運(yùn)營管理、電力營銷 及服務(wù)、財務(wù)績效分析和資源計(jì)劃及決策)來促進(jìn)電網(wǎng)的業(yè)務(wù)發(fā)展。 提高電力營銷管理及服務(wù)能力 通過對用電量、電費(fèi)、電價的分析,提高電量的 需求預(yù)測能力、價格制定能力 全面了解用電戶的電力消費(fèi)和繳費(fèi)情況,幫助制 定相關(guān)的用電政策和服務(wù)措施. 分析營銷手段及效果,提升營銷策略的有效性 提高電網(wǎng)安全運(yùn)營管理能力 通過對設(shè)備和電網(wǎng)的運(yùn)行狀況、檢修、缺陷、事 故的及時準(zhǔn)確掌握,提高設(shè)備和電網(wǎng)的監(jiān)控管理 能力,科學(xué)管理電網(wǎng)設(shè)備資源; 通過對安全人身傷亡事故的分析,提高事故管理 和防范能力 提高財務(wù)績效分析能力 反映企業(yè)單位的財務(wù)成果;指導(dǎo)

16、企業(yè)單位降低成本 和費(fèi)用,增加收入;充分利用資金,創(chuàng)造好的經(jīng)濟(jì) 水平 員工績效分析,從組織和個人兩個層面為績效管理 提供支撐依據(jù)。 提高資源計(jì)劃及決策能力 完善報表管理,為領(lǐng)導(dǎo)及時提供全面的關(guān)鍵業(yè)務(wù)信 息。通過國網(wǎng)業(yè)務(wù)運(yùn)行狀態(tài)的分析和監(jiān)控,提高信 息預(yù)測能力,為領(lǐng)導(dǎo)的科學(xué)決策提供保證, 電網(wǎng)用戶 前臺業(yè)務(wù)人員 后臺管理人員決策領(lǐng)導(dǎo) 數(shù)據(jù)分析應(yīng)用的業(yè)務(wù)目標(biāo) 通過構(gòu)建四項(xiàng)能力來促進(jìn)網(wǎng)省電力業(yè)務(wù)的發(fā)展 23 數(shù)據(jù)分析應(yīng)用基本涵蓋了網(wǎng)省電力所有業(yè)務(wù)數(shù)據(jù) 范圍 安全生產(chǎn)分析設(shè)備生產(chǎn)分 析 財務(wù)績效分析電網(wǎng)運(yùn)行分析電力市場分析 營銷分析人力資源分析物資管理分析項(xiàng)目建設(shè)分析 業(yè)務(wù)監(jiān)控 電量電費(fèi)電價分析 銷售

17、分析 市場開發(fā)分析 需求預(yù)測 營銷分析 線損信息分析 客戶服務(wù)分析 機(jī)構(gòu)構(gòu)成分析 定員定崗分析 人員組成分析 工資分析 教育培訓(xùn)分析 績效考核 報表與信息查詢 銷售分析 物資收入經(jīng)濟(jì)分析 物資消耗經(jīng)濟(jì)分析 物資庫存經(jīng)濟(jì)分析 分析預(yù)算 超時限分析 市場信息分析 建設(shè)情況分析 投資情況分析 投產(chǎn)效果分析 分析與國網(wǎng)公 司生產(chǎn)建設(shè)過 程中發(fā)生的各 類人身傷亡事 故相關(guān)的數(shù)據(jù) 統(tǒng)計(jì) 設(shè)備構(gòu)成分析 設(shè)備動態(tài)信息 分析 設(shè)備檢修分析 設(shè)備缺陷分析 設(shè)備試驗(yàn)分析 財務(wù)指標(biāo) 資金分析 成本分析 利潤和收益 分析 負(fù)荷分析 電壓質(zhì)量分析 電量平衡分析 網(wǎng)損分析 無功補(bǔ)償分析 電網(wǎng)保護(hù)設(shè)備分 析 交易量分析 交易

18、費(fèi)用分析 電力價格分析 市場需求預(yù)測 綜合分析 計(jì)劃統(tǒng)計(jì) 生產(chǎn)經(jīng)營指標(biāo)分析 用電營業(yè)指標(biāo)分析 電網(wǎng)運(yùn)行 產(chǎn)品成本、銷售收入和利潤 電網(wǎng)建設(shè) 安全指標(biāo) 24 公司領(lǐng)導(dǎo) 財務(wù)人員 生產(chǎn)人員 計(jì)劃人員 調(diào)度人員 人資部門人員 項(xiàng)目管理人員 科信管理人員 物資管理人員 營銷人員 電力交易人員 網(wǎng)省電力各層次用戶通過數(shù)據(jù)分析應(yīng)用而受益 25 保證設(shè)備綜合信息的完 整性和歷史性 從橫向確保完整性: 設(shè)備運(yùn)行的情況 設(shè)備消耗的水、煤、氣 記錄 設(shè)備運(yùn)行的可靠性記錄 記錄設(shè)備的測試信息 。 從縱向確保歷史性: 當(dāng)期 上期 歷史同期 歷年情況 。 設(shè)備管理監(jiān)控人員/ 后臺管理人員 數(shù)據(jù)整合支持 統(tǒng)一設(shè)備視圖 設(shè)

19、備臺帳信息 設(shè)備檢修 設(shè)備測試 設(shè)備故障 設(shè)備運(yùn)行 設(shè)備消耗 設(shè)備事故 設(shè)備環(huán)境 設(shè)備可靠性 其他信息 (ODS) 數(shù)據(jù)倉庫 ODS保障數(shù)據(jù)的時實(shí)可訪問性 數(shù)據(jù)倉庫保障數(shù)據(jù)的歷史性 統(tǒng)一信息視圖提供了快速訪問主題全面信息的能 力 某電力設(shè)備 26 數(shù)據(jù)倉庫建設(shè)策略比較 l 重復(fù)的ETL發(fā)開和數(shù)據(jù)整合,人力資源浪費(fèi) l 重復(fù)的ETL工具,前端分析工具,數(shù)據(jù)倉庫平 臺軟件的購買。 l 各自的數(shù)據(jù)模型設(shè)計(jì),集市之與集市之間潛在 的新一輪數(shù)據(jù)整合需求。 l 無豐富的企業(yè)全面業(yè)務(wù)數(shù)據(jù)支撐,無法提供跨 系統(tǒng)的業(yè)務(wù)分析能力 l 集市各自的指標(biāo)定義,在企業(yè)層面,容易出現(xiàn) 不一致 l 不符合一體化平臺建設(shè)要求

20、l 形成企業(yè)范圍內(nèi)統(tǒng)一信息視圖 l 建設(shè)統(tǒng)一、可重用的ETL流程 l ETL工具,前端分析工具、數(shù)據(jù)倉庫平臺單次 采購和開發(fā),有效降低TCO l 豐富的企業(yè)全面業(yè)務(wù)數(shù)據(jù)支撐,領(lǐng)導(dǎo)以及業(yè)務(wù) 人員能夠得到更加豐富的數(shù)據(jù) l 各業(yè)務(wù)部門可根據(jù)自身需求在統(tǒng)一數(shù)據(jù)倉庫平 臺上建設(shè)更深層次的高級數(shù)據(jù)分析應(yīng)用 l 建設(shè)元數(shù)據(jù)管理機(jī)制實(shí)現(xiàn)企業(yè)內(nèi)術(shù)語理解一致 l 建設(shè)統(tǒng)一的數(shù)據(jù)管理機(jī)制,提升數(shù)據(jù)質(zhì)量 推薦 實(shí)現(xiàn)方法I業(yè)務(wù)部門單獨(dú)建立各自數(shù)據(jù)集市, 無企業(yè)層面的統(tǒng)一的規(guī)化和協(xié)調(diào) 實(shí)現(xiàn)方法II信息部門牽頭統(tǒng)一建設(shè)企業(yè)數(shù)據(jù)倉庫 企業(yè)級數(shù)據(jù)模型建設(shè)目標(biāo)與方法 28 企業(yè)級概念 數(shù)據(jù)模型 企業(yè)級邏輯 數(shù)據(jù)模型 企業(yè) 主題

21、 主題邏輯數(shù) 據(jù)模型 物理數(shù)據(jù)模 型 指導(dǎo) 細(xì)化 概念數(shù)據(jù)模型邏輯數(shù)據(jù)模型物理數(shù)據(jù)模型 轉(zhuǎn)換 當(dāng)前已有成果當(dāng)前已有成果 在相當(dāng)長的時間內(nèi)在相當(dāng)長的時間內(nèi) ,還需要做的事情,還需要做的事情 數(shù)據(jù)模型建立過程 29 數(shù)據(jù)集市層 八大業(yè)務(wù)應(yīng)用數(shù)據(jù)和其它外部數(shù)據(jù) 數(shù)據(jù)倉庫層 數(shù)據(jù)源層 直接滿足上層數(shù)據(jù)分析應(yīng)用 要求查詢的高效性和有針對性 高度聚合,一般無明細(xì) 從技術(shù)而言是星型模式 數(shù)據(jù)分析模型 主題1主題2 主題n 基于主題域 側(cè)重于對企業(yè)范圍內(nèi)數(shù)據(jù) 進(jìn)行整合 明細(xì)數(shù)據(jù)與聚合數(shù)據(jù)共享 從技術(shù)而言是3NF模式 數(shù)據(jù)倉庫模型 數(shù)據(jù)模型在數(shù)據(jù)倉庫架構(gòu)中所處的位置 30 企業(yè)級概念數(shù)據(jù)建模目的 主題主題 主題

22、 主題主題 主題 主題 主題 主題 業(yè)務(wù) 數(shù)據(jù) 業(yè)務(wù) 數(shù)據(jù) 業(yè)務(wù) 數(shù)據(jù) 業(yè)務(wù) 數(shù)據(jù) 業(yè)務(wù) 數(shù)據(jù) 業(yè)務(wù) 數(shù)據(jù) 業(yè)務(wù) 數(shù)據(jù) 業(yè)務(wù) 數(shù)據(jù) 業(yè)務(wù) 數(shù)據(jù) 數(shù)據(jù)分類 企業(yè)級概念數(shù)據(jù)建模的目標(biāo)在于識別網(wǎng)省電力業(yè)務(wù)主要數(shù)據(jù)主題并根據(jù)各個數(shù)據(jù)主題間的邏輯關(guān)系劃分其 所屬數(shù)據(jù)主題域。 數(shù)據(jù)主題域集中反映了某方面的業(yè)務(wù)內(nèi)容,通常是同類或關(guān)聯(lián)關(guān)系較為緊密的數(shù)據(jù)主題的集合(如,設(shè)備 主題包括了設(shè)備臺帳、設(shè)備運(yùn)行相關(guān)事件等多個數(shù)據(jù)主題)。數(shù)據(jù)主題是任何可以區(qū)分的人、地點(diǎn)、事情 、事件或概念,信息圍繞它來保存。屬性是實(shí)體的特性或數(shù)據(jù)字段。 數(shù)據(jù)主題域是數(shù)據(jù)倉庫主題建模的基 礎(chǔ),通過細(xì)化數(shù)據(jù)主題域即可建立統(tǒng)一的數(shù)據(jù)倉庫模型。

23、 統(tǒng)一數(shù)據(jù)倉庫模型是網(wǎng)省電力公司數(shù)據(jù)倉庫進(jìn)行數(shù)據(jù)整合和集成的重要基礎(chǔ)。 31 企業(yè)級概念數(shù)據(jù)建模方法 l 數(shù)據(jù)主題梳理 通過仔細(xì)分析網(wǎng)省電力公司各類業(yè)務(wù)系統(tǒng)詳細(xì)說明,IT咨詢組從中梳理出網(wǎng)省電力公司 業(yè)務(wù)所產(chǎn)生和需要的主要數(shù)據(jù)并形成數(shù)據(jù)主題清單,這些數(shù)據(jù)主要包括主數(shù)據(jù)和事物數(shù)據(jù)兩部分:主數(shù) 據(jù)是指客戶、供應(yīng)商、設(shè)備臺帳等,而事務(wù)數(shù)據(jù)是指網(wǎng)省電力具體業(yè)務(wù)運(yùn)營所產(chǎn)生的各種事務(wù)型數(shù)據(jù), 例如設(shè)備檢測數(shù)據(jù)、調(diào)度交易數(shù)據(jù)等。 l 數(shù)據(jù)主題域設(shè)計(jì) 根據(jù)分析整理得到的數(shù)據(jù)主題清單,并結(jié)合這些數(shù)據(jù)的特點(diǎn)和網(wǎng)省電力具體業(yè)務(wù)關(guān) 注點(diǎn)即可歸納抽像出數(shù)據(jù)主題域。主題域集中反映了主題相關(guān)的所有業(yè)務(wù)內(nèi)容,通常是同類或關(guān)聯(lián)

24、關(guān)系 較為緊密的數(shù)據(jù)主題集合 業(yè)務(wù)系統(tǒng)詳 細(xì)說明 數(shù)據(jù)梳理 數(shù)據(jù)主題清 單 歸納整理 數(shù)據(jù)主題域 32 數(shù)據(jù)主題域劃分 安全 客戶 產(chǎn)品 設(shè)備 電網(wǎng) 財務(wù) 資產(chǎn) 物資 項(xiàng)目 人員與組織 綜合管理 事故信息事故損失安全記錄 客戶基本信息客戶信用客戶電價客戶表計(jì)信息客戶變更客戶消費(fèi)電能客戶帳單 客戶負(fù)荷客戶繳費(fèi)客戶產(chǎn)品訂購客戶服務(wù) 產(chǎn)品基本信息產(chǎn)品價格產(chǎn)品質(zhì)量保障服務(wù)流程定義 設(shè)備臺帳設(shè)備運(yùn)行設(shè)備檢修設(shè)備測試設(shè)備消耗設(shè)備環(huán)境設(shè)備故障設(shè)備可靠性 電力成本電力價格電網(wǎng)結(jié)構(gòu)電力調(diào)度電量交易電力市場預(yù)測 科目銀行憑證會計(jì)帳簿財務(wù)報表 資產(chǎn)卡片資產(chǎn)形成資產(chǎn)租賃資產(chǎn)借用資產(chǎn)變更資產(chǎn)調(diào)撥資產(chǎn)報廢清產(chǎn)核資 資產(chǎn)折

25、舊投融資資產(chǎn)報表 物資編碼物資分類物資供應(yīng)庫存信息出入庫管理 項(xiàng)目基本信息項(xiàng)目計(jì)劃信息項(xiàng)目設(shè)計(jì)信息 項(xiàng)目管理信息設(shè)備材料信息竣工決算信息投產(chǎn)成果信息 需求信息費(fèi)用信息合同信息招投標(biāo)信息 業(yè)績信息 職位信息 調(diào)動信息獎懲信息培訓(xùn)信息社保繳納勞保領(lǐng)用外事信息 人員基本信息薪酬福利信息社會保險信息勞動保障信息組織機(jī)構(gòu)信息 法律國際任務(wù)同業(yè)對標(biāo)審計(jì)信息紀(jì)檢監(jiān)察計(jì)劃統(tǒng)計(jì) 服務(wù)質(zhì)量考核服務(wù)績效分析 33 數(shù)據(jù)主題域詳細(xì)解釋 安全安全主題域用于描述公司運(yùn)營過程中的人身事故、電網(wǎng)事故和安全損失等信息 客戶客戶主題域主要由客戶的基本信息、計(jì)費(fèi)繳費(fèi)信息、客戶服務(wù)信息等組成 產(chǎn)品 產(chǎn)品主題描述國網(wǎng)公司提供的電能、熱

26、能與國網(wǎng)公司所提供服務(wù)的描述與價格信息以及 與服務(wù)質(zhì)量、服務(wù)效果相關(guān)的各類記錄 設(shè)備 設(shè)備主數(shù)據(jù)用于描述企業(yè)發(fā)電、輸電、配電、供電四大類在網(wǎng)運(yùn)行設(shè)備資源、運(yùn)行和調(diào) 度信息、測試、破壞和環(huán)境等信息 電網(wǎng) 電網(wǎng)主題域包含了市場的電力價格、預(yù)測相關(guān)信息,網(wǎng)間、電廠電網(wǎng)的交易信息,以及 電力調(diào)度中設(shè)備產(chǎn)生的相關(guān)數(shù)據(jù) 財務(wù)財務(wù)主題域描述了財務(wù)的核算、預(yù)算、固定資產(chǎn)、資金數(shù)據(jù)以及會計(jì)賬目等相關(guān)數(shù)據(jù) 資產(chǎn)資產(chǎn)主題域描述了與國網(wǎng)公司各類有形/無形、金融/非金融資產(chǎn)相關(guān)的各類信息 物資物資主題域描述了與國網(wǎng)公司的物資與物資管理相關(guān)的各類信息 項(xiàng)目 項(xiàng)目主數(shù)據(jù)表達(dá)了基建項(xiàng)目、跨區(qū)電網(wǎng)項(xiàng)目、投資項(xiàng)目、大修項(xiàng)目、技改

27、項(xiàng)目、科技項(xiàng) 目、用戶項(xiàng)目和信息化項(xiàng)目的全生命周期的信息 人員與組織人員與組織主題域用于描述公司業(yè)務(wù)活動中人和組織結(jié)構(gòu)信息 綜合管理綜合管理主題域描述同業(yè)對標(biāo)、計(jì)劃統(tǒng)計(jì)、審計(jì)、法律、紀(jì)檢、國際任務(wù)信息 34 概念邏輯模型 35 主題域概念模型 產(chǎn)品 客戶 安全 設(shè)備 36 主題域概念模型(續(xù)1) 物資 電網(wǎng) 資產(chǎn) 財務(wù) 37 主題域概念模型(續(xù)2) 綜合管理 項(xiàng)目 人員與組織 38 數(shù)據(jù)建模一步工作: 在概念模型基礎(chǔ)上,進(jìn)行國網(wǎng)公司企業(yè)級邏輯數(shù)據(jù)模型的建設(shè) 安全 客戶 企業(yè)級邏輯數(shù)據(jù)模型包含近千個業(yè)務(wù)實(shí)體及其復(fù)雜的關(guān)系 巨大的挑戰(zhàn)! 企業(yè)級概念數(shù)據(jù)模型 細(xì)化 企業(yè)級邏輯數(shù)據(jù)模型 *企業(yè)級邏輯數(shù)

28、據(jù)模型的建設(shè)應(yīng)該以數(shù)據(jù)倉庫建設(shè)為線索,是數(shù)據(jù) 倉庫建設(shè)的重要工作之一 示例 數(shù)據(jù)中心建設(shè)目標(biāo)和架構(gòu) 40 國網(wǎng)數(shù)據(jù)中心整體建設(shè)目標(biāo)體系 電網(wǎng)安全管理能力 營銷管理與服務(wù)能力 財務(wù)績效分析能力 資源計(jì)劃決策能力 數(shù)據(jù)應(yīng)用 安全生產(chǎn)分析 財務(wù)績效分析 營銷分析 電網(wǎng)運(yùn)行分析 設(shè)備生產(chǎn)分析 人力資源分析 計(jì)劃統(tǒng)計(jì) 物資管理分析 電力市場分析 項(xiàng)目建設(shè)分析 41 綜合決策 綜合國網(wǎng)業(yè)務(wù)指標(biāo) 建立數(shù)學(xué)模型,綜合預(yù)測 完善關(guān)鍵績效指標(biāo)考核等應(yīng)用 制定策略,指導(dǎo)業(yè)務(wù)實(shí)踐 綜合決策 套裝軟件內(nèi)緊密耦合的專業(yè)分析 通用平臺專業(yè)分析 跨平臺的專業(yè)分析 . 專業(yè)分析 績效 預(yù)測 指標(biāo) 挖掘 人力生產(chǎn) 財務(wù) 套裝軟件

29、業(yè)務(wù)基礎(chǔ)數(shù)據(jù)整合 在套裝軟件內(nèi)部完成 非套裝軟件業(yè)務(wù)在通用平臺 整合完成 交換數(shù)據(jù) 基礎(chǔ)數(shù)據(jù)整合 層次:決策層 內(nèi)容: 指標(biāo)衡量 層次:管理層 內(nèi)容: 專業(yè)分析 綜合分析 物質(zhì) 項(xiàng)目設(shè)備 計(jì)劃 國際合作 營銷招投標(biāo) 營銷分析 生產(chǎn)分析 人力 分析 財務(wù) 分析 物質(zhì) 分析 項(xiàng)目 分析 設(shè)備 分析 計(jì)劃 分析 數(shù)據(jù)中心整體建設(shè)目標(biāo)體系在應(yīng)用架構(gòu)上的分解 42 基于通用平臺實(shí)現(xiàn) 套裝軟件營銷系統(tǒng)生產(chǎn)系統(tǒng) EDW-ODS 企業(yè)級數(shù)據(jù)倉庫 通用平臺前端 集 市 集 市 集 市 集 市 前端集市層數(shù)據(jù)倉庫層ODS源系統(tǒng) lDW中應(yīng)用國網(wǎng)統(tǒng)一的數(shù)據(jù)模型和數(shù)據(jù)標(biāo)準(zhǔn); l整合后的數(shù)據(jù)通過開放平臺前端進(jìn)行分析和展

30、現(xiàn); 風(fēng)險 可擴(kuò)展性較好,適應(yīng) 未來應(yīng)用需求的增長 有利于企業(yè)級數(shù)據(jù)模 型的建立 有利于系統(tǒng)間共享信 息的統(tǒng)一信息視圖建 立 43 數(shù)據(jù)中心數(shù)據(jù)架構(gòu) 數(shù)據(jù)訪問功能和方式 45 主要數(shù)據(jù)訪問功能 名稱名稱功能功能描述描述 報表 實(shí)現(xiàn)預(yù)定義和用戶自定義報 表功能 通過報表工具實(shí)現(xiàn)預(yù)定義報表的自動生成和分發(fā),并能夠靈 活的實(shí)現(xiàn)用戶自定義報表的功能。 即席查詢進(jìn)行準(zhǔn)實(shí)時的業(yè)務(wù)查詢 通常即席查詢的功能會涉及準(zhǔn)實(shí)時的業(yè)務(wù)信息,可以由ODS 區(qū)提供此類應(yīng)用,通過即席查詢工具,不需要非常專業(yè)的 SQL知識即可完成業(yè)務(wù)信息的即席查看。 聯(lián)機(jī)分析 利用OLAP分析手段實(shí)現(xiàn)多 維度的交叉分析 利用OLAP分析工具,

31、配合設(shè)計(jì)良好的OLAP數(shù)據(jù)模型,可 以完成業(yè)務(wù)人員對業(yè)務(wù)的分析需求。聯(lián)機(jī)分析的手段包括各 種圖形和表格的表現(xiàn),以及在其上進(jìn)行的多維度的交叉分析 ,幫助用戶快速定位和解決問題。 知識發(fā)現(xiàn) 利用數(shù)據(jù)挖掘等知識發(fā)現(xiàn)技 術(shù)實(shí)現(xiàn)特定的分析專題 用戶獲取有用信息的能力體現(xiàn)了數(shù)據(jù)倉庫系統(tǒng)的價值,通過 數(shù)據(jù)挖掘等高級統(tǒng)計(jì)分析技術(shù),企業(yè)能夠?qū)?shù)據(jù)源中有價值 的信息(知識)識別出來并建立模型,同時通過自動化或半 自動化的工具進(jìn)行分析。知識發(fā)現(xiàn)應(yīng)用根據(jù)專題的不同可采 用自頂向下或自底向上的方法,分別適應(yīng)假設(shè)驗(yàn)證和知識發(fā) 現(xiàn)型的應(yīng)用。 46 數(shù)據(jù)訪問類型、數(shù)據(jù)訪問復(fù)雜度和用戶層次三者間的 關(guān)系 復(fù) 雜 分 析 數(shù)據(jù)訪

32、問 復(fù)雜度 簡 單 分 析 初 級 用 戶 有經(jīng)驗(yàn)的用 戶 報表 數(shù)據(jù)分析 查詢 知識發(fā)現(xiàn) 47 數(shù)據(jù)訪問方式 有限制的交互靈活的交互 客戶端通過瀏覽器 訪問數(shù)據(jù) 靜態(tài)發(fā)布 靈活交互架構(gòu)是能夠提供最豐富功能的最新架構(gòu) 。除了與有限制交互相似的功能外,靈活交互架 構(gòu)能夠生成包含嵌入式、可供交互、可執(zhí)行內(nèi)容 的報表。這些可交互內(nèi)容允許用戶體驗(yàn)到接近于 客戶端/服務(wù)器模式工具開發(fā)的圖形界面使用感覺 有限制的交互架構(gòu)能夠讓用戶訪問實(shí)時數(shù)據(jù)。當(dāng) 用戶點(diǎn)擊鏈接來獲取報表的時候,系統(tǒng)允許用戶 在一系列參數(shù)中選擇自己需要的條件。這些 HTML頁面(可能是靜態(tài)形式,也可能是互動形 式)將被返回給Web服務(wù)器并展

33、現(xiàn)給最終用戶 靜態(tài)發(fā)布是最直觀的數(shù)據(jù)訪問架構(gòu)形式,用戶可以通過點(diǎn)擊 相關(guān)鏈接得到預(yù)先生成的報表。這些報表以HTML文件格式 存放在Web服務(wù)器內(nèi)。靜態(tài)發(fā)布的執(zhí)行架構(gòu)僅由Web服務(wù)器 和瀏覽器兩部分組成。報表通常是通過批量處理執(zhí)行產(chǎn)生的 數(shù)據(jù)訪問的實(shí)現(xiàn)方式是選擇和評價數(shù)據(jù)訪問工具的重要參考依據(jù),目前市場上主流的數(shù)據(jù)訪問實(shí)現(xiàn)方式 分為兩種: 客戶端-分析服務(wù)-數(shù)據(jù)存儲 客戶端為IE流覽器的數(shù)據(jù)訪問 第二種數(shù)據(jù)訪問方式因?yàn)楦菀撞渴鸷透俚木S護(hù)成本,被廣泛的使用和形成行業(yè)標(biāo)準(zhǔn) 開發(fā)過程組織 49 網(wǎng)省數(shù)據(jù)倉庫的演進(jìn)方法是以數(shù)據(jù)倉庫 分析能力和數(shù)據(jù)整合能力的提高為主線 索,提升數(shù)據(jù)管控能力,改進(jìn)數(shù)據(jù)質(zhì)

34、量 領(lǐng)導(dǎo)決策能力的提高 數(shù)據(jù)質(zhì)量的改進(jìn) 數(shù)據(jù)管理能力的提升 建立領(lǐng)導(dǎo)查詢系統(tǒng) 挑選重要的主題進(jìn)行數(shù)據(jù) 倉庫建設(shè) 提供聯(lián)機(jī)分析及綜合報表 數(shù)據(jù)倉庫基本建成 提供更全面的數(shù)據(jù)分析以及數(shù)據(jù)展現(xiàn) 可以對數(shù)據(jù)進(jìn)行更深層次的挖掘 網(wǎng)省數(shù)據(jù)中心建設(shè)演進(jìn)方法 50 國網(wǎng)數(shù)據(jù)倉庫的總體實(shí)施策略是以降低風(fēng)險為原則,通過試點(diǎn)建設(shè)積累經(jīng)驗(yàn),驗(yàn)證 方法,從而形成國網(wǎng)成熟的統(tǒng)一的數(shù)據(jù)模型標(biāo)準(zhǔn),數(shù)據(jù)管控方法和流程,數(shù)據(jù)倉庫 體系架構(gòu)。然后再大面積推廣。這樣可以保證整個國網(wǎng)數(shù)據(jù)中心的建設(shè)在控、有序。 推廣網(wǎng)省試點(diǎn)網(wǎng)省 數(shù)據(jù)模型規(guī)劃,提供基于業(yè)務(wù)數(shù)據(jù)主題 的高層數(shù)據(jù)邏輯模型和細(xì)節(jié)數(shù)據(jù)物理模 型 業(yè)務(wù)數(shù)據(jù)標(biāo)準(zhǔn)和代碼指標(biāo)準(zhǔn)確的建立

35、 設(shè)計(jì)數(shù)據(jù)倉庫技術(shù)架構(gòu) 制定數(shù)據(jù)標(biāo)準(zhǔn)管理及維護(hù)流程 制定數(shù)據(jù)質(zhì)量管理策略和方法 數(shù)據(jù)按其敏感性、重要性建立一套完 整的數(shù)據(jù)安全分級標(biāo)準(zhǔn) 試點(diǎn)的建設(shè) 宣貫推廣 經(jīng)驗(yàn)驗(yàn)證 執(zhí)行督導(dǎo) 典型經(jīng)驗(yàn) 數(shù)據(jù)模型標(biāo)準(zhǔn) 數(shù)據(jù)倉庫技術(shù)架構(gòu) 數(shù)據(jù)管理標(biāo)準(zhǔn) 業(yè)務(wù)數(shù)據(jù)標(biāo)準(zhǔn) 代碼指標(biāo)標(biāo)準(zhǔn) 采用試點(diǎn)先行,典型經(jīng)驗(yàn)指導(dǎo)的策略實(shí)行全國網(wǎng)范圍內(nèi)的數(shù)據(jù)倉庫建設(shè) 51 數(shù)據(jù)倉庫開發(fā)的人員和組織 52 數(shù)據(jù)倉庫開發(fā)的階段、任務(wù)和流程 計(jì)劃分析設(shè)計(jì)開發(fā)測試部署 項(xiàng)目管理 培訓(xùn)及運(yùn)行支持 復(fù)查期望目標(biāo) 定義方案藍(lán)圖 評估現(xiàn)狀能力 定義交付策略 評估風(fēng)險 定義ETL功能、技 術(shù)整合 設(shè)計(jì)開發(fā)執(zhí)行運(yùn)行 環(huán)境 制定ETL、BI產(chǎn)品 測試計(jì)劃 制

36、定UAT計(jì)劃 開發(fā)BI前臺展現(xiàn)組 件 安裝開發(fā)執(zhí)行運(yùn)行 環(huán)境 部署ETL、BI組件 測試計(jì)劃 完成產(chǎn)品測試 完成UAT測試 評估部署就緒條件 完成數(shù)據(jù)轉(zhuǎn)換 發(fā)布應(yīng)用程序 完成操作就緒測試 完成性能測試 ETL高層需求確 認(rèn) TTTTTT ETL開發(fā)流程 定義開發(fā)執(zhí)行運(yùn) 行環(huán)境需求 定義報表詳細(xì)規(guī)范 建立概念數(shù)據(jù)模型 定義終端用戶訪問 技術(shù)需求 定義數(shù)據(jù)分析需 求 性能測試計(jì)劃 建立邏輯數(shù)據(jù)模型建立物理數(shù)據(jù)模型 完成組件測試 在整個數(shù)據(jù)倉庫開發(fā)過程中,非常關(guān)鍵的任務(wù)。需要設(shè)入較多的資源 53 計(jì)劃階段 計(jì)劃階段 復(fù)查期望目標(biāo)評估現(xiàn)狀能力定義方案藍(lán)圖定義交付策略 回顧愿景及業(yè)務(wù)目標(biāo) 定義方案藍(lán)圖

37、確認(rèn)目標(biāo)業(yè)務(wù)流程 定義交付策略 TTTT 評定當(dāng)前業(yè)務(wù)流程 評定當(dāng)前的 能力、 性能、風(fēng)險 評定當(dāng)前技術(shù)架構(gòu) 評定當(dāng)前應(yīng)用程序 評定當(dāng)前組織架構(gòu) 評定元數(shù)據(jù)及數(shù)據(jù)管控 評定當(dāng)前支撐能力 應(yīng)用解決方案 技術(shù)解決方案 業(yè)務(wù)流程變更 解決方案 運(yùn)維解決方案 定義開發(fā)策略 定義試點(diǎn)策略 定義測試策略 定義部署策略 定義元數(shù)據(jù)管理 定義數(shù)據(jù)管控策略 54 分析階段 分析階段 復(fù)查期望目標(biāo) 定義數(shù)據(jù)分析需求 定義ETL高層需求 TT 建立概念數(shù)據(jù)模型 定義開發(fā)、執(zhí)行、運(yùn)行 環(huán)境的具體需求 定義用戶對數(shù)據(jù)訪問的 技術(shù)需求 制定UAT測試計(jì)劃 制定產(chǎn)品測試計(jì)劃 制定性能測試計(jì)劃 評估風(fēng)險 55 設(shè)計(jì)階段 設(shè)計(jì)

38、階段 定義ETL功能技術(shù)整合 方案高層需求 定義報表詳細(xì)規(guī)范 TT 建立邏輯數(shù)據(jù)模型 制定技術(shù)架構(gòu)及組裝測 試計(jì)劃 設(shè)計(jì)開發(fā)、執(zhí)行、運(yùn)行 環(huán)境的準(zhǔn)備 56 開發(fā)階段 開發(fā)階段 ETL開發(fā)流程 BI前臺組件開發(fā) TT 建立物理數(shù)據(jù)模型 ETL、報表組件測試計(jì) 劃 開發(fā)、執(zhí)行、運(yùn)行環(huán)境 的準(zhǔn)備 57 測試階段 測試階段 組件測試 產(chǎn)品測試 TT 性能測試 UAT測試 確認(rèn)組件測試周期 編寫組件測試腳本 發(fā)布組件測試環(huán)境 更新測試源數(shù)據(jù) 執(zhí)行組件測試,并將測試通報錯誤及時修復(fù) 確認(rèn)產(chǎn)品測試周期 編寫產(chǎn)品測試腳本 發(fā)布產(chǎn)品測試環(huán)境 執(zhí)行產(chǎn)品測試,并將測試通報錯誤及時修復(fù) 確認(rèn)性能測試周期 編寫性能測試

39、腳本 發(fā)布性能測試環(huán)境 執(zhí)行性能測試,并將測試通報錯誤及時修復(fù) 58 部署階段 部署階段 評估部署就緒條件 完成數(shù)據(jù)轉(zhuǎn)換 TT 完成部署就緒測試 發(fā)布應(yīng)用 評估應(yīng)用程序是否就緒評估技術(shù)架構(gòu)及基礎(chǔ)架構(gòu)是否就緒 評估部署站點(diǎn)是否部署就緒 評估國家電網(wǎng)最終用戶人員是否就緒并已培訓(xùn)完成 制定偶發(fā)性事件處理機(jī)制 列出部署就緒每一階段檢查點(diǎn) 準(zhǔn)備數(shù)據(jù)轉(zhuǎn)換就緒動作 準(zhǔn)備轉(zhuǎn)換所需正式數(shù)據(jù);清洗數(shù)據(jù);創(chuàng)建數(shù)據(jù)備份 執(zhí)行數(shù)據(jù)轉(zhuǎn)換動作 驗(yàn)證轉(zhuǎn)換后的數(shù)據(jù) 執(zhí)行部署測試 驗(yàn)證操作結(jié)果 錯誤修復(fù);管理及服務(wù)支持能力就緒 確認(rèn)操作就緒驗(yàn)證完成 通知部署、開發(fā)及上線實(shí)施團(tuán)隊(duì) 數(shù)據(jù)中心功能展示 財務(wù)杜邦專業(yè)分析 FI業(yè)務(wù)管理模

40、塊業(yè)務(wù)管理模塊 財務(wù)ERP業(yè)務(wù)管理模塊總共有7個分析主題;應(yīng)用到的分析查詢共有75 個;BW分析模型8個;用到的源系統(tǒng)分為2類:ECC P800和外部平面文 件;數(shù)據(jù)源總共有11個: 財務(wù)管理 ERP高級分析應(yīng)用ERP業(yè)務(wù)運(yùn)行指標(biāo) 杜 邦 財 務(wù) 分 析 體 系 地 市 公 司 對 標(biāo) 指 標(biāo) 總 賬 應(yīng) 收 應(yīng) 付 固 定 資 產(chǎn) 貸 款 業(yè) 務(wù) 量 統(tǒng) 計(jì) 憑 證 錯 誤 率 分 析 預(yù) 制 憑 證 完 成 情 況 財 務(wù) 開 放 記 賬 期 間 查 看 包含了13份報表,25個分析查詢,2個數(shù)據(jù)源。 杜邦財務(wù)分析體系詳細(xì)地為用戶或決策者提供了陜西省電力公司本部、物資公 司、信通公司及各地

41、市公司的所有財務(wù)狀況數(shù)據(jù)信息的綜合性分析平臺,用戶通 過它就可以對各公司的月度財務(wù)狀況及年度財務(wù)總結(jié)都有一個全面的掌握. 杜邦財務(wù)分析體系 模型結(jié)構(gòu)圖 其他專業(yè)分析 設(shè)備維護(hù)成本分析 電網(wǎng)發(fā)展 指標(biāo) 資產(chǎn)狀 況指標(biāo) 分析 財務(wù)分析 數(shù)據(jù)質(zhì)量監(jiān)控 數(shù)據(jù)質(zhì)量監(jiān)控 數(shù)據(jù)質(zhì)量監(jiān)控系統(tǒng)由數(shù)據(jù)監(jiān)控看板、數(shù)據(jù)修正、數(shù)據(jù)質(zhì)量分析及數(shù)據(jù)評測報 告等組成。幾個功能模塊并非獨(dú)立的,而是以綜合查詢分析平臺為基礎(chǔ)以數(shù)據(jù)修 正為紐帶緊密的結(jié)合起來通過層層推進(jìn)并迭代的方式,不斷促進(jìn)數(shù)據(jù)中心的數(shù)據(jù) 質(zhì)量的提高,同時也幫助各個業(yè)務(wù)系統(tǒng)提交各自的數(shù)據(jù)質(zhì)量。 數(shù)據(jù)中心 數(shù)據(jù)質(zhì)量提高 數(shù)據(jù)監(jiān)控板 發(fā)現(xiàn)數(shù)據(jù)錯誤 數(shù)據(jù)修正 手動執(zhí)行ET

42、L 數(shù)據(jù)質(zhì)量分析 分析業(yè)務(wù)系統(tǒng)數(shù)據(jù)質(zhì) 量原因及變化趨勢 通過數(shù)據(jù)監(jiān)控看 板發(fā)現(xiàn)數(shù)據(jù)錯誤, 針對錯誤聯(lián)系業(yè)務(wù) 系統(tǒng)運(yùn)維人員或業(yè) 務(wù)部門對業(yè)務(wù)數(shù)據(jù) 進(jìn)行糾正。 使用數(shù)據(jù)修正功 能對“臟數(shù)據(jù)”進(jìn) 行處理,可以手動 執(zhí)行ETL程序重新 抽取剔除錯誤數(shù)據(jù)。 每周根據(jù)數(shù)據(jù)監(jiān) 控看板的內(nèi)容,按 業(yè)務(wù)部門、業(yè)務(wù)系 統(tǒng)、錯誤類型和質(zhì) 量變化趨勢出具數(shù) 據(jù)質(zhì)量分析報告。 以促進(jìn)數(shù)據(jù)中心 應(yīng)用為主線,在應(yīng) 用中動態(tài)地提高數(shù) 據(jù)質(zhì)量。 數(shù)據(jù)質(zhì)量監(jiān)控 數(shù)據(jù)中心 數(shù)據(jù)質(zhì)量提高 數(shù)據(jù)監(jiān)控板 發(fā)現(xiàn)數(shù)據(jù)錯誤 數(shù)據(jù)修正 手動執(zhí)行ETL 數(shù)據(jù)質(zhì)量分析 分析業(yè)務(wù)系統(tǒng)數(shù)據(jù)質(zhì) 量原因及變化趨勢 在ETL設(shè)計(jì)過程,需要針對每個流 程設(shè)計(jì)錯

43、誤流程并且定義錯誤類型。每 個ETL流程遇到錯誤時寫入容錯庫中。 數(shù)據(jù)質(zhì)量監(jiān)控 數(shù)據(jù)中心 數(shù)據(jù)質(zhì)量提高 數(shù)據(jù)監(jiān)控板 發(fā)現(xiàn)數(shù)據(jù)錯誤 數(shù)據(jù)修正 手動執(zhí)行ETL 數(shù)據(jù)質(zhì)量分析 分析業(yè)務(wù)系統(tǒng)數(shù)據(jù)質(zhì) 量原因及變化趨勢 數(shù)據(jù)修正使用使用Informactica提供的WebService接 口,通過調(diào)用WebService可以在以Web的形式調(diào)用ETL程 序?qū)Τ鲥e程序進(jìn)行處理。 數(shù)據(jù)質(zhì)量監(jiān)控 數(shù)據(jù)中心 數(shù)據(jù)質(zhì)量提高 數(shù)據(jù)監(jiān)控板 發(fā)現(xiàn)數(shù)據(jù)錯誤 數(shù)據(jù)修正 手動執(zhí)行ETL 數(shù)據(jù)質(zhì)量分析 分析業(yè)務(wù)系統(tǒng)數(shù)據(jù)質(zhì) 量原因及變化趨勢 利用Cognos展現(xiàn)分析功能,對錯誤庫中的 數(shù)據(jù)按出錯時間,出錯類型,隸屬業(yè)務(wù)部門, 隸屬

44、業(yè)務(wù)系統(tǒng)等匯總,可以得到數(shù)據(jù)質(zhì)量分析 報告。該報告也可以使用Cognos的導(dǎo)出功能 實(shí)現(xiàn)。 工作任務(wù)工作任務(wù)工作量 數(shù)據(jù)抽取數(shù)據(jù)抽取 從源系統(tǒng)到分析環(huán)境 的數(shù)據(jù)抽取 結(jié)構(gòu)復(fù)雜且封閉,直接抽取難度大,考慮增量模式抽 取需要大量開發(fā)工作 數(shù)據(jù)整合數(shù)據(jù)整合 轉(zhuǎn)換、更新規(guī)則 開發(fā) 不能通過簡單配置方式得到有效數(shù)據(jù)整合,仍需大量 客制開發(fā) 分析模版分析模版分析模版開發(fā) 在通用平臺上基于業(yè)務(wù)分析需求單獨(dú)建立和維護(hù)分析 模版 數(shù)據(jù)展現(xiàn)數(shù)據(jù)展現(xiàn) 同現(xiàn)有門戶集成Cognos接入門戶實(shí)現(xiàn)方案 單點(diǎn)登陸開發(fā)通過Cognos單點(diǎn)登陸實(shí)現(xiàn)方式 運(yùn)行維護(hù)運(yùn)行維護(hù) 運(yùn)維管控 需求變動、系統(tǒng)性能維護(hù)牽涉面廣,流程復(fù)雜,代價

45、較高。 總評總評 ETL/分析模版等大量工作需要客制化開發(fā),工作量 大,且后期運(yùn)維代價高 80 緊耦合專業(yè)分析建設(shè)業(yè)務(wù)驅(qū)動力緊耦合專業(yè)分析建設(shè)業(yè)務(wù)驅(qū)動力 緊耦合技術(shù)路線已明 確,緊耦合分析提上 建設(shè)日程 項(xiàng)目 財務(wù) 物資 項(xiàng)目-物資分析舉例 n消耗量分析:按單位,項(xiàng) 目性質(zhì),項(xiàng)目類型,項(xiàng)目階 段,物資類別,時間等維度, 對物資數(shù)量,物資金額的計(jì) 劃值,實(shí)際使用值進(jìn)行對比 分析。 項(xiàng)目財務(wù)分析舉例 n項(xiàng)目投資規(guī)模分析 n項(xiàng)目資金結(jié)構(gòu)分析 n資金執(zhí)行情況分析 n項(xiàng)目資金來源分析 物資-財務(wù)分析舉例 n 物資采購金額數(shù)量分析 套裝軟件內(nèi)專業(yè)分 析成熟度高 套裝軟件提供成熟 分析模版 電網(wǎng)企業(yè)管理分析需 求集中,實(shí)施成熟度 高 分析耦合性要求多實(shí)施路線成熟度高 81 數(shù)據(jù)倉庫能力藍(lán)圖 數(shù)據(jù)倉庫 集中整合 信息描述 數(shù)據(jù)移動分析展現(xiàn) 質(zhì)量保障高級應(yīng)用 提供多維分析能力,使得用 戶能夠把一個實(shí)體的多項(xiàng)重 要屬性定義為多個維度進(jìn)行 深入分

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論