普元基礎數(shù)據(jù)平臺方案介紹-(ETL-BI-數(shù)據(jù)治理)

普元基礎數(shù)據(jù)平臺方案2013年8月7日議程普元公司介紹相關案例介紹基礎數(shù)據(jù)平臺方案答疑普元公司概覽基本概況成立時間:2001年4月，2010年6月改制為股份公司總部位于上海浦東張江，北京、廣州、西安、武漢設有分支機構注冊資本：6000萬元2009年，獲得新開發(fā)基金等1億投資人員規(guī)模：500+，技術人員占比80%，核心管理和技術團隊穩(wěn)定資質(zhì)榮譽國家規(guī)劃布局內(nèi)重點軟件企業(yè)、上海市高新技術企業(yè)國家級重點A類新產(chǎn)品，獲得3項授權專利、13項受理專利；42項軟件著作權已成功通過CMMI5級認證國家博士后科研工作站、上海市研究生聯(lián)合培養(yǎng)單位國家云計算創(chuàng)新發(fā)展示范單位、國家高技術產(chǎn)業(yè)化示范工程單位18項技術“發(fā)明專利”研發(fā)持續(xù)投入10年歷程，普元幫助300多家大中型客戶成功金融電信能源公用大中企業(yè)政府國防中國工商銀行中國建設銀行中國銀行中國農(nóng)業(yè)銀行中信銀行交通銀行國家開發(fā)銀行中國人民銀行中國人民保險中國平安太平洋保險上海銀行中國郵儲……中國移動中國電信中國聯(lián)通華為科技亞信聯(lián)創(chuàng)億陽信通中國電信系統(tǒng)集成60家海外運營商……國家電網(wǎng)港華燃氣中國石油中國石化中國水建中國華能中核集團中煤集團勝利油田神華煤炭魯能集團……工業(yè)與信息化部外交部水利部海關總署國家海洋局中國煙草空中交通管理局首都之窗中國電子科技集團28所某部隊后勤指揮……中國航天科工首鋼集團寶鋼集團招商局中國國航中國造幣京港地鐵九陽股份中國科學院三菱電梯德邦物流……普元數(shù)據(jù)能力簡介5產(chǎn)品研發(fā)應用開發(fā)項目實施金融電力企業(yè)政府數(shù)據(jù)平臺相關能力100+人，多數(shù)來自東南融通BI團隊始于2008年2011年，收購東南融通BI團隊普元數(shù)據(jù)平臺產(chǎn)品6數(shù)據(jù)建模數(shù)據(jù)整合(ETL)任務調(diào)度監(jiān)控管理數(shù)據(jù)交換企業(yè)數(shù)據(jù)治理數(shù)據(jù)標準管理數(shù)據(jù)質(zhì)量管理元數(shù)據(jù)管理數(shù)據(jù)分析展現(xiàn)工具數(shù)據(jù)挖掘工具綜合應用開發(fā)和集成平臺數(shù)據(jù)類應用管理類應用營銷類應用經(jīng)營決策類應用數(shù)據(jù)庫ODS數(shù)據(jù)倉庫多維數(shù)據(jù)庫數(shù)據(jù)模型統(tǒng)計分析類應用績效類應用普元具有相關產(chǎn)品數(shù)據(jù)平臺實施能力數(shù)據(jù)源分析能力主流數(shù)據(jù)庫：Oracle/DB2/Teradata/Sybase/MSSQL/Informix/其他主流廠商產(chǎn)品：OracleERP/SAP/PeopleSoft/用友/金蝶金融核心、信貸、ECIF、信用卡、電子銀行數(shù)據(jù)架構和數(shù)據(jù)建模ODS/EDW/數(shù)據(jù)集市倉庫模型、OLAP多維模型Oracle/DB2/MSSQL/Teradata/GreenPlum/Hyperion/SAS/Cognos/MSSSAS…ERWin/PowerDesigner/Visio/ROSE/OfficeETL開發(fā)大型、復雜的ETL架構大規(guī)模作業(yè)并發(fā)、排程、負載均衡、高可用性SQL/Perl/Shell/JavaDatastage/PowerCenter/MSSSIS/KETTLE/DI/Control-M/Automation/ETLPlus數(shù)據(jù)分析和報表開發(fā)報表、查詢、OLAP分析Cognos/MSTR/BO/BI.Office/etc.數(shù)據(jù)管控數(shù)據(jù)標準元數(shù)據(jù)管理數(shù)據(jù)質(zhì)量7數(shù)據(jù)類應用開發(fā)能力數(shù)據(jù)類應用日常管理營銷支持經(jīng)營決策統(tǒng)計分析績效考核8部分案例議程普元公司介紹相關案例介紹BDP建設方案答疑案例概覽建總行貸記卡管理信息系統(tǒng)（05.11-06.6）發(fā)卡量：約2000+萬客戶數(shù)：約1000+萬數(shù)據(jù)總量：約3TB

每月數(shù)據(jù)增量：約100GB

項目范圍：信用卡業(yè)務咨詢信用卡數(shù)據(jù)倉庫、應用分析數(shù)據(jù)集市的建設MIS報表（100張）、查詢（80個）、多維分析Cube（40個）定量模型（客戶消費預測，客戶逾期預測）項目平均每月投入人數(shù)：25人項目周期：8個月

光大銀行信用卡決策支持系統(tǒng)一期（07.4-07.12）發(fā)卡量：約400萬客戶數(shù)：約230萬數(shù)據(jù)總量：約1.5TB

每月數(shù)據(jù)增量：30GB

項目范圍：信用卡數(shù)據(jù)集市MIS報表（100張）、查詢（150個）、KPI（80個）多維分析Cube（40個）項目平均每月投入人數(shù)：15人項目周期：8個月

廣發(fā)銀行信用卡數(shù)據(jù)分析平臺（09.3-2010.12）發(fā)卡量：約1500萬客戶數(shù)：約1000萬數(shù)據(jù)總量：約2TB項目范圍：業(yè)務范圍：風險、財務、產(chǎn)品、賬戶、市場、運營MIS報表（150張）查詢（100個）KPI（50個）多維分析Cube（30個）項目平均每月投入人數(shù)：12人

光大銀行信用卡決策支持系統(tǒng)二期（08.4-08.11）項目范圍：數(shù)據(jù)集市擴展（補充V+剩余數(shù)據(jù)、申請管理系統(tǒng)數(shù)據(jù)、CallCenter、積分數(shù)據(jù)、清算數(shù)據(jù)）MIS報表（30張）、查詢（20個）、KPI（20個）多維分析Cube（10個）定量模型：拖欠行為評分、盈利預測模型業(yè)務策略:(永久批量/取現(xiàn)/臨時）信用額度調(diào)整活動管理平臺項目平均每月投入人數(shù)：20人項目周期：7個月

信用卡領域數(shù)據(jù)架構系統(tǒng)運維管理平臺數(shù)據(jù)服務數(shù)據(jù)源SEMACARD信審系統(tǒng)應用安全管理系統(tǒng)監(jiān)控管理催收系統(tǒng)補錄數(shù)據(jù)客服系統(tǒng)短信平臺CallCenter臨時存儲區(qū)應用服務信用卡數(shù)據(jù)集市OLAPBIPresententionReportServiceKPIServiceQueryService前端應用KPI應用MIS報表OLAP分析靈活查詢數(shù)據(jù)挖掘告警分析數(shù)據(jù)補錄系統(tǒng)管理ODS基礎數(shù)據(jù)存儲數(shù)據(jù)補錄區(qū)補充缺漏信息數(shù)據(jù)補錄平臺ETLDatastageETLSAS服務統(tǒng)一財會系統(tǒng)ApplicationServer信用卡領域數(shù)據(jù)架構2議程普元公司介紹相關案例介紹基礎數(shù)據(jù)平臺方案答疑統(tǒng)一性約束統(tǒng)一的數(shù)據(jù)架構考慮：統(tǒng)一的數(shù)據(jù)獲取、數(shù)據(jù)轉換、數(shù)據(jù)分發(fā)的數(shù)據(jù)交換架構基礎數(shù)據(jù)平臺的定位：統(tǒng)一的指標計算和數(shù)據(jù)加工，服務于下游系統(tǒng)統(tǒng)一的技術架構考慮：統(tǒng)一的ETL調(diào)度流程統(tǒng)一的監(jiān)控管理統(tǒng)一的前端應用架構統(tǒng)一的數(shù)據(jù)管理機制，包括數(shù)據(jù)備份、歸檔和管理統(tǒng)一的數(shù)據(jù)交換標準統(tǒng)一的業(yè)務統(tǒng)計口徑和業(yè)務管理統(tǒng)一集成的數(shù)據(jù)標準、元數(shù)據(jù)、數(shù)據(jù)質(zhì)量管理體系統(tǒng)一的開發(fā)管理、測試管理、版本管理策略數(shù)據(jù)整合(Primeton.ETL)數(shù)據(jù)管控(Primeton.EDG)總體架構21個上游系統(tǒng)17個下游應用系統(tǒng)基礎數(shù)據(jù)平臺Oracle11g數(shù)據(jù)采集數(shù)據(jù)補錄歷史數(shù)據(jù)QDS元數(shù)據(jù)管理數(shù)據(jù)質(zhì)量管理任務調(diào)度運行監(jiān)控和管理7張表準實時數(shù)據(jù)T+N應用集市數(shù)據(jù)安全txtxlsxml當日緩沖ODS全量細節(jié)DDS數(shù)據(jù)標準DatastageInformaticaDatastageInformaticaPrimeton.DI數(shù)據(jù)分發(fā)數(shù)據(jù)交換基礎數(shù)據(jù)模型：概覽結合信用卡業(yè)務的流程，從征信、授信、交易、授權、催收進行數(shù)據(jù)搜集，按卡片級、賬戶級、客戶級進行輕度匯總，為整個業(yè)務應用提供強大的支持ODS催收數(shù)據(jù)卡片數(shù)據(jù)賬戶數(shù)據(jù)核銷數(shù)據(jù)交易數(shù)據(jù)申請審批數(shù)據(jù)授權數(shù)據(jù)欺詐數(shù)據(jù)流失客戶數(shù)據(jù)客戶數(shù)據(jù)基礎數(shù)據(jù)模型：卡級匯總匯總與卡相關的所有指標，處理與卡相關的各種狀態(tài)卡片級卡片成本匯總與授權的關系與賬戶的關系是否活動卡卡片收入?yún)R總卡片交易匯總是否循環(huán)信用與交易的關系卡片基本信息與客戶的關系基礎數(shù)據(jù)模型：賬戶級匯總匯總與賬戶相關的所有指標，處理與賬戶相關的各種狀態(tài)賬戶級催收信息匯總是否活動賬戶賬單信息匯總核銷信息匯總是否循環(huán)信用賬戶基本信息與客戶的關系逾期信息匯總超額信息匯總交易信息匯總基礎數(shù)據(jù)模型：客戶級匯總匯總與客戶相關的所有指標，處理與客戶相關的各種狀態(tài)客戶級余額信息匯總是否活動賬戶成本信息匯總交易信息匯總是否循環(huán)信用客戶基本信息收入信息匯總逾期情況匯總還款信息匯總催收信息匯總數(shù)據(jù)采集接口層當日緩沖ODS直抽數(shù)據(jù)文件準實時全量增量T+N數(shù)據(jù)補錄聯(lián)機的數(shù)據(jù)項補錄功能總行統(tǒng)一制定補錄樣式，分行及各部門通過web界面進行補錄操作數(shù)據(jù)補錄帶有數(shù)據(jù)流程管理功能，可實現(xiàn)發(fā)起、審核、退回等流程功能補錄帶有數(shù)據(jù)勾稽關系、數(shù)據(jù)校驗功能，保證數(shù)據(jù)補錄的數(shù)據(jù)質(zhì)量補錄帶有自動匯總調(diào)整功能，任何一補錄項改變，相關有計算關系的補錄項也會同時改變。數(shù)據(jù)補錄模板可以靈活調(diào)整基于明細數(shù)據(jù)的補錄功能基于Excel模板下發(fā)的數(shù)據(jù)補錄基于格式化文件導入的補錄功能信用卡應用集市明細層ETL架構數(shù)據(jù)源發(fā)卡系統(tǒng)征信系統(tǒng)第三方征信前置系統(tǒng)前置監(jiān)控系統(tǒng)收單系統(tǒng)綜合業(yè)務平臺總行數(shù)據(jù)倉庫數(shù)據(jù)緩沖區(qū)數(shù)據(jù)源同構時間拉鏈接口管理數(shù)據(jù)源管理數(shù)據(jù)轉換區(qū)數(shù)據(jù)標準化格式轉換排序/篩選業(yè)務轉換連接/合并/分割加工匯總數(shù)據(jù)源管理信用卡基礎數(shù)據(jù)層ETL統(tǒng)一調(diào)度管理平臺稽核平衡控制報告歸檔備份清理恢復ETL1ETL2ETL3ETL4ETL5數(shù)據(jù)管理數(shù)據(jù)恢復管理代碼管理ETL管理模型管理業(yè)務規(guī)范元數(shù)據(jù)管理授權監(jiān)控系統(tǒng)催收系統(tǒng)客服系統(tǒng)CCS系統(tǒng)手工參數(shù)表其他客戶主題賬戶主題事件主題產(chǎn)品主題組織主題相關方主題渠道主題其它信用卡數(shù)據(jù)分析倉庫MIS報表影像內(nèi)容管理平臺互動短信平臺銷售服務管理系統(tǒng)多渠道進件管理系統(tǒng)積分系統(tǒng)零售貴賓權益管理系風險信息管理系統(tǒng)軟pos綜合業(yè)務平臺電話銷售管理系統(tǒng)其他任務調(diào)度與監(jiān)控Primeton.ETL任務調(diào)度與監(jiān)控：邏輯架構ETLJOB元數(shù)據(jù)管理平臺數(shù)據(jù)質(zhì)量管理平臺作業(yè)自動化其他JOBJOBJOBSHELLPerlDataExJOB運行監(jiān)控運行干預系統(tǒng)管理代理負載均衡代理代理數(shù)據(jù)標準管理平臺數(shù)據(jù)監(jiān)控資源監(jiān)控文件監(jiān)控作業(yè)分發(fā)計劃調(diào)度手工觸發(fā)消息推送事件調(diào)度性能分析任務調(diào)度與監(jiān)控：物理架構分析型應用業(yè)務系統(tǒng)管理服務器主調(diào)度服務器備用調(diào)度服務器知識庫終端代理代理代理代理代理代理代理數(shù)據(jù)平臺任務調(diào)度與監(jiān)控：作業(yè)/作業(yè)流管理支持作業(yè)類型有：DataStage作業(yè)PowerCenter作業(yè)Oracle存儲過程DB2存儲過程SQLServer存儲過程Perl腳本Sh腳本W(wǎng)indowsExeJava程序公共組件虛擬作業(yè)循環(huán)控制設置作業(yè)參數(shù)選多個代理，會在這幾個代理間進行負載均衡任務調(diào)度與監(jiān)控：作業(yè)/作業(yè)流運行策略運行策略設置依賴關系前置條件后置處理代理代理代理主調(diào)度服務器備調(diào)度服務器ETL作業(yè)服務器(DS/DB)代理代理代理主調(diào)度服務器備調(diào)度服務器ETL作業(yè)服務器(DS/DB)知識庫管理服務器時間事件作業(yè)依賴手工支持所有作業(yè)集中調(diào)度，也支持將作業(yè)分組調(diào)度，以分散負載調(diào)度服務器主備FailOver作業(yè)分發(fā)支持優(yōu)先級支持VIP通道支持負載均衡jobsjobsjobsjobsjobsjobsVIP專屬通道任務調(diào)度與監(jiān)控：作業(yè)調(diào)度任務調(diào)度與監(jiān)控：作業(yè)調(diào)度計劃任務是按時間頻度調(diào)起作業(yè)的一種機制，它有日歷+頻度+作業(yè)/作業(yè)流+消息設置組成；可以設置激活時間窗和運行時間窗。

頻度，前面所配置的頻度日歷，前面所配置的日歷發(fā)送消息設置，前面所配置的消息設置優(yōu)先級設置31點擊，快速定位問題原因任務調(diào)度與監(jiān)控：監(jiān)控與干預手工輸入?yún)?shù)優(yōu)先級設置檢查作業(yè)依賴關系檢查觸發(fā)關系是否翻牌手工運行作業(yè)，記錄操作人姓名任務調(diào)度與監(jiān)控：監(jiān)控與干預(手工運行)任務調(diào)度與監(jiān)控：資源管理代理代理代理主調(diào)度服務器備調(diào)度服務器代理知識庫管理服務器jobsjobsjobs資源管理器資源采集資源存儲資源監(jiān)控作業(yè)分發(fā)資源申請根據(jù)作業(yè)對CPU、內(nèi)存的要求，通過算法，找到資源狀態(tài)最佳的一臺機器，并分配作業(yè)到上面運行數(shù)據(jù)分發(fā)數(shù)據(jù)分發(fā)平臺可以專門進行分發(fā)類工作處理，只要進行簡單配置，就可以讓此類工作馬上開始。信用卡應用集市數(shù)據(jù)交換數(shù)據(jù)交換(Primeton.DI)數(shù)據(jù)安全系統(tǒng)運維管理系統(tǒng)監(jiān)控管理主要提供網(wǎng)絡監(jiān)控、主機監(jiān)控、數(shù)據(jù)庫監(jiān)控、應用監(jiān)控、生產(chǎn)調(diào)度監(jiān)控、安全監(jiān)控等。系統(tǒng)維護管理是指系統(tǒng)在運行過程中，為了系統(tǒng)的正常服務而進行的配置、參數(shù)管理，以及啟/停機、清理過期數(shù)據(jù)等日常操作，以及數(shù)據(jù)、系統(tǒng)發(fā)生變更的維護等。備份恢復管理處理系統(tǒng)中所有必須的備份和恢復操作。這個組件根據(jù)備份策略，通過對數(shù)據(jù)的冗余存儲來保證系統(tǒng)可以從各種服務中斷中恢復。數(shù)據(jù)歸檔清理定時對指定數(shù)據(jù)區(qū)域按照數(shù)據(jù)存儲規(guī)劃，進行數(shù)據(jù)脫機歸檔，備份至磁帶庫、光盤庫中。在歸檔成功后，對指定數(shù)據(jù)進行清理。審計管理對所有系統(tǒng)的核心操作進行審計跟蹤，能夠從系統(tǒng)日志中再現(xiàn)歷史操作流程。性能容量規(guī)劃從環(huán)境中的不同元素收集利用數(shù)據(jù)，并規(guī)劃硬件和軟件能力需求。運維安全管理通過制定和管理運維安全策略，并利用安全工具，維護信息系統(tǒng)資產(chǎn)（包括硬件、軟件、用戶數(shù)據(jù)、信息/數(shù)據(jù)）的機密性、一致性和可用性。數(shù)據(jù)展現(xiàn)Primeton.BI產(chǎn)品應用架構。。。風險

分析統(tǒng)一報表平臺統(tǒng)一查詢系統(tǒng)ACRM領導信息系統(tǒng)績效考核分析嵌入式BI物流分析查詢分析報表預警儀表盤查詢預警報表分析儀表盤管理層決策層普通員工統(tǒng)計人員統(tǒng)一登陸管理EDWBI工具BI應用系統(tǒng)應用系統(tǒng)ERPSCMCRM。。。HRALMPLM。。。財務

分析為所有職位交付信息，提升企業(yè)整體洞察力易于使用，自助式服務靈活的、個性化的交付可嵌入到業(yè)務系統(tǒng)穩(wěn)健的而統(tǒng)一的分析平臺支持5000+用戶可靠的安全管理高可擴展性、靈活性應用資源的統(tǒng)一管理和共享數(shù)據(jù)抽取、加載、轉換和清洗UnifiedServer40主要內(nèi)容Dashboard介紹

Query介紹

Report介紹

Analysis介紹模塊介紹

通用組件介紹

Mobile介紹Dashboard—展現(xiàn)直觀生動表現(xiàn)形式豐富：內(nèi)置表格、油量表、泡泡圖、雷達圖、地圖、柱圖、餅圖、曲線圖等多種豐富的數(shù)據(jù)展示形式動態(tài)畫圖效果，生動形象

42Dashboard—交互式的展示43Dashboard—集成地理信息地圖分析：通過變動區(qū)域地圖的顏色、或在區(qū)域地圖上加KPI彩旗、燈泡等，讓決策層可以清楚了解企業(yè)的戰(zhàn)略執(zhí)行，詳盡掌握企業(yè)信息。支持多層鉆取，可以通過接口與GoogleMap或GIS地理信息系統(tǒng)集成44主要內(nèi)容

Dashboard介紹

Query介紹

Report介紹

Analysis介紹模塊介紹

通用組件介紹

Mobile介紹Query—靈活查詢平臺最具優(yōu)勢的查詢平臺熟悉的業(yè)務術語屏蔽底層數(shù)據(jù)，業(yè)務人員可自助式的進行靈活查詢直觀、圖形化、基于Web的最佳用戶體驗更可自由的進行交互式的信息探索可無縫的嵌入操作型系統(tǒng)中提升企業(yè)自助式獲取信息的能力直觀、基于Web的定制、訪問交互，用戶在提示和向導下完成查詢分析適應企業(yè)內(nèi)部的各種臨時性的報表需求改善業(yè)務人員和IT人員的協(xié)作關系最終用戶進行自助式的查詢IT人員僅需對用戶權限進行維護46Query—語義層定義（表關系設置）可視化的設置界面，拖拽式操作支持按別名、列名、外鍵自動創(chuàng)建表關系支持多種連接方式（內(nèi)連接、左連接等）設置連接方式主要內(nèi)容

Dashboard介紹

Query介紹

Report介紹

Analysis介紹模塊介紹

通用組件介紹

Mobile介紹Report—復雜報表企業(yè)報表平臺的最佳選擇“0”編程—僅需簡單的鼠標拖拉，即可快速實現(xiàn)不規(guī)則報表、不平衡報表、原始憑證報表等各種復雜報表，完全可視化的設計實現(xiàn)數(shù)據(jù)補錄、數(shù)據(jù)校驗、審核、歸檔減少了定制報表、報表維護、報表二次開發(fā)的工作量高度的靈活性、可擴展性與實時性復雜報表和數(shù)據(jù)補錄的支持能力最大限度的改善業(yè)務人員的工作模式支持所有復雜格式的報表強大的補錄平臺提升企業(yè)信息化能力解決企業(yè)在報表方面的難題難以應付快速變化的需求信息化建設不足而導致信息采集不全面49Report—報表制作2步完成報表制作表樣制作：內(nèi)置表樣設置器、導入Excel文件設置數(shù)據(jù)來源：從查詢中拖拽所需的字段到表樣上其它功能參數(shù)管理校驗規(guī)則填報設置Report

-支持多種格式清單表、分組報表、交叉報表、組合報表、套打報表等Report—報表交互瀏覽匯總數(shù)據(jù)支持鉆取分析具有獨特的智能預警

下鉆到明細表紅色高亮預警52Report—數(shù)據(jù)補錄零編程、純HTML補錄補錄類型數(shù)字單行文本多行文本綁定參數(shù)文件（如圖片等）除了插入數(shù)據(jù)外，還可刪除某行數(shù)據(jù)清單補錄Report—數(shù)據(jù)校驗設置校驗公式數(shù)據(jù)填報后進行數(shù)據(jù)校驗54示例：交叉表55示例：分片報表56示例：分組報表57主要內(nèi)容

Dashboard介紹

Query介紹

Report介紹

Analysis介紹模塊介紹

通用組件介紹

Mobile介紹Analysis—多視角的洞察分析靈活的多維分析平臺鉆取、切片、旋轉、排名、排序、過濾等豐富的用戶交互界面，豐富的圖形展現(xiàn)不只是OLAP分析，更可自由對TB級數(shù)據(jù)實現(xiàn)全面探索直至交易細節(jié)動態(tài)的OLAP報表定制，輕松的數(shù)據(jù)探索多角度的洞察力從怎么樣到為什么，僅僅需要擊以下鼠標式業(yè)務分析員自己根據(jù)問題的需要完成自己的分析和報告業(yè)務部門可以從固定的報表、KPI中發(fā)現(xiàn)問題時，需要了解為何發(fā)生了問題，這時通過OLAP分析定位問題解決企業(yè)在報表方面的難題解決問題難以定位以前業(yè)務人員無法自助的定制報表59Analysis—功能特色：靈活拖拽式操作，直接展示分析結果，靈活方便靈活的成員選擇，支持成員搜索隨意切換分析角度，靈活展現(xiàn)（行、列、分頁）靈活鉆取上鉆下鉆層鉆展開、收起鉆到其它維度行列互換支持自定義成員、自定義命名集60Analysis—功能特色：多種分析方法時間智能分析基比、環(huán)比同期值、同期比、同期增長率前期值、前期比、前期增長率多種分析方法占比排名TopN分析80/20分析內(nèi)置最大值、最小值、平均值、合計值等計算函數(shù)61Analysis—功能特色告警展現(xiàn)顏色告警圖標報警多種分析圖形聯(lián)動分析跨主題跳轉分析匯總報表->清單報表配置方式，無需開發(fā)表格樣式設置62主要內(nèi)容

Dashboard介紹

Query介紹

Report介紹

Analysis介紹

通用組件介紹模塊介紹

Mobile

介紹移動平臺-輕松移動辦公，商機盡在掌中64產(chǎn)品特色支持多種移動設備：iPad/iPhone/iPodTouch/Android與桌面Web報表的無縫擴展。統(tǒng)一開發(fā)部署，無插件，無需額外定制基于地理信息的業(yè)務監(jiān)控支持杜邦分析等多種分析動態(tài)圖片播放及熱點分析支持離線瀏覽信息同步與共享。

添加注釋、郵件發(fā)送數(shù)據(jù)源EssbaseSQLServerOracleDB2......應用服務器XMLAJDBC移動應用展現(xiàn)組件MobileServiceMobilePublish整體技術架構PCSafari瀏覽器移動平臺本地應用iOSAndroid65查詢地圖分析圖表分析報表多維分析儀表盤用戶權限計劃任務移動平臺首頁66移動平臺效果截圖67移動平臺示例-打開報表、切換條件68移動平臺示例-地圖鉆取、聯(lián)動分析點擊地區(qū)：地圖下鉆右邊圖形聯(lián)動變化69點擊【返回】，回到全國地圖，右邊圖形同步變化在指標上拖拽調(diào)整指標值，指標卡片上的圖標以紅、黃、綠顯示指標狀態(tài)，同時該指標的關聯(lián)指標值及狀態(tài)也會同步變化為報表分析者全面仔細地了解企業(yè)的經(jīng)營和盈利狀況提供方便70移動平臺示例-杜邦分析將原始數(shù)據(jù)以底圖加熱點的方式直觀展現(xiàn)，通過配置完成地圖熱點區(qū)域及各種展現(xiàn)告警效果（如紅綠燈閃爍、跑馬燈提醒）。支持播放與暫停模式，可以對地圖上各個熱點區(qū)域進行輪動播放，通過點擊熱點區(qū)域進行關聯(lián)分析71移動平臺示例-動態(tài)圖片播放及熱點分析移動平臺示例-城市交通監(jiān)控72可以在頁面的任意位置繪制圖形、添加注釋，并可以通過郵件將注釋內(nèi)的容共享給他人73移動平臺示例-增加注釋點擊進入注釋編輯狀態(tài)增加注釋后，發(fā)送郵件移動平臺示例（iPhone）—打開報表74主要內(nèi)容

Dashboard介紹

Query介紹

Report介紹

Analysis介紹

通用組件介紹模塊介紹

Mobile介紹計劃任務實現(xiàn)報表的定時運行實現(xiàn)報表的文件導出，郵件發(fā)送對任務進行調(diào)度和監(jiān)控76會話管理會話監(jiān)控

會話信息列表斷開會話查看當前會話操作日志設置會話臨控會話分析最大會話數(shù)分析按IP分析會話操作日志刪除會話歷史記錄77完善的權限管理體系為了適應企業(yè)人員的變動和崗位的調(diào)整，系統(tǒng)將權限與用戶、角色掛鉤實現(xiàn)了多種控制方式，靈活適應各類企業(yè)的實際情況。用戶級權限

角色級權限用戶組級權限78靈活的權限配置—操作權限采用了三層權限架構：操作權限、資源權限、數(shù)據(jù)權限，為滿足日常工作中用戶各種復雜管理方法和管理手段提供了基礎。操作權限配置79資源權限配置靈活的權限配置—資源權限采用了三層權限架構：操作權限、資源權限、數(shù)據(jù)權限，為滿足日常工作中用戶各種復雜管理方法和管理手段提供了基礎。80靈活的權限配置—數(shù)據(jù)行權限采用了三層權限架構：操作權限、資源權限、數(shù)據(jù)權限，為滿足日常工作中用戶各種復雜管理方法和管理手段提供了基礎。數(shù)據(jù)行權限設置81靈活的權限配置—數(shù)據(jù)權限采用了三層權限架構：操作權限、資源權限、數(shù)據(jù)權限，為滿足日常工作中用戶各種復雜管理方法和管理手段提供了基礎。數(shù)據(jù)權限設置82強大的二次開發(fā)與集成能力—API體系架構圖基礎SDK，也就是上圖的說明In-ProcessServiceAPI（java形式調(diào)用，客戶端程序和服務器在同一個JVM）Out-ProcessSDK，包括JavaScript，Java，.Net，WebService83數(shù)據(jù)管控Primeton.EDG普元數(shù)據(jù)治理平臺8585應用功能元數(shù)據(jù)管理接口二次開發(fā)權限集成數(shù)據(jù)訪問分析服務元數(shù)據(jù)應用數(shù)據(jù)質(zhì)量管理數(shù)據(jù)標準管理數(shù)據(jù)管控流程管理輔助業(yè)務應用元數(shù)據(jù)基礎管理元數(shù)據(jù)分析服務元數(shù)據(jù)采集檢核指標管理檢核執(zhí)行調(diào)度數(shù)據(jù)探查數(shù)據(jù)質(zhì)量應用數(shù)據(jù)標準應用系統(tǒng)管理角色管理在線用戶密碼管理權限管理用戶管理日志管理參數(shù)管理配置管理輔助開發(fā)運維數(shù)據(jù)質(zhì)量監(jiān)控數(shù)據(jù)質(zhì)量改進標準執(zhí)行監(jiān)控輔助標準執(zhí)行元模型管理質(zhì)量問題管理知識庫管理標準體系瀏覽標準綜合查詢數(shù)據(jù)標準管理數(shù)據(jù)標準采集普元數(shù)據(jù)治理應用框架86普元數(shù)據(jù)治理平臺組成和相互關系87數(shù)據(jù)管控平臺數(shù)據(jù)標準流程系統(tǒng)元數(shù)據(jù)1.提供檢核對象1.提供數(shù)據(jù)標準信息訪問數(shù)據(jù)標準存儲到元數(shù)據(jù)1.標準相關的指標檢核結果數(shù)據(jù)質(zhì)量數(shù)據(jù)質(zhì)量流程報表需求流程元數(shù)據(jù)流程數(shù)據(jù)標準流程……采集基準庫、對象庫反饋檢核結果1.質(zhì)量檢核結果作為質(zhì)量問題2.質(zhì)量提升工作結果1.提出度量規(guī)則和檢核方法2.數(shù)據(jù)質(zhì)量問題存儲3.數(shù)據(jù)質(zhì)量需求1.提供數(shù)據(jù)標準定義2.數(shù)據(jù)標準變更數(shù)據(jù)標準執(zhí)行情況報表需求存儲1.報表需求訪問2.報表使用情況2.提供標準代碼2.系統(tǒng)代碼與標準代碼匹配情況3.數(shù)據(jù)標準執(zhí)行情況2.度量規(guī)則、檢核指標存儲到元數(shù)據(jù)數(shù)據(jù)治理的核心要素——元數(shù)據(jù)管理88元數(shù)據(jù)管理是整個數(shù)據(jù)管控實施的核心要素之一，是數(shù)據(jù)管控的核心基礎設施元數(shù)據(jù)是企業(yè)信息的地圖89通過元數(shù)據(jù)管理平臺建立能夠形成企業(yè)的“地圖”了解每一個數(shù)據(jù)在哪個系統(tǒng)，哪個表，從哪來，到哪去。了解數(shù)據(jù)項的業(yè)務含義，明晰數(shù)據(jù)之間的關系。應對問題3、系統(tǒng)變更是否可行及變更對下游影響缺失客觀有效評估機制4、報表數(shù)據(jù)質(zhì)量問題追溯成本較高7、業(yè)務人員和技術人員對業(yè)務元數(shù)據(jù)理解存在歧義8、缺失元數(shù)據(jù)變更管理等配套流程2、系統(tǒng)及系統(tǒng)間關系模糊，增加了人員流動帶來的學習成本企業(yè)元數(shù)據(jù)問題總結及應對3、基于影響分析為系統(tǒng)變更的可行性評估提供決策支持以及獲知對下游影響4、基于元數(shù)據(jù)血統(tǒng)分析快速定位數(shù)據(jù)脈絡，有助于數(shù)據(jù)質(zhì)量問題解決8、基于流程的元數(shù)據(jù)統(tǒng)一管理有助于對元數(shù)據(jù)質(zhì)量的控制2、構建統(tǒng)一的系統(tǒng)及關系視圖5、多種自動化采集引擎，自動化展現(xiàn)企業(yè)元數(shù)據(jù)全景5、元數(shù)據(jù)自動化采集能力低，導致大量的人工參與工作7、基于屏幕取詞方式統(tǒng)一業(yè)務元數(shù)據(jù)口徑6、數(shù)據(jù)倉庫只能被動式獲知上游變更6、基于元數(shù)據(jù)變更通知數(shù)據(jù)倉庫可主動捕獲上游元數(shù)據(jù)變化1、元數(shù)據(jù)成信息孤島，分布各異，元數(shù)據(jù)的使用效率低下，無法共享1、集中式元數(shù)據(jù)管理規(guī)避了信息孤島，使元數(shù)據(jù)在全組織范圍內(nèi)共享應用場景-從全局了解企業(yè)數(shù)據(jù)資產(chǎn)91需求場景難以了解企業(yè)中數(shù)據(jù)的全貌，也難以了解系統(tǒng)間數(shù)據(jù)關系處理方案通過自動化采集，自動分析數(shù)據(jù)關系，形成數(shù)據(jù)全貌地圖應用場景-系統(tǒng)升級影響定位92應用場景因國際業(yè)務系統(tǒng)升級，在“ACCT_MASTER”表中修改字段：非貿(mào)交易類型NONTRADE_TYPE_NORE，長度由2修改為10，需要定位本次升級對后續(xù)相關系統(tǒng)的影響處理方案對元數(shù)據(jù)“非貿(mào)交易類型NONTRADE_TYPE_NORE”進行影響分析，發(fā)現(xiàn)對下游的II,ODM,SDM,FDM都有影響，IT部門定位到影響之后修改相應程序，有利于快速鎖定影響提高效率和質(zhì)量業(yè)務系統(tǒng)升級修改字段長度，可能會導致對后續(xù)系統(tǒng)產(chǎn)生影響IT部門對相關元數(shù)據(jù)進行影響分析借助元數(shù)據(jù)管理系統(tǒng)的影響分析功能分析對下游的影響解決問題消除升級影響通過定位影響并做相應修改，達到消除影響的效果應用場景-輔助報表問題定位93應用場景某客戶經(jīng)理發(fā)現(xiàn)“產(chǎn)品營銷分析”報表數(shù)據(jù)存在質(zhì)量問題處理方案客戶經(jīng)理向IT部門提出異議，技術人員通過元數(shù)據(jù)平臺血統(tǒng)分析發(fā)現(xiàn)“產(chǎn)品營銷分析”受到上游FDM\EDM_CRM等各層的影響，從而定位問題的源頭，有利于快速低成本解決問題客戶經(jīng)理提出異議報表數(shù)據(jù)存在質(zhì)量問題IT部門核查問題通過元數(shù)據(jù)管理系統(tǒng)對問題報表進行血統(tǒng)分析，發(fā)現(xiàn)與其相關的上游元數(shù)據(jù)基于問題定位解決報表數(shù)據(jù)問題IT人員通過血統(tǒng)分析定位可能的問題路徑，分析程序解決報表數(shù)據(jù)問題應用場景-輔助EDW開發(fā)94前提：確保生產(chǎn)環(huán)境中的基準庫和對象庫一致全流程元數(shù)據(jù)及其關系準確要點：嚴格控制項目上線流程基于元數(shù)據(jù)變更的通知機制EDW在基準庫訂閱元數(shù)據(jù)變更通知EDW在基準庫訂閱好變更通知，即入倉的所有表發(fā)生變更則元數(shù)據(jù)系統(tǒng)自動郵件通知業(yè)務系統(tǒng)模型變更CRM系統(tǒng)的客戶類型字段長度由CHAR(1)修改為CHAR(5)EDW接收變更通知并分析影響EDW接受變更通知，并且通過快捷方式進行變更元數(shù)據(jù)的影響分析普元元數(shù)據(jù)管理平臺95元數(shù)據(jù)管理平臺組織結構元數(shù)據(jù)采集流程ETL開發(fā)規(guī)范制度流程SQL編寫規(guī)范功能實施元數(shù)據(jù)功能元數(shù)據(jù)維護自動化采集數(shù)據(jù)地圖數(shù)據(jù)分析元數(shù)據(jù)實施實施調(diào)研采集設計數(shù)據(jù)采集質(zhì)量檢查支持Shell日志格式規(guī)范數(shù)據(jù)倉庫數(shù)據(jù)服務清算移動支付完善系統(tǒng)變更上線流程完善數(shù)據(jù)倉庫運維規(guī)范變更元數(shù)據(jù)管理流程應用應用識別負責與關聯(lián)處室定義元數(shù)據(jù)角色支撐確定實施接口人公共參數(shù)風險采集采集平臺功能96應用功能元數(shù)據(jù)基礎管理接口服務采集權限集成元數(shù)據(jù)關系管理元數(shù)據(jù)維護版本管理變更管理元數(shù)據(jù)檢索視圖管理元數(shù)據(jù)統(tǒng)計元數(shù)據(jù)分析服務影響分析血統(tǒng)分析差異分析輔助業(yè)務應用代碼管理輔助EDW開發(fā)系統(tǒng)管理角色管理參數(shù)管理配置管理元數(shù)據(jù)導出元模型管理數(shù)據(jù)地圖采集適配器管理采集模板管理元數(shù)據(jù)采集管理數(shù)據(jù)訪問二次開發(fā)分析服務全鏈路分析系統(tǒng)緩存管理元數(shù)據(jù)入庫管理適配器Powercenter9cognos10ERWin7.3Excel模板Perl日志dataStage采集注釋采集DB數(shù)據(jù)字典DB數(shù)據(jù)記錄PowerDesignerDB數(shù)據(jù)字典DDL案例：某政策性銀行企業(yè)級元數(shù)據(jù)管理實現(xiàn)對數(shù)據(jù)模型、數(shù)據(jù)接口、報表指標等相關元數(shù)據(jù)的管理，進行企業(yè)級元數(shù)據(jù)的一致性、完整性檢查和過程管控；作為企業(yè)數(shù)據(jù)管控系統(tǒng)的組成部分，為數(shù)據(jù)質(zhì)量、數(shù)據(jù)標準等系統(tǒng)提供服務；提供完整的元數(shù)據(jù)視圖，實現(xiàn)元數(shù)據(jù)信息的集成，便于從多角度查詢、應用元數(shù)據(jù)；通過影響分析功能進行上游系統(tǒng)變更的評估和影響性定位，輔助EDW平臺開發(fā)及運維協(xié)助下游報表應用的數(shù)據(jù)問題的追溯。使用過程中，要求盡量簡化流程，減少人工維護，以最少量的元數(shù)據(jù)信息建立數(shù)據(jù)鏈條，以保證在最小代價下進行準確的影響/血統(tǒng)分析。目標ODS/EDW/數(shù)據(jù)集市/業(yè)務系統(tǒng)等實施范圍數(shù)據(jù)庫結構（表、視圖）、物理模型、邏輯模型、ETL過程、Mapping映射、報表、維度、指標、數(shù)據(jù)標準、系統(tǒng)信息等元數(shù)據(jù)類別案例：某政策性銀行企業(yè)級元數(shù)據(jù)管理平臺功能制度流程平臺實施影響/血統(tǒng)分析數(shù)據(jù)地圖元模型管理元數(shù)據(jù)采集模板管理元數(shù)據(jù)維護變更管理版本管理元數(shù)據(jù)導出視圖管理系統(tǒng)管理……制度元數(shù)據(jù)管理辦法制定改造或新建系統(tǒng)的元數(shù)據(jù)變更管理流程制定系統(tǒng)日常變更的元數(shù)據(jù)變更管理流程制定元數(shù)據(jù)采集流程制定元數(shù)據(jù)使用管理流程制定模型設計規(guī)范制定ETL開發(fā)規(guī)范制定數(shù)據(jù)接口規(guī)范……制定實施方法論實施范圍包括：數(shù)據(jù)庫結構（表、視圖）、物理模型、邏輯模型、ETL過程、Mapping映射、報表、維度、指標、數(shù)據(jù)標準、系統(tǒng)信息等在實施過程中對元數(shù)據(jù)質(zhì)量進行了控制組織架構總行高層參與設置專職的數(shù)據(jù)管控部門專職的元數(shù)據(jù)管理團隊，還包括數(shù)據(jù)管控其它方向的團隊元數(shù)據(jù)管理團隊職責清晰全行和元數(shù)據(jù)相關的技術、業(yè)務部門都參與業(yè)務部門有專職或兼職元數(shù)據(jù)接口人技術部門各項目有專職或兼職元數(shù)據(jù)接口人……案例：元數(shù)據(jù)管理采集范圍管理分析類系統(tǒng)II工程管理駕駛艙開放數(shù)據(jù)服務固定報表金融統(tǒng)計平臺客戶風險預警應用市場風險應用RWA應用評級器債項評級應用應用系統(tǒng)風險數(shù)據(jù)集市中間表數(shù)據(jù)集市財務集市URPT接口風險集市金融統(tǒng)計平臺源業(yè)務系統(tǒng)核心系統(tǒng)信貸系統(tǒng)商業(yè)匯票工作流資金系統(tǒng)評級器系統(tǒng)助學貸款系統(tǒng)（生源地）助學貸款系統(tǒng)（高校）Teller系統(tǒng)國際結算客戶關系管理系統(tǒng)財務共享系統(tǒng)總賬人力資源系統(tǒng)統(tǒng)一報表業(yè)務生產(chǎn)類業(yè)務支持類公共緩沖區(qū)ODS數(shù)據(jù)平臺臨時區(qū)基礎區(qū)匯總區(qū)數(shù)據(jù)倉庫EDW案例：元數(shù)據(jù)管理制度流程案例效果：查詢元數(shù)據(jù)案例效果：影響血統(tǒng)分析案例效果：版本管理案例效果：數(shù)據(jù)地圖數(shù)據(jù)管控的首要目的——數(shù)據(jù)質(zhì)量管理105數(shù)據(jù)質(zhì)量管理是整個數(shù)據(jù)管控的最終目的數(shù)據(jù)管控-數(shù)據(jù)質(zhì)量管理數(shù)據(jù)質(zhì)量管理方法監(jiān)控（發(fā)現(xiàn)問題）分析（分析問題）修正(解決問題)跟蹤(執(zhí)行監(jiān)督)依據(jù)數(shù)據(jù)質(zhì)量度量標準對其的數(shù)據(jù)實體和數(shù)據(jù)處理過程建立有效的監(jiān)控機制，在第一時間發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題，為數(shù)據(jù)質(zhì)量問題分析提供原始依據(jù)依據(jù)各系統(tǒng)的監(jiān)控信息，對異常指標進行跟蹤，提交相關數(shù)據(jù)質(zhì)量問題報告，注重對分析過程中知識的積累提出相應的解決方案和解決期限，方案和期限經(jīng)評審通過后將正式進入修正過程對于每一份數(shù)據(jù)質(zhì)量問題報告都會進入問題跟蹤庫，確保數(shù)據(jù)質(zhì)量問題可查、可跟蹤及時性、完善性、合法性、準確性、唯一性監(jiān)控問題分析、數(shù)據(jù)質(zhì)量問題報告、知識庫積累源系統(tǒng)、數(shù)據(jù)平臺、應用系統(tǒng)關鍵：編號、解決期限、責任人數(shù)據(jù)質(zhì)量監(jiān)控系統(tǒng)數(shù)據(jù)質(zhì)量報告分析系統(tǒng)數(shù)據(jù)質(zhì)量修正系統(tǒng)數(shù)據(jù)質(zhì)量BUG管理系統(tǒng)數(shù)據(jù)質(zhì)