SG-ERP項目主數(shù)據(jù)管理實踐

1、sg-erp項目主數(shù)據(jù)管理實踐國網(wǎng)泰州供電公司摘要：主數(shù)據(jù)管理要做的就是從企業(yè)的多個業(yè)務系統(tǒng)中整合最核心的、 最需要共享的數(shù)據(jù)，集中進行數(shù)據(jù)的管理,并且以服務的方式把統(tǒng)一的、完整的、 準確的、異有權威性的主數(shù)據(jù)分發(fā)給全企業(yè)范圍內(nèi)需要使用這些數(shù)據(jù)的應用。木 文從主數(shù)據(jù)管理的概念開始說起，結合了主數(shù)據(jù)管理平臺在電力sg-erp項目推 廣中的實際情況，闡述了主數(shù)據(jù)管理平臺的建設目標、總體架構和主要功能，介 紹了 sg-erp項目主數(shù)據(jù)平臺實施的一些主要經(jīng)驗。關鍵詞：sg-erp；主數(shù)據(jù)；數(shù)據(jù)管理；應用0引言隨著sg-erp上線推廣和應用的逐漸深入，公司業(yè)務系統(tǒng)信息管理方式 發(fā)生了較大的變化，客觀上要

2、求打破傳統(tǒng)上各業(yè)務系統(tǒng)分割的數(shù)據(jù)管理模式，由 此引入主數(shù)據(jù)管理的模式。說到數(shù)據(jù)在erp應用中的重要性，常有這樣一種說法: “三分技術、七分管理、十二分數(shù)據(jù)”，因為沒有高質(zhì)量的數(shù)據(jù)，erp應用也就 成了無源之水。當沒有真實可靠的數(shù)據(jù)基礎時，希望erp應用能帶來效率的提高 也就成了一句空話。這就更突顯出主數(shù)據(jù)管理在erp應用中的重要作用。1什么是主數(shù)據(jù)管理主數(shù)據(jù)管理能夠為企業(yè)帶來了經(jīng)濟上的效益，那么主數(shù)據(jù)管理的其體概 念是什么呢？主數(shù)據(jù)是指在整個企業(yè)范圍內(nèi)各個系統(tǒng)間要共享的數(shù)據(jù)。主數(shù)據(jù)通 常需要在整個企業(yè)范圍內(nèi)保持一致性、完整性、可控性，為了達成這一目標，就需要進行主數(shù)據(jù)管理(master dat

3、a management，mdm)01.1主數(shù)據(jù)管理定義主數(shù)據(jù)是指在整個企業(yè)范圍內(nèi)各個業(yè)務系統(tǒng)間要井享的數(shù)據(jù)，比如，可 以是與客戶(customer)，供應商(vendor),物料(material),賬戶(account)， 設備(device)等相關的數(shù)據(jù)。主數(shù)據(jù)通常需要在整個企業(yè)范圍內(nèi)保持一致性、 完整性、可控性，為了達成這一0標，就需要進行主數(shù)據(jù)管理(masterdata management, mdm)。需要注意的是，主數(shù)據(jù)不是企業(yè)內(nèi)所宵的業(yè)務數(shù)據(jù)，只 是有必要在各個系統(tǒng)間共享的數(shù)據(jù)才是主數(shù)據(jù)，比如大部分的交易數(shù)據(jù)、帳單數(shù) 據(jù)等都不是主數(shù)據(jù)，而像描述核心業(yè)務實體的數(shù)據(jù)，而像客戶、供應

4、商、物料、 設備等都是主數(shù)據(jù)。主數(shù)據(jù)是企業(yè)內(nèi)能夠跨業(yè)務重復使用的高價值的數(shù)據(jù)。這些 主數(shù)據(jù)在進行主數(shù)據(jù)管理之前經(jīng)常存在于多個異構或同構的系統(tǒng)中。1.2主數(shù)據(jù)范圍主數(shù)據(jù)管理是指一組約束和方法用來保證一個企業(yè)內(nèi)主題域和系統(tǒng)內(nèi) 相關數(shù)據(jù)和跨主題域和系統(tǒng)的相關數(shù)據(jù)的實時性、含義和質(zhì)量。這是從深層次來 說明主數(shù)據(jù)管理的深度和復雜性。通常，我們會把主數(shù)據(jù)管理作為應用流程的補 充，通過從各個應用中分離出主要的信息，使其成為一個集中的、獨立于企業(yè)中 各種其他應用核心資源，從而使得企業(yè)的核心信息得以重用并確保各應用間的核 心數(shù)據(jù)的一致性。通過主數(shù)據(jù)管理，改變企業(yè)數(shù)據(jù)利用的現(xiàn)狀，從而更好地為企 業(yè)信息集成做好鋪墊

5、。主數(shù)據(jù)管理可以幫助我們創(chuàng)建并維護整個企業(yè)內(nèi)主數(shù)據(jù)的 單一視圖，保證視圖的準確性、一致性以及完整性，從而提供準確的數(shù)據(jù)，統(tǒng)一 商業(yè)實體的定義，簡化改進商業(yè)流程并提高業(yè)務的響應速度。從變化的頻率來看， 主數(shù)據(jù)和日常交易數(shù)據(jù)不一樣，變化相對緩慢，另外，主數(shù)據(jù)由于跨各個系統(tǒng)， 所以對數(shù)據(jù)的一致性、實吋性以及版本控制要求很高。2主數(shù)據(jù)管理的意義集成、共享、數(shù)據(jù)質(zhì)量、數(shù)據(jù)管理是主數(shù)據(jù)管理的四大要素，主數(shù)據(jù)管 理要做的就是從企業(yè)的多個業(yè)務系統(tǒng)中整合最核心的、最需要共享的數(shù)據(jù)，集中 進行數(shù)據(jù)的清洗和管理，并且以服務的方式把統(tǒng)一的、完整的、準確的、具有權 威性的主數(shù)據(jù)分發(fā)給全企業(yè)范圍內(nèi)需要使用這些數(shù)據(jù)的應用，

6、包括各個業(yè)務系統(tǒng)、 業(yè)務流程等。從it建設的角度，主數(shù)據(jù)管理可以增強it結構的靈活性，建立整個 企業(yè)范圍內(nèi)的數(shù)據(jù)管理基礎和相應規(guī)范，并且更靈活地適應業(yè)務需求的變化。以供應商主數(shù)據(jù)為例，在大多數(shù)企業(yè)中，供應商信息通常分散于物資、生產(chǎn)等各個業(yè)務系統(tǒng)中，而每個業(yè)務系統(tǒng)中可能都只奮供應商信息的片斷，即不 完整的供應商信息，但卻缺乏企業(yè)級的完整、統(tǒng)一的單一供應商視圖，結果企業(yè) 不能完全了解供應商信息，導致生產(chǎn)效率降低。3主數(shù)據(jù)管理現(xiàn)狀分析3.1主數(shù)據(jù)管理業(yè)務和技術現(xiàn)狀目前電力暫沒有統(tǒng)一的主數(shù)據(jù)管理系統(tǒng)，各種主數(shù)據(jù)分別在各自的核心 業(yè)務系統(tǒng)中維護，不能有效同步至其他相關業(yè)務系統(tǒng)，導致存在主數(shù)據(jù)不統(tǒng)一、 不

7、規(guī)范、不集中的可能。因此0前迫切需要一套管理系統(tǒng)來對相關主數(shù)據(jù)進行規(guī) 范高效的管理，以提高企業(yè)信息數(shù)據(jù)的價值和數(shù)據(jù)決策分析效率。3.2主數(shù)據(jù)管理業(yè)務需求·規(guī)范主數(shù)據(jù)基本定義；·主數(shù)據(jù)源分布明晰，避免系統(tǒng)之間數(shù)據(jù)交叉、引用關系紊亂;·建立主數(shù)據(jù)同步機制，提高數(shù)據(jù)真實性和及時性；·保持數(shù)據(jù)編碼在各系統(tǒng)間保持一 致或建立明確的對應關系；3.3主數(shù)據(jù)管理0前存在的問題·標準缺失·無奮效的專業(yè)主數(shù)據(jù)管理系統(tǒng)·沒冇專門的管理組織，仍然由相關各業(yè)務部門在各

8、自系統(tǒng)中獨 立維護相關數(shù)據(jù)4主數(shù)據(jù)管理在sg-erp項0的砬用省電力公司sg-erp項0主數(shù)據(jù)管理模式遵循國網(wǎng)統(tǒng)一標準的主數(shù)據(jù)設 計規(guī)范，以國網(wǎng)主數(shù)據(jù)模型為基礎進行模型設計。采用國網(wǎng)主數(shù)據(jù)縱向數(shù)據(jù)交互 技術方案，實現(xiàn)主數(shù)據(jù)的縱向貫通。4.1主數(shù)據(jù)管理建設0標建立一套遵循業(yè)界主流標準的規(guī)范;具有完善創(chuàng)建、審批、清理等功能； 支持跨組織、跨業(yè)務系統(tǒng)的滿足企業(yè)級主數(shù)據(jù)應用；支持省公司統(tǒng)一管理主數(shù)據(jù) 質(zhì)量和權限的主數(shù)據(jù)管理平臺。4.2主數(shù)據(jù)管理應用設計框架0前電力主數(shù)據(jù)管理種類有：物料、固定資產(chǎn)、員工、會計科0、設備、 供應商等。在省電力公司內(nèi)部，采用橫向數(shù)據(jù)交互技術方案，通過主數(shù)據(jù)交換平臺 和pms

9、、集中報賬、sap等業(yè)務系統(tǒng)進行數(shù)據(jù)交互，實現(xiàn)主數(shù)據(jù)的橫向貫通。業(yè)務流程描述：應用場景一、國網(wǎng)數(shù)據(jù)與mdm hi步方案：國網(wǎng)公司mdm平臺將要下發(fā)的數(shù)據(jù)傳輸至國網(wǎng)的ods庫，通過國網(wǎng)一 體化平臺將數(shù)據(jù)下發(fā)至網(wǎng)省公司的一體化平臺，同吋下發(fā)一條jms消息到網(wǎng)省 jms消息平臺。網(wǎng)省公司的一體化平臺將數(shù)據(jù)傳輸至網(wǎng)省公司的ods庫，同吋 網(wǎng)省jms消息平臺收到一條國網(wǎng)下發(fā)數(shù)據(jù)的消息。網(wǎng)省公司mdm平臺從 ods庫中將國網(wǎng)下發(fā)的數(shù)據(jù)取出，冋吋通過網(wǎng)省jms消息平臺往國網(wǎng)公司發(fā)送 一條反饋消息。應用場景二、mdm向業(yè)務系統(tǒng)分發(fā)數(shù)據(jù)方案mdm平臺將從網(wǎng)省ods同步的數(shù)據(jù)（或業(yè)務系統(tǒng)修改的數(shù)據(jù)）通過傳 輸工具

10、pi以不同的方式（webservice、jdbc、idoc、soap等）傳遞到業(yè)務系統(tǒng), 同時業(yè)務系統(tǒng)也可以將修改以類似的方式同步到mdm平臺，實現(xiàn)數(shù)據(jù)共享。4.3主數(shù)據(jù)管理核心功能4.3.1核心功能組件生命周期管理服務：履行針對主數(shù)據(jù)的crud操作，執(zhí)行對主數(shù)據(jù)存 儲庫中的數(shù)據(jù)進行更新、存取和管理時的業(yè)務邏輯，除此之外，它還負責維護主 數(shù)據(jù)的衍生信息，例如客戶之間的關系、客戶的偏好、客戶在各種客戶服務渠道 上的行為軌跡等。lifecycle management services貫穿整個主數(shù)據(jù)管理的生命周 期，它利用data quality management services來確保數(shù)據(jù)質(zhì)

11、量、利用master data event management services來捕獲各種主數(shù)據(jù)變化等相關的事件，以及利用hierarchy and relationship management services用來維護數(shù)據(jù)實體之間的關系和層次。信息完整性服務：確保主數(shù)據(jù)的質(zhì)量和標準化，這在主數(shù)據(jù)管理解決 方案中一個非常重要的組件，在我們從各個業(yè)務系統(tǒng)獲取數(shù)據(jù)之后，要對數(shù)據(jù)進 行清洗和驗證，例如對于地址而言，要彌補地址的缺失、地市的缺失、郵編的缺 失、進行地址的標準化等。對于其他數(shù)據(jù)要進行非空檢查、外鍵檢査、數(shù)據(jù)過濾 等。然后要對數(shù)據(jù)進行匹配/重復識別、自動進行基于規(guī)則的合并/去重、交 叉

12、驗證等，并il還要遵從企業(yè)的數(shù)據(jù)管控規(guī)范和流程。它可以是master data management services的一個內(nèi)部組件，也可以調(diào)用整個企業(yè)的information integrity services 來實現(xiàn)。authoring服務：依據(jù)數(shù)據(jù)管控流程，定義和擴展企業(yè)的主數(shù)據(jù)模型。層次和關系管理：定義數(shù)據(jù)實體的層次(hierarchy)，分組(grouping)， 關系(relationship)，版本(version)等。主數(shù)據(jù)事件管理服務:捕獲事件并且觸發(fā)相應的操作，包括事件發(fā)現(xiàn)、 事件管理和通知功能，它在主數(shù)據(jù)管理系統(tǒng)和業(yè)務系統(tǒng)之間進行數(shù)據(jù)同步吋起到 至關重要的作用。基礎服務

13、：提供通用服務，包括安全控制、錯誤處理、交易日志、事 件曰志等功能。主數(shù)據(jù)存儲庫：包括 metadata, master data, history data, referencedata 等4.3.2主數(shù)據(jù)管理系統(tǒng)與其他系統(tǒng)的接口協(xié)議主數(shù)據(jù)管理系統(tǒng)為所有業(yè)務系統(tǒng)提供各種服務接u,通過實時的、批量 的接u可以讀取或者修改主數(shù)據(jù)，這些接u包括batch, web services, xml interface, messaging interface, publish/subscribe, import/export services, data standardization interfac

14、e, directory integration 等。除了這®標準的技術接u之 外，對于某些專有系統(tǒng)還提供適配器(adapter)接口，通過適配器接口可以和 一些特有的系統(tǒng)做接口，例如企業(yè)中的傳統(tǒng)(legacy)應用系統(tǒng)或者sap等打 包應用。5主數(shù)據(jù)管理經(jīng)驗總結主數(shù)據(jù)管理不能僅局限于技術層面，只關注主數(shù)據(jù)管理的技術方面是0 光短淺的，從技術開始的方案也不會完全滿足企業(yè)主數(shù)據(jù)的需求。主數(shù)據(jù)管理往往是通過有效管理對公司業(yè)務運營至關重要的主數(shù)據(jù)從 而解決業(yè)務難題的。因此，主數(shù)據(jù)管理方案首先依賴于要處理什么樣的業(yè)務難題, 只有關注業(yè)務的方式才能實現(xiàn)主數(shù)據(jù)管理方案，從而解決特定的業(yè)務難題。奮

15、些 公司往往在開始主數(shù)據(jù)管理項0的吋候不確定從哪里下手，根據(jù)sg-erp項0主 數(shù)據(jù)管理的實施經(jīng)驗將如何開始主數(shù)據(jù)分為如下幾個步驟：首先，企業(yè)應該首先對業(yè)務流程進行分析，識別出效率低下的業(yè)務處理， 在這些業(yè)務處理中，哪一個應該最先解決，通過選擇開始的業(yè)務處理，需要管理 的主數(shù)據(jù)類型就明顯了。其次，要識別的是業(yè)務用戶如何在他們的業(yè)務處理中使用主數(shù)據(jù)，從而 找到最適合用戶的使用模式來支持業(yè)務用戶的需求。最后，要了解主數(shù)據(jù)管理的業(yè)務需求是什么。理解管理主數(shù)據(jù)的需求很 重要，它是為了規(guī)范主數(shù)據(jù)的有效性、可用性、完整性和安全性而產(chǎn)生的需求。通過采用關注業(yè)務的方式實施主數(shù)據(jù)管理，可以為大多數(shù)的業(yè)務問題提 供一個完整的解決方案一一只是用需要的主數(shù)據(jù)，用正確的方案體系來實現(xiàn)，為 正確的業(yè)務用途而部署，使用正確的數(shù)據(jù)管理結構。當一個緊迫的業(yè)務被主數(shù)據(jù) 管理方案成功解決的吋候，方案的采用就會在用戶中顯著提高，因為它消除了效 率的低下，改善了生產(chǎn)率，帶來了可量化的成本節(jié)約和較高的投資冋報率。從一 個定義好的業(yè)務問題出發(fā)，可以讓你從小地方開始，在將解決方案擴展到其他業(yè) 務單元。一旦用戶體會到了主數(shù)據(jù)管理方案的好處，他們就會更加支持它在其他 領域內(nèi)的使用一一為企業(yè)規(guī)模的主數(shù)據(jù)管理方案鋪平了道路。6結語主數(shù)據(jù)管理，對sg-erp系統(tǒng)建設來說是一項新的工作，需要在實踐中 不斷探索、完善和提