主數(shù)據(jù)基本概念

J、基本概念：1、主數(shù)據(jù)主數(shù)據(jù)是指在整個(gè)企業(yè)范圍內(nèi)各個(gè)系統(tǒng)（操作/事務(wù)型應(yīng)用系統(tǒng)以及分析型系統(tǒng)）間要共享的、高價(jià)值的數(shù)據(jù)。也稱企業(yè)基準(zhǔn)數(shù)據(jù)。例如，物資、供應(yīng)商、客戶、財(cái)務(wù)、賬戶、員工、合作伙伴、組織單位等都是主數(shù)據(jù)。主數(shù)據(jù)通常需要在整個(gè)企業(yè)范圍內(nèi)保持一致性、完整性、可控性。需要注意的是：主數(shù)據(jù)不是企業(yè)內(nèi)所有的業(yè)務(wù)數(shù)據(jù)，只是有必要在各個(gè)系統(tǒng)間共享的數(shù)據(jù)才是主數(shù)據(jù)。是指企業(yè)內(nèi)各個(gè)系統(tǒng)間需要共享的數(shù)據(jù)，它能描述核心業(yè)務(wù)實(shí)體，例如，客戶、供應(yīng)商、帳戶、組織單位、員工、合作伙伴、位置信息等都是主數(shù)據(jù)。企業(yè)內(nèi)大部分的交易數(shù)據(jù)、帳單數(shù)據(jù)等都不是主數(shù)據(jù)。主數(shù)據(jù)與記錄業(yè)務(wù)活動(dòng)，波動(dòng)較大的交易數(shù)據(jù)、帳單數(shù)據(jù)相比變化緩慢。主數(shù)據(jù)是企業(yè)內(nèi)能夠跨業(yè)務(wù)重復(fù)使用（即共享的）、高價(jià)值的數(shù)據(jù)。這些主數(shù)據(jù)在進(jìn)行主數(shù)據(jù)管理之前經(jīng)常存在于多個(gè)異構(gòu)或同構(gòu)的系統(tǒng)中。它按一定的規(guī)則被量化為可以記錄一類信息的集合，成為可以被計(jì)算機(jī)系統(tǒng)處理、存儲(chǔ)和交換的數(shù)據(jù)。主數(shù)據(jù)必須存在并加以正確維護(hù)，在正規(guī)的關(guān)系數(shù)據(jù)模型中，才能保證被交易系統(tǒng)參照的完整性。2、 元數(shù)據(jù)元數(shù)據(jù)是關(guān)于數(shù)據(jù)的結(jié)構(gòu)信息，或者可以簡(jiǎn)單說成是“數(shù)據(jù)的數(shù)據(jù)”。如貨款數(shù)據(jù)中單價(jià)與數(shù)量。3、 數(shù)據(jù)模型表示一類特定信息的數(shù)據(jù)形式構(gòu)架，包括數(shù)據(jù)的結(jié)構(gòu)部分、數(shù)據(jù)的操作部分和數(shù)據(jù)的約束條件。4、 實(shí)體指特定的業(yè)務(wù)對(duì)象，如物料、設(shè)備、員工。每一類主數(shù)據(jù)為一個(gè)實(shí)體，如物資主數(shù)據(jù)為一個(gè)實(shí)體。5、屬性事物本身固有的不可缺少的性質(zhì)，通常用抽象、分解、歸納后的事物特征表示。如描述供應(yīng)商時(shí)，供應(yīng)商的公司名稱、地址、聯(lián)系電話等。6、 實(shí)體模型描述主數(shù)據(jù)有哪些屬性組成以及如何組成的模型。例如描述物資主數(shù)據(jù)由那些屬性組成，這些屬性如何分類、如何校驗(yàn)等信息。7、 實(shí)體模型摸版：描述實(shí)體模型下屬性的模版信息。8、 實(shí)體模型摸版標(biāo)準(zhǔn)：描述實(shí)體模型下屬性的不同標(biāo)準(zhǔn)引用情況，例如某一屬性可按國(guó)標(biāo)，美標(biāo)定義不同的元屬性構(gòu)成。9、 實(shí)體模型元屬性描述實(shí)體模型下屬性的結(jié)構(gòu)信息，或者可以簡(jiǎn)單說成是“屬性的屬性”。如物料中的“規(guī)格”屬性是由長(zhǎng)、寬、高組成，其中長(zhǎng)、寬、高即是元屬性。10、 實(shí)體模型元屬性規(guī)則描述實(shí)體模型元屬性的相關(guān)規(guī)則，例如：元屬性的定義數(shù)據(jù)類型（字符型、數(shù)值型、日期型等），字符長(zhǎng)度，取值方法（下拉框、編輯、元屬性組成等），是否必填、校驗(yàn)方式等。11、 實(shí)體模型校驗(yàn)規(guī)則創(chuàng)建主數(shù)據(jù)實(shí)體時(shí)，主數(shù)據(jù)的數(shù)據(jù)校驗(yàn)方法，例如唯一性校驗(yàn)、相似性校驗(yàn)等。12、 實(shí)體模型編碼規(guī)則：定義主數(shù)據(jù)實(shí)體的編碼生成規(guī)則。二、主數(shù)據(jù)管理：為了達(dá)到主數(shù)據(jù)能在整個(gè)企業(yè)范圍內(nèi)保持一致性、完整性、可控性這一目標(biāo)，就需要進(jìn)行主數(shù)據(jù)管理。主數(shù)據(jù)管理(MasterDataManagement，MDM)是指一組約束和方法用來保證一個(gè)企業(yè)內(nèi)主題域和系統(tǒng)內(nèi)相關(guān)數(shù)據(jù)和跨主題域和系統(tǒng)的相關(guān)數(shù)據(jù)的實(shí)時(shí)性、含義和質(zhì)量。這是從深層次來說來說明主動(dòng)主數(shù)據(jù)管理(MDM)的深度和復(fù)雜性，簡(jiǎn)單的說，主數(shù)據(jù)管理(MDM)保證你的系統(tǒng)協(xié)調(diào)和重用通用、正確的業(yè)務(wù)數(shù)據(jù)(主數(shù)據(jù))。通常，我們會(huì)把主數(shù)據(jù)管理作為應(yīng)用流程的補(bǔ)充，通過從各個(gè)操作/事務(wù)型應(yīng)用以及分析型應(yīng)用中分離出主要的信息，使其成為一個(gè)集中的、獨(dú)立于企業(yè)中各種其他應(yīng)用核心資源，從而使得企業(yè)的核心信息得以重用并確保各個(gè)操作/事務(wù)型應(yīng)用以及分析型應(yīng)用間的核心數(shù)據(jù)的一致性。通過主數(shù)據(jù)管理，改變企業(yè)數(shù)據(jù)利用的現(xiàn)狀，從而更好地為企業(yè)信息集成做好鋪墊。主數(shù)據(jù)管理(MDM)可以幫助我們創(chuàng)建并維護(hù)整個(gè)企業(yè)內(nèi)主數(shù)據(jù)的單一視圖(SingleView)，保證單一視圖的準(zhǔn)確性、一致性以及完整性，從而提供數(shù)據(jù)質(zhì)量，統(tǒng)一商業(yè)實(shí)體的定義，簡(jiǎn)化改進(jìn)商業(yè)流程并提供業(yè)務(wù)的響應(yīng)速度。從變化的頻率來看，主數(shù)據(jù)和日常交易數(shù)據(jù)不一樣，變化相對(duì)緩慢，另外，主數(shù)據(jù)由于跨各個(gè)系統(tǒng)，所以對(duì)數(shù)據(jù)的一致性、實(shí)時(shí)性以及版本控制要求很高。主數(shù)據(jù)管理其實(shí)在很早之前就一直存在，只不過現(xiàn)在隨著業(yè)務(wù)發(fā)展以及監(jiān)管的需要，對(duì)主數(shù)據(jù)的實(shí)時(shí)性、準(zhǔn)確性、一致性有了更高的要求，才被業(yè)界廣泛接受，各個(gè)廠商相應(yīng)的推出了一系列的主數(shù)據(jù)管理集成與基礎(chǔ)套件以及特定領(lǐng)域的解決方案。近年來最明顯的變化是，客戶在以前的時(shí)候經(jīng)常問的問題是：“主數(shù)據(jù)管理是什么？”，而現(xiàn)在客戶經(jīng)常問的問題演變成了：“我們的業(yè)務(wù)的確存在一些問題，主數(shù)據(jù)管理正好可以解決這個(gè)問題，我們?cè)趺撮_始？”。與以前相比，客戶對(duì)主數(shù)據(jù)管理(MDM)的認(rèn)識(shí)有了巨大的進(jìn)步，并開始嘗試用主數(shù)據(jù)管理(MDM)解決他們?cè)谡麄€(gè)企業(yè)范圍內(nèi)進(jìn)行跨業(yè)務(wù)、跨主題域時(shí)遇上的各種挑戰(zhàn)和問題：比如稅務(wù)行業(yè)，稅務(wù)局在按納稅人在一些分析統(tǒng)計(jì)時(shí)，就發(fā)現(xiàn)關(guān)于納稅人的基本信息分布在核心征收管理系統(tǒng)、發(fā)票管理系統(tǒng)、個(gè)人所得稅系統(tǒng)、增值稅管理系統(tǒng)等多達(dá)幾十個(gè)系統(tǒng)中，使得統(tǒng)計(jì)分析變得困難起來，在比如在醫(yī)療設(shè)備公司，由于沒有按照供應(yīng)商進(jìn)行產(chǎn)品層次的分類，各個(gè)產(chǎn)品的描述也很不一樣，使得產(chǎn)品目錄的維護(hù)十分困難。隨著業(yè)務(wù)的發(fā)展，對(duì)各行各業(yè)來說，生成并維護(hù)一個(gè)統(tǒng)一的主數(shù)據(jù)系統(tǒng)變的十分迫切和必要，特別是對(duì)一些跨國(guó)公司，如何在不同的地區(qū)(各個(gè)國(guó)家和地區(qū))的業(yè)務(wù)系統(tǒng)之間維護(hù)關(guān)于客戶、產(chǎn)品目錄、供應(yīng)商等信息的單一視圖更是重要。相對(duì)于傳統(tǒng)數(shù)據(jù)倉庫解決方案的單向集成，主數(shù)據(jù)管理正注重將主數(shù)據(jù)的變化同步發(fā)布到各個(gè)關(guān)聯(lián)的業(yè)務(wù)系統(tǒng)中(主數(shù)據(jù)管理數(shù)據(jù)是雙向的)。主數(shù)據(jù)不光指需要共享的數(shù)據(jù)，更包含需要共享的業(yè)務(wù)規(guī)則和策略。

（主數(shù)據(jù)管理的成熟度根據(jù)主數(shù)據(jù)管理實(shí)施的復(fù)雜程度，參照J(rèn)illDyche,EvanLevy的觀點(diǎn)大體可以把主數(shù)據(jù)管理可以分為五個(gè)層次，從低到高反映了主數(shù)據(jù)管理（MDM）的不同成熟度。下面我們簡(jiǎn)單介紹一下這五個(gè)層次：Level0:沒有實(shí)施任何主數(shù)據(jù)管理（MDM）在Level0的情況下，意味著企業(yè)的各個(gè)應(yīng)用之間沒有任何的數(shù)據(jù)共享，整個(gè)企業(yè)沒有數(shù)據(jù)定義元素存在。比如，一個(gè)公司銷售很多產(chǎn)品，對(duì)這些產(chǎn)品的生產(chǎn)和銷售由多個(gè)獨(dú)立的系統(tǒng)來處理，各個(gè)系統(tǒng)獨(dú)立處理產(chǎn)品數(shù)據(jù)并擁有自己獨(dú)立的產(chǎn)品列表，各個(gè)系統(tǒng)之間不共享產(chǎn)品數(shù)據(jù)。在Level0,每個(gè)獨(dú)立的應(yīng)用負(fù)責(zé)管理和維護(hù)自己的關(guān)鍵數(shù)據(jù)（比如產(chǎn)品列表、客戶信息等），各個(gè)系統(tǒng)間不共享這些信息，這些數(shù)據(jù)是不連通的。Level1:提供列表Level2:同等訪問（通過接口的方式，各個(gè)系統(tǒng)與主數(shù)據(jù)主機(jī)之間直接互聯(lián)）這個(gè)知識(shí)庫可以是一個(gè)數(shù)據(jù)庫或者一個(gè)應(yīng)用系統(tǒng)，通過在線的方式支持?jǐn)?shù)據(jù)的訪問和共享。創(chuàng)建、讀取、更新和刪除（CRUD）是處理基本功能的典型編程術(shù)語。在這個(gè)階段，規(guī)則管理、數(shù)據(jù)質(zhì)量和變更管理必須在企業(yè)范圍內(nèi)作為附加功能定制構(gòu)建。Level3:集中總線處理與MDMLevel2相比，MDMLevel3打破了各個(gè)獨(dú)立應(yīng)用的組織邊界，使用各個(gè)系統(tǒng)都能接受的數(shù)據(jù)標(biāo)準(zhǔn)統(tǒng)一建立和維護(hù)主數(shù)據(jù) （MDMLevel2的主數(shù)據(jù)主機(jī)上存儲(chǔ)的數(shù)據(jù)還是按照各個(gè)系統(tǒng)分開存儲(chǔ)的，沒有真正的整合在一起 ）。集中處理意味著為MDM構(gòu)建了一個(gè)通用的、基于目標(biāo)構(gòu)建的平臺(tái)。這意味著應(yīng)用系統(tǒng)，作為消費(fèi)者或使用主數(shù)據(jù)，擁有一個(gè)共識(shí)就是數(shù)據(jù)是主題數(shù)據(jù)內(nèi)容的映像，打破了各個(gè)獨(dú)立應(yīng)用的組織邊界。MDMLevel3支持分布主參考數(shù)據(jù)的存在。Level4:業(yè)務(wù)規(guī)則和政策支持一旦數(shù)據(jù)從多個(gè)數(shù)據(jù)源整合在一起，主題域視圖超越單獨(dú)的應(yīng)用并表現(xiàn)為一個(gè)企業(yè)視圖，你將獲得事實(shí)的單一版本。Level5:企業(yè)數(shù)據(jù)集中在MDMLevel5，總線和相關(guān)的主數(shù)據(jù)被集成到獨(dú)立的應(yīng)用中。主數(shù)據(jù)和應(yīng)用數(shù)據(jù)之間沒有明顯的分隔。他們是一體的。當(dāng)主數(shù)據(jù)記錄詳細(xì)資料被修改后，所有應(yīng)用的相關(guān)數(shù)據(jù)元素都將被更新。這意味著所有的消費(fèi)應(yīng)用和源系統(tǒng)訪問的是相同的數(shù)據(jù)實(shí)例。這本質(zhì)上是一個(gè)閉環(huán)的MDM:所有的應(yīng)用系統(tǒng)通過統(tǒng)一管理的主數(shù)據(jù)集成在一起。在這個(gè)級(jí)別，所有在系統(tǒng)看起來都是事實(shí)的同一個(gè)版本。操作應(yīng)用系統(tǒng)和MDM內(nèi)容是同步的，所以當(dāng)變更發(fā)生時(shí)，操作應(yīng)用系統(tǒng)都將更新。在那些熟悉的MDM架構(gòu)風(fēng)格中，持久總線架構(gòu)，當(dāng)一個(gè)總線更新所有的操作應(yīng)用系統(tǒng)將體現(xiàn)這種變更，形成改變的直接操作視圖。在注冊(cè)環(huán)境中，當(dāng)數(shù)據(jù)數(shù)據(jù)更新時(shí)，總線將通過Web服務(wù)連接相關(guān)系統(tǒng)應(yīng)用事務(wù)更新。因此，MDMLevel5提供一個(gè)集成的，同步的架構(gòu)，當(dāng)一個(gè)有權(quán)限的系統(tǒng)更新一個(gè)數(shù)據(jù)值時(shí)，公司內(nèi)所有

的系統(tǒng)將反映這個(gè)變更。系統(tǒng)更新完數(shù)據(jù)值后不要單選其他系統(tǒng)中相應(yīng)值的更新：MDM將使這種更新變的透明。從MDMLevel4到MDMLevel5意味著MDM功能性不是在一個(gè)應(yīng)用內(nèi)被特殊設(shè)計(jì)或編碼的。這還意味著主數(shù)據(jù)傳播和供應(yīng)不需要源系統(tǒng)專門的開發(fā)或支持。所有的應(yīng)用清楚的知道他們并不擁有或控制主數(shù)據(jù)。他們僅僅使用數(shù)據(jù)來支持他們自己的功能和流程。由于MDM總線和支持的IT基礎(chǔ)架構(gòu)，所有的應(yīng)用可以訪問主參考數(shù)據(jù)。一個(gè)公司在完成MDMLevel5后將使他們所有的應(yīng)用連在一起一既包括操作的也包括分析的一所有訪問主數(shù)據(jù)是透明的。舉例說明，當(dāng)一個(gè)客戶更新她的狀態(tài)一不要管注冊(cè)該變更的系統(tǒng)一數(shù)據(jù)變更將被廣播到所有的應(yīng)用平臺(tái)（因此一致起來）°MDMLevel5是把數(shù)據(jù)概念作為一種service來實(shí)現(xiàn)。MDMLevel5保證了一個(gè)一致的主數(shù)據(jù)主題域企業(yè)映像。定義“客戶”和其他應(yīng)用接受客戶主數(shù)據(jù)業(yè)務(wù)規(guī)則變化實(shí)際上是一回事°MDMLevel5移走了主數(shù)據(jù)的最后一個(gè)障礙：統(tǒng)一采用數(shù)據(jù)定義、授權(quán)使用和變更傳播。）主數(shù)據(jù)管理的關(guān)鍵就是“管理”。主數(shù)據(jù)管理不會(huì)創(chuàng)建新的數(shù)據(jù)或新的數(shù)據(jù)縱向結(jié)構(gòu)。相反，它提供了一種方法，使企業(yè)能夠有效地管理存儲(chǔ)在分布系統(tǒng)中的數(shù)據(jù)。主數(shù)據(jù)管理使用現(xiàn)有的系統(tǒng)，它從這些系統(tǒng)中獲取最新信息，并提供了先進(jìn)的技術(shù)和流程，用于自動(dòng)、準(zhǔn)確、及時(shí)地分發(fā)和分析整個(gè)企業(yè)中的數(shù)據(jù)，并對(duì)數(shù)據(jù)進(jìn)行驗(yàn)證。主數(shù)據(jù)管理解決方案具有以下特性：?在企業(yè)層面上整合了現(xiàn)有縱向結(jié)構(gòu)中的客戶信息以及其他知識(shí)和深層次信息?共享所有系統(tǒng)中的數(shù)據(jù)，使之成為一系列以客戶為中心的業(yè)務(wù)流程和服務(wù)?實(shí)現(xiàn)對(duì)于客戶、產(chǎn)品和供應(yīng)商都通用的主數(shù)據(jù)形式，加速數(shù)據(jù)輸入、檢索和分析?支持?jǐn)?shù)據(jù)的多用戶管理，包括限制某些用戶添加、更新或查看維護(hù)主數(shù)據(jù)的流程的能力?集成產(chǎn)品信息管理、客戶關(guān)系管理、客戶數(shù)據(jù)集成以及可對(duì)主數(shù)據(jù)進(jìn)行分析的其他解決方案。由于和主數(shù)據(jù)管理關(guān)聯(lián)的方法和流程的運(yùn)行與企業(yè)的業(yè)務(wù)流系統(tǒng)及其他系統(tǒng)彼此獨(dú)立，因此這些方法和流程不僅能檢索、更新和分發(fā)數(shù)據(jù)，還能滿足主數(shù)據(jù)的各種用途。主數(shù)據(jù)管理通過將數(shù)據(jù)與操作應(yīng)用程序?qū)崟r(shí)集成來支持操作用途。主數(shù)據(jù)管理還通過使用經(jīng)過授權(quán)的流程來創(chuàng)建、定義和同步主數(shù)據(jù)來支持協(xié)作用途。最后，主數(shù)據(jù)管理通過事件管理工具事先將主數(shù)據(jù)推送至分析應(yīng)用程序來支持分析用途。全面的主數(shù)據(jù)管理（MDM）功能通過單一平臺(tái)上成熟的多領(lǐng)域MDM集中主數(shù)據(jù)的管理，從而消除點(diǎn)對(duì)點(diǎn)集成，簡(jiǎn)化您的結(jié)構(gòu)，降低維護(hù)成本，改進(jìn)數(shù)據(jù)治理。InformaticaMDM（主數(shù)據(jù)管理）能夠通過以下步驟幫助企業(yè)成功進(jìn)行多領(lǐng)域主數(shù)據(jù)管理：建模：用靈活的數(shù)據(jù)模型定義任意類型的主數(shù)據(jù)

識(shí)別：快速匹配和準(zhǔn)確識(shí)別重復(fù)項(xiàng)目解決：合并以創(chuàng)建可靠、唯一的真實(shí)來源聯(lián)系：揭示各類主數(shù)據(jù)之間的關(guān)系治理：創(chuàng)建、使用、管理和監(jiān)控主數(shù)據(jù)InformaticaMDM提供業(yè)務(wù)用戶和數(shù)據(jù)管理員可訪問的強(qiáng)大借口， 從而實(shí)現(xiàn)完整的數(shù)據(jù)管理和數(shù)據(jù)異常處理，使您可以輕松瀏覽不同主數(shù)據(jù)實(shí)體中的多層次結(jié)構(gòu)。利用主數(shù)據(jù)管理降低企業(yè)口成本隨著企業(yè)的IT預(yù)算增加，IT經(jīng)理們都希望能夠?qū)で蟮礁咝У慕档虸T成本的方法。并非所有的MDM技術(shù)都能帶來這些成本效益。只有配置容易的多領(lǐng)域、模型驅(qū)動(dòng)且靈活的MDM技術(shù)才能在更短的時(shí)間里實(shí)現(xiàn)價(jià)值和降低總擁有成本。靈活的InformaticaMDM解決方案，即多領(lǐng)域主數(shù)據(jù)管理，就能幫助IT部門實(shí)現(xiàn)與投資價(jià)值的最大化。主要從以下七個(gè)方面實(shí)現(xiàn)：降低接口成本：減少應(yīng)用程序之間的點(diǎn)對(duì)點(diǎn)集成。點(diǎn)對(duì)點(diǎn)集成的開發(fā)和維護(hù)成本很高，但是InformaticaMDM（多域主數(shù)據(jù)管理）可以通過集中公共信息（主數(shù)據(jù)）對(duì)它們進(jìn)行簡(jiǎn)化，并且做到在業(yè)務(wù)流程的不同環(huán)節(jié)都能提供這些信息。降低多域的第三方數(shù)據(jù)采集成本：消除來自外部數(shù)據(jù)提供商的重復(fù)數(shù)據(jù)采集可顯著節(jié)省成本。使用MDM（主數(shù)據(jù)管理），第三方數(shù)據(jù)可以直接集成到MDM系統(tǒng)中，并分發(fā)到所有下游應(yīng)用程序，避免了重復(fù)的數(shù)據(jù)采集。降低數(shù)據(jù)清理成本：在MDM系統(tǒng)中集中清洗數(shù)據(jù)是機(jī)構(gòu)可用來降低成本的另一種方法。通過將數(shù)據(jù)從這些不同的應(yīng)用程序集成到中央MDM系統(tǒng)，就有可能在一個(gè)單獨(dú)的系統(tǒng)中進(jìn)行整個(gè)企業(yè)所有數(shù)據(jù)的清洗。降低外包清洗成本：InformaticaMDM系統(tǒng)可通過消除昂貴的外包手動(dòng)清洗而節(jié)約大量成本。MDM系統(tǒng)用持續(xù)的自動(dòng)清洗、擴(kuò)充和重復(fù)數(shù)據(jù)刪除、集中存儲(chǔ)以備日后使用、跟蹤數(shù)據(jù)更改，以及為營(yíng)銷和合規(guī)性應(yīng)用程序提供清洗、擴(kuò)充后的數(shù)據(jù)，消除了對(duì)外包手動(dòng)清洗的需要。降低多余系統(tǒng)的許可證、支持和硬件成本：InformaticaMDM通過集中企業(yè)數(shù)據(jù)實(shí)現(xiàn)了冗余數(shù)據(jù)存儲(chǔ)數(shù)量的減少甚至消除，