《信息技術(shù)應(yīng)用創(chuàng)新 經(jīng)營管理系統(tǒng)數(shù)據(jù)管理技術(shù)規(guī)范》（征求意見稿）

1信息技術(shù)應(yīng)用創(chuàng)新經(jīng)營管理系統(tǒng)數(shù)據(jù)管理技術(shù)規(guī)范主數(shù)據(jù)管理、數(shù)據(jù)集成和共享、數(shù)據(jù)安全和數(shù)據(jù)質(zhì)量等方面的技術(shù)規(guī)本標(biāo)準(zhǔn)適用于組織和機(jī)構(gòu)對經(jīng)營管理系統(tǒng)在數(shù)據(jù)管理與數(shù)據(jù)應(yīng)用能力建設(shè)的指導(dǎo)和評GB/T36073—2018數(shù)據(jù)管理能力成熟度評估GB/T42450—2023信息技術(shù)大數(shù)據(jù)數(shù)據(jù)資源3.1GB/T36073—2018、GB/T42450—2023界定的以及下列術(shù)語和定義適用于本文件。一種用于分析和報(bào)告來自多個(gè)來源的結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù)的，面向商務(wù)智能活動(dòng)的數(shù)據(jù)管理系3.2一種用于以原生格式存儲(chǔ)、處理和保護(hù)大量結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的集3.33.4元數(shù)據(jù)metadata3.53.6數(shù)據(jù)質(zhì)量dataquality在指定條件下使用時(shí)，數(shù)據(jù)的特性滿足明確的和隱含的要求的程23.73.8主數(shù)據(jù)masterdata組織中需要跨系統(tǒng)、跨部門進(jìn)行共享的核心業(yè)有一組屬性規(guī)定其定義、標(biāo)識、表示和允許值的數(shù)3.104縮略語API：應(yīng)用程序接口（ApplicationProgrammingInterface）ERP：企業(yè)資源計(jì)劃(EnterpriseResourcePlanDAMA：數(shù)據(jù)管理協(xié)會(huì)（DataManagementAssociDML：數(shù)據(jù)操縱語言（DataManipulationLanguagETL：數(shù)據(jù)的提取、轉(zhuǎn)換和加載（ExtractTransformLHTTP：超文本傳輸協(xié)議（HypertextTransferProtoHTTPS：超文本加密傳輸協(xié)議（HypertextTransferProtocoloverSecREST：一組架構(gòu)約束條件和原則（RepresentationalStateTransPDF：可攜帶文件格式（PortableDocumentFormSCM：軟件配置管理（SoftwareConfigurationManTCP：傳輸控制協(xié)議（TransmissionControlProJDBC：Java數(shù)據(jù)庫連接（JavaDatabasecoCWM：公共倉庫元模型(CommonWarehouseMetaCMIS：內(nèi)容管理互操作性服務(wù)標(biāo)準(zhǔn)協(xié)議（ContentManagementInteroperOLTP：聯(lián)機(jī)事務(wù)處理過程（On-LineTransactionProcessOLAP：聯(lián)機(jī)分析處理（OnlineAnalyticalProXML：可擴(kuò)展標(biāo)記語言（eXtensibleMarkupLaJSON：JS對象簡譜一種輕量級的數(shù)據(jù)交換格式（JavaScriptObjectNoPKI：公鑰基礎(chǔ)設(shè)施(PublicKeyInfrastructuCA：證書授權(quán)（CertificateAuth35.2數(shù)據(jù)對象類別6.1概述46.2體系設(shè)計(jì)經(jīng)營管理系統(tǒng)元數(shù)據(jù)應(yīng)包含但不限于以下三種類型：業(yè)務(wù)元數(shù)據(jù)、技可針對不同應(yīng)用領(lǐng)域和功能，滿足對數(shù)據(jù)對象的描述、定位經(jīng)營管理系統(tǒng)主數(shù)據(jù)應(yīng)是具備高價(jià)值、高共享、相對穩(wěn)定的基礎(chǔ)數(shù)據(jù)。主數(shù)據(jù)技術(shù)體系應(yīng)數(shù)據(jù)平臺和主數(shù)據(jù)集成兩個(gè)層面的設(shè)計(jì)。平臺層面應(yīng)包括但不限于元模型管理、主數(shù)據(jù)清洗、主數(shù)據(jù)原理和結(jié)果，以便理解和接受模型的決策。數(shù)據(jù)模型向上應(yīng)能承接業(yè)務(wù)需求，向下應(yīng)能數(shù)據(jù)標(biāo)準(zhǔn)體系應(yīng)明確規(guī)范企業(yè)經(jīng)營管理業(yè)務(wù)活動(dòng)中所涉及數(shù)據(jù)的規(guī)范化定義和統(tǒng)一解釋，命名和命名約定、數(shù)據(jù)分類和層次機(jī)構(gòu)、數(shù)據(jù)格式和數(shù)據(jù)類型、數(shù)據(jù)采集和錄入規(guī)則、數(shù)據(jù)交換和集經(jīng)營管理系統(tǒng)數(shù)據(jù)集成和共享應(yīng)能橫貫企業(yè)內(nèi)外部的目標(biāo)異構(gòu)系統(tǒng)、應(yīng)用、數(shù)據(jù)源，具備經(jīng)營管理業(yè)務(wù)板塊和數(shù)據(jù)倉庫等系統(tǒng)的應(yīng)用協(xié)同和數(shù)基于數(shù)據(jù)倉庫的結(jié)構(gòu)化數(shù)據(jù)集成、基于數(shù)據(jù)湖的多類型數(shù)據(jù)融應(yīng)在數(shù)據(jù)模型設(shè)計(jì)、數(shù)據(jù)資產(chǎn)管理、主數(shù)據(jù)管理、數(shù)據(jù)倉庫等解決方案和過程中執(zhí)行數(shù)據(jù)質(zhì)量管理，以確保數(shù)據(jù)在整個(gè)數(shù)據(jù)生命周期中保持高質(zhì)量。通過5應(yīng)制定并采取各種策略、技術(shù)和活動(dòng)，包括但不限于從組織建設(shè)、業(yè)務(wù)流程、規(guī)章制度、技術(shù)工具等方面確保數(shù)據(jù)的可用性、完整性和保密性，以及能夠控制數(shù)據(jù)安全風(fēng)險(xiǎn)或?qū)L(fēng)險(xiǎn)帶來的7.1數(shù)據(jù)來源e)數(shù)據(jù)平臺的元數(shù)據(jù)應(yīng)包含但不限于數(shù)據(jù)倉庫、數(shù)g)應(yīng)支持半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)元數(shù)據(jù)提7.2數(shù)據(jù)采集c)支持對半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)采用圖像識別、自然語言處理等人工智能技術(shù)識別和采集元7.3元模型管理a)基于元數(shù)據(jù)管理工具構(gòu)建符合CWM規(guī)范的元b)提供對元數(shù)據(jù)增、改、刪、查、發(fā)布等管理功能；c)支持元數(shù)據(jù)版本管理，支持按版本的查詢、對比和回溯操作；7.4元數(shù)據(jù)分析f)支持對于包含敏感信息的資源地圖的權(quán)限控制能力；6h)支持針對大規(guī)模資源地圖對于加載速度和渲染性能的要求。b)支持通過日志記錄、元數(shù)據(jù)提取、數(shù)據(jù)倉庫或數(shù)據(jù)湖等方式對數(shù)據(jù)進(jìn)行采集和追蹤；c)支持建立元數(shù)據(jù)管理系統(tǒng)，使用ApacheAtlas、Collibra、f)支持利用自動(dòng)化腳本根據(jù)預(yù)定義的規(guī)則和算法，自動(dòng)追蹤和分析數(shù)據(jù)的來源和去向；b)支持使用數(shù)據(jù)監(jiān)控工具或具備同等能力的數(shù)據(jù)平臺能力對數(shù)據(jù)變更進(jìn)行實(shí)時(shí)監(jiān)控，收集變更c(diǎn))支持使用數(shù)據(jù)質(zhì)量工具或具備同等能力的數(shù)據(jù)平臺能力對數(shù)據(jù)進(jìn)e)支持使用圖形化工具或自主研發(fā)可自定義的可視化界面，將影響分析結(jié)果以圖表或報(bào)表的形7.5元數(shù)據(jù)應(yīng)用7b)應(yīng)使用有權(quán)限控制的應(yīng)用系統(tǒng)數(shù)據(jù)庫連接；利用元數(shù)據(jù)記錄和管理數(shù)據(jù)在數(shù)據(jù)倉庫內(nèi)的流轉(zhuǎn)過程，對數(shù)據(jù)倉庫的設(shè)計(jì)和建模過程進(jìn)行輔助和值編碼、固定值編碼、日期碼、流水碼、組d)應(yīng)提供主數(shù)據(jù)管理視圖配置功能，支持為不同分類主數(shù)據(jù)分配不同的屬性。8.2變更管理b)業(yè)務(wù)流程無法使用凍結(jié)的主數(shù)據(jù)記錄，記錄維護(hù)主數(shù)據(jù)狀態(tài)的歷史信息；8.3主數(shù)據(jù)分析8a)記錄主數(shù)據(jù)的最初來源以及數(shù)據(jù)的變換和處理步驟；8.4主數(shù)據(jù)集成a)支持包含國產(chǎn)數(shù)據(jù)庫在內(nèi)的多數(shù)據(jù)源抽取數(shù)據(jù)，并能將數(shù)據(jù)加載到目標(biāo)系統(tǒng)或數(shù)據(jù)倉庫的能d)具備檢測和修復(fù)數(shù)據(jù)質(zhì)量問題的能力；f)具備實(shí)時(shí)的數(shù)據(jù)抽取和傳輸能力；9數(shù)據(jù)建模9.1.1數(shù)據(jù)結(jié)構(gòu)化和標(biāo)準(zhǔn)化9.1.2數(shù)據(jù)完整性和準(zhǔn)確性9.1.3數(shù)據(jù)可擴(kuò)展性），9.1.4數(shù)據(jù)一致性和關(guān)聯(lián)性外鍵和關(guān)聯(lián)規(guī)則，確保數(shù)據(jù)的關(guān)聯(lián)性和關(guān)系完整性，避免數(shù)據(jù)9.1.5數(shù)據(jù)性能和查詢效率9.1.6數(shù)據(jù)安全和權(quán)限控制9.1.7數(shù)據(jù)可視化和報(bào)表支持99.1.8支持系統(tǒng)級數(shù)據(jù)模型開發(fā)9.1.9支持?jǐn)?shù)據(jù)模型的反向采集應(yīng)支持將Oracle、Mysql等關(guān)系型數(shù)據(jù)庫和主流國產(chǎn)關(guān)系型數(shù)據(jù)庫中的數(shù)據(jù)結(jié)構(gòu)采集到數(shù)據(jù)模型管9.2數(shù)據(jù)模型查詢a)支持通過但不限于模型分類、標(biāo)簽分級等能力進(jìn)行9.3數(shù)據(jù)模型管理a)支持?jǐn)?shù)據(jù)模型的增刪改等一系列基礎(chǔ)維護(hù)功能；c)支持模型分版本管理，支持版本回9.4模型對比分析9.5模型開發(fā)10.1標(biāo)準(zhǔn)內(nèi)容應(yīng)詳細(xì)、準(zhǔn)確定義企業(yè)級公共業(yè)務(wù)詞匯表，提供業(yè)務(wù)術(shù)語上下文的關(guān)聯(lián)應(yīng)詳細(xì)、準(zhǔn)確定義數(shù)據(jù)字典，包括數(shù)據(jù)元分類、數(shù)據(jù)元名稱、數(shù)據(jù)元編碼、數(shù)據(jù)元值域范11.1存儲(chǔ)的性能和可靠性a)具有快速的響應(yīng)時(shí)間，確保用戶能夠快速訪問和操作數(shù)據(jù)；e)具備緩存和性能優(yōu)化能力，減少數(shù)據(jù)訪問時(shí)間，提高系統(tǒng)性能；i)具備快速的故障恢復(fù)機(jī)制，以最小化系統(tǒng)停機(jī)時(shí)間，k)確保存儲(chǔ)系統(tǒng)的高可用性，可通過使用冗余和負(fù)e)對在網(wǎng)絡(luò)上傳輸?shù)臄?shù)據(jù)進(jìn)行加密，以防數(shù)據(jù)被竊取或篡改；12.1數(shù)據(jù)交換e)應(yīng)考慮性能優(yōu)化，以確保在大量數(shù)據(jù)交換場景下保障數(shù)據(jù)傳輸?shù)男屎退俣?；g)應(yīng)遵從數(shù)據(jù)分級管理要求，在發(fā)布服務(wù)時(shí)對相關(guān)數(shù)據(jù)資產(chǎn)共享風(fēng)險(xiǎn)進(jìn)行評估；f)確保數(shù)據(jù)在不同數(shù)據(jù)源之間的一致性，包括標(biāo)準(zhǔn)化單位、貨幣、單位代碼等。13.1質(zhì)量管理工具c)指標(biāo)應(yīng)一致，以確保不同數(shù)據(jù)質(zhì)量評估之間的可比性，包括標(biāo)準(zhǔn)化度量單位和e)指標(biāo)應(yīng)適用于各種數(shù)據(jù)類型，包括結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)、實(shí)時(shí)數(shù)據(jù)、j)應(yīng)說明數(shù)據(jù)質(zhì)量評估的數(shù)據(jù)源和評估方法，o)指標(biāo)應(yīng)與改進(jìn)措施相關(guān)聯(lián)，以指導(dǎo)數(shù)據(jù)質(zhì)量改進(jìn)14.1身份認(rèn)證和確認(rèn)，包括帳戶管理、單一登錄（SSO）、雙基于用戶組的訪問控制、基于角色的訪問控制、基于IP的訪問應(yīng)以最小授權(quán)為原則，為用戶配置數(shù)據(jù)資源訪問權(quán)限，粒度