DB14-T2526-2022工業(yè)互聯(lián)網(wǎng)綜合平臺數(shù)據(jù)質(zhì)量管理要求

DB14/T2526—2022

工業(yè)互聯(lián)網(wǎng)綜合平臺數(shù)據(jù)質(zhì)量管理要求

1范圍

本文件規(guī)定了工業(yè)互聯(lián)網(wǎng)綜合平臺數(shù)據(jù)的分類、質(zhì)量特性以及質(zhì)量管理的框架、流程和工具。

本文件適用于工業(yè)互聯(lián)網(wǎng)綜合平臺數(shù)據(jù)質(zhì)量的管理、檢測、分析和提升。

2規(guī)范性引用文件

下列文件中的內(nèi)容通過文中的規(guī)范性引用而構(gòu)成本文件必不可少的條款。其中，注日期的引用文件，

僅該日期對應的版本適用于本文件；不注日期的引用文件，其最新版本（包括所有的修改單）適用于本

文件。

GB/T36344—2018信息技術(shù)數(shù)據(jù)質(zhì)量評價指標

GB/T39400—2020工業(yè)數(shù)據(jù)質(zhì)量通用技術(shù)規(guī)范

3術(shù)語和定義

GB/T39400—2020界定的以及下列術(shù)語和定義適用于本文件。

3.1

工業(yè)互聯(lián)網(wǎng)綜合平臺industrialinternetintegratedplatform

以工業(yè)互聯(lián)網(wǎng)平臺為基礎(chǔ)，支持匯聚數(shù)據(jù)、服務、用戶等各類資源，具備數(shù)據(jù)集成分析、應用支撐

能力和基礎(chǔ)應用能力，支持省域內(nèi)特色型、專業(yè)型、企業(yè)級等平臺的集成和接入，支撐制造資源泛在連

接、彈性供給、高效配置和協(xié)同創(chuàng)新的載體。

3.2

數(shù)據(jù)質(zhì)量dataquality

數(shù)據(jù)的一組固有特性滿足要求的程度。

注：固有特性一般指永久性的特性。

[來源：GB/T39400—2020,3.1]

3.3

數(shù)據(jù)質(zhì)量管理dataqualitymanagement

指導和控制某機構(gòu)數(shù)據(jù)質(zhì)量的協(xié)調(diào)活動。

[來源：GB/T39400—2020,3.2]

3.4

數(shù)據(jù)質(zhì)量管理工具dataqualitymanagementtool

運用信息化技術(shù)和管理方法來規(guī)劃、實施與控制數(shù)據(jù)質(zhì)量的識別、評估、提升等一系列活動。

4縮略語

下列縮略語適用于本文件。

App：應用程序（Application）

1

DB14/T2526—2022

SQL：結(jié)構(gòu)化查詢語言（StructuredQueryLanguage）

5數(shù)據(jù)分類

工業(yè)互聯(lián)網(wǎng)綜合平臺數(shù)據(jù)包括但不限于煤炭、制造、物流運輸、電力、燃氣、建筑、水務、現(xiàn)代服

務、化工、冶金等各個行業(yè)領(lǐng)域產(chǎn)品和服務全生命周期產(chǎn)生和應用的數(shù)據(jù)，可分為以下類型：

a)研發(fā)數(shù)據(jù)：包括研發(fā)設(shè)計數(shù)據(jù)、開發(fā)測試數(shù)據(jù)等；

b)生產(chǎn)數(shù)據(jù)：包括控制信息、工況狀態(tài)、工藝參數(shù)、系統(tǒng)日志、生產(chǎn)質(zhì)量數(shù)據(jù)、生產(chǎn)實績數(shù)據(jù)

等；

c)供應鏈數(shù)據(jù)：包括供需計劃數(shù)據(jù)、倉儲物流數(shù)據(jù)等；

d)營銷數(shù)據(jù)：包括投標次數(shù)、訂單數(shù)量、交易金額、客戶異議數(shù)據(jù)等；

e)運維數(shù)據(jù)：包括產(chǎn)品運行狀況數(shù)據(jù)、產(chǎn)品售后服務數(shù)據(jù)等；

f)管理數(shù)據(jù)：包括客戶基本信息、業(yè)務合作數(shù)據(jù)、人事財務數(shù)據(jù)、系統(tǒng)設(shè)備資產(chǎn)信息、產(chǎn)品基

本信息、項目進度數(shù)據(jù)、業(yè)務統(tǒng)計數(shù)據(jù)（如資源量數(shù)據(jù)、能耗監(jiān)測數(shù)據(jù)）等；

g)金融服務數(shù)據(jù)：包括信貸服務數(shù)據(jù)、融資租賃服務數(shù)據(jù)、征信服務數(shù)據(jù)等；

h)平臺運營數(shù)據(jù)：接入的設(shè)備數(shù)據(jù)、工業(yè)模型庫數(shù)據(jù)、工業(yè)App數(shù)據(jù)、平臺運行數(shù)據(jù)等；

i)外部數(shù)據(jù)：與其他主體共享的數(shù)據(jù)。

6數(shù)據(jù)質(zhì)量特性

根據(jù)GB/T36344—2018中第3章和第5章，工業(yè)互聯(lián)網(wǎng)綜合平臺數(shù)據(jù)質(zhì)量特性包括：

a)規(guī)范性：數(shù)據(jù)符合數(shù)據(jù)標準、數(shù)據(jù)模型、業(yè)務規(guī)則、元數(shù)據(jù)或權(quán)威參考數(shù)據(jù)的程度；

1)數(shù)據(jù)標準是數(shù)據(jù)的命名、定義、結(jié)構(gòu)和取值規(guī)范方面的規(guī)則和基準；

2)數(shù)據(jù)模型是對分析的圖像和文本表述，該分析識別了組織為完成其使命、功能、目標、

目的和戰(zhàn)略，以及管理和評價組織所需要的數(shù)據(jù)；

3)業(yè)務規(guī)則是一種權(quán)威性原則或指導方針，用來描述業(yè)務交互，并建立行動和數(shù)據(jù)行為結(jié)

果及完整性的規(guī)則；

4)元數(shù)據(jù)是關(guān)于數(shù)據(jù)或數(shù)據(jù)元素的數(shù)據(jù)(可能包括其數(shù)據(jù)描述),以及關(guān)于數(shù)據(jù)擁有權(quán)、存取

路徑、訪問權(quán)和數(shù)據(jù)易變性的數(shù)據(jù)。

5)權(quán)威參考數(shù)據(jù)是系統(tǒng)、應用軟件、數(shù)據(jù)庫、流程、報告或平臺日志記錄用來參考的特定

字段的有效數(shù)據(jù)集合。

b)完整性：按照數(shù)據(jù)規(guī)則要求，數(shù)據(jù)元素被賦予數(shù)值的程度。即數(shù)據(jù)信息是否存在缺失的狀況，

包括數(shù)據(jù)元素完整性和數(shù)據(jù)記錄完整性；

c)準確性：數(shù)據(jù)準確表示其所描述的真實實體（實體對象）真實值的程度，即數(shù)據(jù)記錄的信息

是否存在異常或錯誤，包括數(shù)據(jù)內(nèi)容正確性、數(shù)據(jù)格式合規(guī)性、數(shù)據(jù)重復率、數(shù)據(jù)唯一性、

臟數(shù)據(jù)出現(xiàn)率；

d)一致性：數(shù)據(jù)與其他特定上下文中使用的數(shù)據(jù)無矛盾的程度，即數(shù)據(jù)是否遵循了統(tǒng)一的規(guī)范，

數(shù)據(jù)集合是否保持了統(tǒng)一的格式，主要體現(xiàn)在數(shù)據(jù)記錄的規(guī)范和數(shù)據(jù)是否符合邏輯，包括相

同數(shù)據(jù)一致性和關(guān)聯(lián)數(shù)據(jù)一致性；

e)時效性：數(shù)據(jù)在時間變化中的正確程度，包括基于時間段的正確性、基于時間點及時性、時

序性；

f)關(guān)聯(lián)性：度量相關(guān)聯(lián)的數(shù)據(jù)是否缺失或建立索引；

g)可訪問性：數(shù)據(jù)能被訪問的程度，包括可訪問和可用性。

2

DB14/T2526—2022

7數(shù)據(jù)質(zhì)量管理

7.1數(shù)據(jù)質(zhì)量管理框架

數(shù)據(jù)質(zhì)量管理框架主要由數(shù)據(jù)質(zhì)量管理流程和數(shù)據(jù)質(zhì)量管理工具構(gòu)成，以數(shù)據(jù)質(zhì)量管理流程為指導，

構(gòu)建數(shù)據(jù)質(zhì)量管理工具,見圖1。數(shù)據(jù)質(zhì)量管理流程主要從數(shù)據(jù)質(zhì)量描述、數(shù)據(jù)質(zhì)量識別、數(shù)據(jù)質(zhì)量評估

和數(shù)據(jù)質(zhì)量控制四方面進行搭建；數(shù)據(jù)質(zhì)量管理工具主要從數(shù)據(jù)標準管理、數(shù)據(jù)質(zhì)量規(guī)則、質(zhì)量檢測任

務、數(shù)據(jù)質(zhì)量監(jiān)控、數(shù)據(jù)質(zhì)量報警、質(zhì)量檢測報告、檢測報告分析、數(shù)據(jù)質(zhì)量整改、數(shù)據(jù)質(zhì)量跟蹤方面

進行規(guī)定。

圖1數(shù)據(jù)質(zhì)量管理框架

7.2數(shù)據(jù)質(zhì)量管理流程

7.2.1數(shù)據(jù)質(zhì)量管理模型

應符合GB/T39400—2020中4.2的要求。

7.2.2數(shù)據(jù)質(zhì)量描述

數(shù)據(jù)質(zhì)量描述要求包括但不限于：

a)應根據(jù)平臺企業(yè)管理的需求，參考外部監(jiān)管的要求，確定平臺企業(yè)數(shù)據(jù)質(zhì)量管理目標；

b)應根據(jù)平臺企業(yè)數(shù)據(jù)質(zhì)量管理目標、數(shù)據(jù)標準規(guī)范和數(shù)據(jù)質(zhì)量特性，確定平臺企業(yè)數(shù)據(jù)質(zhì)量

評估維度。

7.2.3數(shù)據(jù)質(zhì)量識別

數(shù)據(jù)質(zhì)量識別要求包括但不限于：

a)應根據(jù)平臺企業(yè)業(yè)務發(fā)展的需求及常見數(shù)據(jù)問題，確定平臺數(shù)據(jù)質(zhì)量管理范圍、各類數(shù)據(jù)的

優(yōu)先級以及質(zhì)量需求；

3

DB14/T2526—2022

b)應根據(jù)平臺企業(yè)數(shù)據(jù)質(zhì)量管理目標及需求，定義各類數(shù)據(jù)的質(zhì)量評價指標、校驗規(guī)則與方法；

c)應根據(jù)業(yè)務發(fā)展需求及數(shù)據(jù)質(zhì)量檢查分析結(jié)果對數(shù)據(jù)質(zhì)量規(guī)則進行持續(xù)維護與升級。

7.2.4數(shù)據(jù)質(zhì)量評估

7.2.4.1數(shù)據(jù)質(zhì)量檢查

應根據(jù)數(shù)據(jù)質(zhì)量規(guī)則中的有關(guān)技術(shù)指標和業(yè)務指標、校驗規(guī)則與方法，對平臺企業(yè)的數(shù)據(jù)質(zhì)量情況

進行實時監(jiān)控，若發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題應及時向數(shù)據(jù)管理人員進行反饋。

7.2.4.2數(shù)據(jù)質(zhì)量分析

數(shù)據(jù)質(zhì)量分析要求包括但不限于：

a)應對數(shù)據(jù)質(zhì)量檢查過程中發(fā)現(xiàn)的數(shù)據(jù)質(zhì)量問題及相關(guān)信息進行分析，并找出影響數(shù)據(jù)質(zhì)量的

原因；

b)應定義數(shù)據(jù)質(zhì)量問題的優(yōu)先級。

7.2.5數(shù)據(jù)質(zhì)量控制

數(shù)據(jù)質(zhì)量控制要求包括但不限于：

a)應根據(jù)數(shù)據(jù)質(zhì)量分析的結(jié)果制定、實施數(shù)據(jù)質(zhì)量改進方案,包括錯誤數(shù)據(jù)更正、業(yè)務流程優(yōu)化、

應用系統(tǒng)問題修復等；

b)應制定數(shù)據(jù)質(zhì)量問題預防方案。

7.3數(shù)據(jù)質(zhì)量管理工具

7.3.1數(shù)據(jù)標準管理

數(shù)據(jù)標準管理要求包括但不限于：

a)應支持根據(jù)國家標準、行業(yè)標準、山西省地方標準等進行數(shù)據(jù)標準制定，包括數(shù)據(jù)標準的編

制、審核、發(fā)布等；

b)應支持數(shù)據(jù)標準執(zhí)行，包括將標準要求提供給數(shù)據(jù)質(zhì)量管理、根據(jù)已錄入的數(shù)據(jù)標準形成質(zhì)

量檢測規(guī)則等；

c)應支持數(shù)據(jù)標準維護，包括標準內(nèi)容變更和版本管理等；

d)應對數(shù)據(jù)標準的執(zhí)行情況、實施效果進行監(jiān)控，及時發(fā)現(xiàn)問題；

e)應根據(jù)執(zhí)行情況、實施效果和存在的問題，修訂或重新制定已不適用的數(shù)據(jù)標準。

7.3.2數(shù)據(jù)質(zhì)量管理規(guī)則

數(shù)據(jù)質(zhì)量管理規(guī)則要求包括但不限于：

a)應支持根據(jù)數(shù)據(jù)質(zhì)量特性自定義質(zhì)量維度；

b)應支持關(guān)聯(lián)數(shù)據(jù)標準規(guī)范，進行基礎(chǔ)規(guī)則定義。包括但不限于空值校驗、值域校驗、格式校

驗、長度校驗、精度校驗、唯一性約束校驗、主外鍵校驗等；

c)應支持根據(jù)基礎(chǔ)規(guī)則和平臺應用場景自定義業(yè)務規(guī)則；

d)應通過自定義SQL語句等方式完成對數(shù)據(jù)質(zhì)量的檢核。

7.3.3數(shù)據(jù)質(zhì)量檢測任務

數(shù)據(jù)質(zhì)量檢測任務要求包括但不限于：

a)應支持質(zhì)量檢測任務的創(chuàng)建；

4

DB14/T2526—2022

b)應支持檢測任務調(diào)度規(guī)則的設(shè)定；

c)應支持手動執(zhí)行與自動執(zhí)行檢測任務，支持手動、定時、輪詢、每周、自定義等多種調(diào)度規(guī)

則；

d)應支持質(zhì)量檢測任務運維，查看任務執(zhí)行日志、任務調(diào)度次數(shù)等；

e)應支持問題數(shù)據(jù)的查詢與導出；

f)應支持未達標數(shù)據(jù)的查詢與導出。

注1：問題數(shù)據(jù)是指平臺設(shè)置數(shù)據(jù)庫表中合格率范圍之外的數(shù)據(jù)。

注2：未達標數(shù)據(jù)是未達到平臺設(shè)置的數(shù)據(jù)質(zhì)量特性合格率的表中所有數(shù)據(jù)。

7.3.4數(shù)據(jù)質(zhì)量監(jiān)控

數(shù)據(jù)質(zhì)量監(jiān)控要求包括但不限于：

a)應支持對數(shù)據(jù)進行監(jiān)控，明確數(shù)據(jù)的來源和去向；

b)應支持對規(guī)則校驗的結(jié)果進行監(jiān)控和分析，校驗結(jié)果應定位到原始數(shù)據(jù)項。

7.3.5數(shù)據(jù)質(zhì)量報警

應支持問題數(shù)據(jù)的報警。

7.3.6數(shù)據(jù)質(zhì)量檢測報告

數(shù)據(jù)質(zhì)量檢測報告要求包括但不限于：

a)應支持對校驗結(jié)果進行記錄并生成檢測報告，檢測報告的內(nèi)容包括但不限于：

1)歷史檢測記錄的數(shù)據(jù)波動，以及本次質(zhì)量檢測執(zhí)行時間、檢測結(jié)果等基本信息；

2)對應數(shù)據(jù)的動態(tài)質(zhì)量變化情況；

3)每項業(yè)務規(guī)則檢測數(shù)據(jù)量、問題數(shù)據(jù)量、合格率等詳細信息；

b)應支持在線查看每項業(yè)務規(guī)則問題數(shù)據(jù)的詳情；

c)應支持打包下載對應的問題數(shù)據(jù)；

d)應支持數(shù)據(jù)質(zhì)量檢測報告的查看和下載。

7.3.7數(shù)據(jù)質(zhì)量檢測報告分析

數(shù)據(jù)質(zhì)量檢測報告分析要求包括但不限于：

a)應具備對檢測報告進行綜合性分析的功能，包括但不限于以下內(nèi)容：

1)應支持通過多維度的分析報告來展示質(zhì)量檢測總體結(jié)果，包含檢測數(shù)據(jù)來源、檢測時間、

綜合得分、檢測數(shù)據(jù)量、合格數(shù)據(jù)量、規(guī)則數(shù)目、檢測資源數(shù)目等基本信息，和各個質(zhì)

量維度下每項的得分，以及此次檢測數(shù)據(jù)的短板問題所屬維度；

2)應支持展示每項業(yè)務規(guī)則的詳細檢測內(nèi)容，如每項的檢測數(shù)據(jù)總數(shù)、問題數(shù)據(jù)數(shù)目，合

格率、問題數(shù)據(jù)分布情況等；

3)應支持通過評分報告詳情展示每項規(guī)則對應的得分情況及對應的比分權(quán)重，體現(xiàn)不同規(guī)

則的重要程度，并對高權(quán)重質(zhì)量規(guī)則進行著重分析處理；

4)應支持每個業(yè)務規(guī)則橫向?qū)Ρ?，提供宏觀的檢測報告分析，展示數(shù)據(jù)質(zhì)量問題的分布。

b)應具備對檢測報告進行統(tǒng)計分析的功能，包括但不限于以下內(nèi)容：

1)應支持通過圖表的形式展示數(shù)據(jù)質(zhì)量概覽信息；

2)應支持按照數(shù)據(jù)源目錄層級,即分層分域原則,按照指定的業(yè)務層級如區(qū)域、部門、指定

表等多種維度進行統(tǒng)計分析，并生成對應的質(zhì)量趨勢圖。

5

DB14/T2526—2022

7.3.8數(shù)據(jù)質(zhì)量整改

數(shù)據(jù)質(zhì)量整改要求包括但不限于：

a)應支持根據(jù)質(zhì)量分析結(jié)果生成對問題數(shù)據(jù)的質(zhì)量提升建議；

b)應支持數(shù)據(jù)標準化、數(shù)據(jù)清洗、數(shù)據(jù)轉(zhuǎn)換和數(shù)據(jù)整合等功能，對不符合質(zhì)量要求的數(shù)據(jù)進行

處理,并糾正數(shù)據(jù)質(zhì)量問題。

7.3.9數(shù)據(jù)質(zhì)量跟蹤

數(shù)據(jù)質(zhì)量跟蹤要求包括但不限于：

a)應支持數(shù)據(jù)質(zhì)量跟蹤，記錄數(shù)據(jù)質(zhì)量事件的評估、初步診斷和后續(xù)行動等信息，驗證數(shù)據(jù)質(zhì)

量提升的有效性；

b)應支持對系統(tǒng)問題進行修正、對數(shù)據(jù)標準進行完善。

6

DB14/T2526—2022

參考文獻

[1]GB/T36073—2018數(shù)據(jù)管理能力成熟度評估模型

[2]工業(yè)互聯(lián)網(wǎng)創(chuàng)新發(fā)展行動計劃（2021-2023年）

[3]山西省工業(yè)互聯(lián)網(wǎng)創(chuàng)新發(fā)展行動計劃（2021-2023年）

[4]工業(yè)互聯(lián)網(wǎng)標準體系（版本3.0）

[5]工業(yè)互聯(lián)網(wǎng)綜合標準化體系建設(shè)指南（2021版）

7

ICS35.240.50

CCSL70

14

山西省地方標準

DB14/T2526—2022

工業(yè)互聯(lián)網(wǎng)綜合平臺數(shù)據(jù)質(zhì)量管理要求

2022-08-18發(fā)布2022-11-18實施

山西省市場監(jiān)督管理局??發(fā)布

DB14/T2526—2022

工業(yè)互聯(lián)網(wǎng)綜合平臺數(shù)據(jù)質(zhì)量管理要求

1范圍

本文件規(guī)定了工業(yè)互聯(lián)網(wǎng)綜合平臺數(shù)據(jù)的分類、質(zhì)量特性以及質(zhì)量管理的框架、流程和工具。

本文件適用于工業(yè)互聯(lián)網(wǎng)綜合平臺數(shù)據(jù)質(zhì)量的管理、檢測、分析和提升。

2規(guī)范性引用文件

下列文件中的內(nèi)容通過文中的規(guī)范性引用而構(gòu)成本文件必不可少的條款。其中，注日期的引用文件，

僅該日期對應的