運輸數據資源建設要求

運輸數據資源建設要求

數據采集要求對運輸業(yè)務管理和遙感地圖相關的數據進行補充采集和整理，主要包括數據采集錄入類、數據遷移清洗類和數據購買。數據采集錄入類包括規(guī)劃項目數據、歷史規(guī)劃岸線數據、已建路段數據、路況基礎信息、服務區(qū)基礎信息、橋梁基礎信息、隧道基礎信息、收費站基礎信息、公路資產數據、路線數據、歷史規(guī)劃數據、歷史公路建設項目數據、水運工程建設項目數據、樞紐建設項目數據、信息化建設項目數據。數據遷移清洗類包括科技標準歷史數據、公路養(yǎng)護管理平臺數據、普通干線公路項目信息平臺數據、公路水運工程建設安全生產監(jiān)督管理系統數據、公路水路建設與運輸市場信用信息服務系統數據、干線公路情況調查系統數據、郵政數據。數據購買基礎地理信息數據基礎地理信息數據包括范圍內行政區(qū)劃、水系、城鎮(zhèn)、注記、地名、山名、鐵路、綠地、行政區(qū)界、行政點、行政單位、文教衛(wèi)生、醫(yī)療單位等空間和屬性數據；基礎地理信息數據比例尺1:10000，基礎地理信息數據將作為地理信息基礎平臺的基礎地圖?；A地理信息數據采集方式通過本次工程購買的具有測繪資質的廠家購買基礎地圖數據、導航數據、影像數據等數據，人工將數據導入基礎地理數據庫，并進行分類、標準化、接邊、疊加、屬性資料編輯等處理，完成基礎地理信息空間數據處理制作?；A地理信息數據采購時需提供糾偏算法，用于車輛衛(wèi)星定位數據的糾偏。高程數據高程數據采集方式為購買，DEM分辨率不低于90米，通過與本次工程購買的基礎地圖數據、影像數據等完成基礎地理信息空間數據處理制作與融合，導入基礎地理數據庫。衛(wèi)星影像數據衛(wèi)星影像數據主要用于高速公路建設進度形象管理，普通公路、農村公路規(guī)劃核查、港口岸線建設動態(tài)監(jiān)管等。高分辨率衛(wèi)星影像數據為各類應用提供基礎地理底圖服務支持，同時通過與基礎參照空間信息的疊加，使各類地物能夠在地圖上能夠直觀顯示。通過與現有基礎地圖數據等相關數據進行分類、標準化、接邊、疊加、屬性資料編輯等處理，完成基礎地理信息空間數據處理制作與融合，并通過人工將該數據導入基礎地理數據庫。數據底座建設要求購置數據治理系統、數據庫管理系統、數據可視化展示工具，以上數據支撐軟件共同搭建運輸綜合業(yè)務信息管理系統數據底座，提供數據治理、數據庫管理、數據交換共享、數據可視化展示等服務。數據治理系統數據治理包括數據門戶管理、元數據管理、主數據管理、數據指標管理、數據質量管理、數據安全管理。數據門戶管理數據門戶管理實現數據分布與地圖管理，建立可信源及擁有者管理、數據目錄樹、數據實體、數據項、數據標簽為基礎的數據資產目錄，打破信息孤島和部門邊界，實現組織范圍內的數據關聯與分析管理，實現數據的便捷查詢、瀏覽，實現數據分級分類，為數據戰(zhàn)略、數據管理策略的落地打下基礎。數據資產管理包括可信源及擁有者管理（單位/業(yè)務域/信息系統/數據庫等）、數據目錄樹構建、數據實體管理（標識、名稱、時效性、描述、組成、子實體定義等）、標簽管理（打標、分類等）、敏感數據管理（安全標識、訪問權限）。數據關聯與分析管理包括實體關聯管理（表、字段映射等）、全文檢索（實體、標簽、分類等）、數據實體展示（實體、邏輯關系、數據集）、數據圖譜展示（實體、關聯、來源等）。元數據管理元數據管理是對數據采集、存儲、加工和展現等數據全生命周期的描述信息，幫助用戶理解數據關系和相關屬性。元數據采集支持從傳統關系型數據庫和大數據平臺中采集到數據產生、加工處理、應用等全量元數據，包括過程中的數據實體（系統、庫、表、字段的描述）以及數據實體加工處理過程中的邏輯。元數據管理實現元數據的模型定義并存儲，在功能層包裝成各類元數據功能，最終對外提供應用及展現；提供元數據分類和建模、血緣關系和影響分析，方便數據的跟蹤和回溯。元數據展示能夠根據類別、類型等信息展示各個數據實體的信息及其分布情況，展示數據實體間的組合、依賴關系，以及數據實體加工處理上下游的邏輯關系。元數據應用包括數據地圖、數據的血緣、影響分析、全鏈分析等。元數據搜索可根據數據源庫、類型等搜索元數據信息。主數據管理具備主數據存儲、整合、清洗、監(jiān)管以及分發(fā)等五大功能，并保證這些主數據在各個信息系統間的準確性、一致性、完整性。主數據存儲、整合實現主數據整合、清洗、校驗、合并等功能，根據主數據標準和業(yè)務規(guī)則和主數據質量標準對收集到的主數據進行加工和處理，用于提取分散在各個支撐系統中的主數據集中到主數據存儲庫，合并和維護唯一、完整、準確的主數據信息。主數據管理支持對主數據的操作維護，包括主數據申請與校驗、審批、變更、凍結/解凍、發(fā)布、歸檔等全生命周期管理。主數據分發(fā)與共享實現主數據對外查詢和分發(fā)服務，前者用于在其它系統發(fā)出針對主數據實時響應類查詢請求時，返回所需數據；后者則用于提供批量數據分發(fā)服務，通過現有企業(yè)服務總線（ESB）實現。主數據分析實現對主數據的變更情況監(jiān)控，為主數據系統管理員提供對主數據進行分析、優(yōu)化、統計、比較等功能。數據指標管理數據指標定義包含指標主題分類、各業(yè)務域具體指標定義、指標屬性及模型管理，實現對指標的批量管理以及主題（即指標樹）維護。指標維度管理主要是生產層面設置的時間維度、空間維度、物料維度以及層次維度四個維度的信息和所含具體維度進行管理。指標維護包括指標新增、修改、刪除、審批、凍結、解凍、發(fā)布（分發(fā)）、導出等。指標的查詢提供對數據指標主題、屬性、維度、指標以及導入表的按條件查詢、模糊查詢、樹狀查詢數據等。指標值的管理實現對指標數據的集成及存儲管理，定期發(fā)布指標值。數據質量管理數據質量管理主要包括數據質量初步分析、數據質量精度檢查、比對和驗證檢查、檢查結果處理。數據質量初步分析包括全庫初步探測、數據庫表基本信息分析、表基本信息分析的統計信息等分析。數據質量精度檢查提供數據質量檢查服務對數據庫表做指定規(guī)則檢查，提供邏輯表達式檢查，提供相似重復記錄檢查，提供復合檢查，提供可視化定義界面，提供數據質量檢查方法接口、相似度檢查方法接口，方便增加數據質量檢查方法。數據質量檢查服務對數據庫表做指定規(guī)則檢查，包括格式檢查、范圍檢查、缺失記錄檢查、相似重復記錄檢查、精度檢查、邏輯表達式檢查、復合規(guī)則檢查等。在數據質量檢查服務可視化配置出單字段多規(guī)則檢查，也可以配置出多字段同規(guī)則檢查，還可以配置出多字段之間的關聯檢查。相似重復記錄檢查包括完全重復記錄檢查、相似記錄檢查。完全重復記錄檢查可以根據一個字段或者多個字段的比對，得到重復記錄，能可視化配置；相似記錄檢查是指先檢查一個或者多個字段相似度，然后得到記錄相似度，根據記錄相似度的值得到相似記錄，可視化選擇多種字段相似算法和可視化定義記錄相似算法及屬性。比對和驗證檢查提供比對和驗證功能，對于數據目標和數據源做一致性檢查，發(fā)現其差異，主要包括數據庫表的比對、數據文件的比對。對源庫表和目標庫表做一致性比對檢查，包括表結構比對、數據一致性比對，能發(fā)現并展示不一樣的結構、不一致的數據（包括增加、修改、減少的數據）對源和目標文件夾下的文件做比對和驗證檢查，能發(fā)現并展示不一致的文件，包括增加、修改的文件。支持數據源和數據目標位于不同網段的一致性檢查。檢查結果處理數據質量檢查服務完成后，生成檢查結果，數據質量檢查結果存儲到指定數據庫中，每個數據質量檢查服務的存儲表結構根據選擇的檢查字段、定義的檢查規(guī)則自動生成，并提供可視化界面，方便修改信息配置。系統提供問題數據統計針對每個數據質量檢查服務提供數據質量檢查結果報告，包括異常數據、異常數據檢查的規(guī)則描述，并能做問題數據統計、修改情況統計、檢查規(guī)則統計。數據安全管理數據治理管理提供安全共享管控機制，保證數據資源的安全管理及共享，主要包括數據的授權、數據脫敏、數據訪問安全、數據服務的發(fā)布/申請/審核管理、服務的接入控制等。數據授權數據授權給不同的用戶提供數據結構、數據庫數據、文件等的數據的安全授權，包括對數據結構模型的授權、數據庫表和字段的訪問授權、數據文件的訪問授權等?？梢詫σ跈嗟膶ο蠓謩e設置允許訪問、不允許訪問等權限。數據脫敏對來源于文件、數據庫表等數據中的敏感內容設置數據脫敏處理，可以對不同的字段內容設置不同的數據脫敏規(guī)則，包括數據加密、數據的模糊化處理等。數據訪問安全數據共享是通過數據服務的方式對外提供，通過數據服務屏蔽數據源，數據訪問者不知道數據的存儲位置、數據的物理結構等敏感信息。通過工具可視化定義數據服務共享的數據字段、數據內容、轉換策略、數據加密、數據查詢條件等，進而保證了數據的安全，使用者調用數據服務時，只有通過身份鑒定、訪問控制的用戶才能使用授權的數據。數據服務的發(fā)布/申請/審核管理具有描述屬性的數據服務是以目錄的方式對外發(fā)布，使用者可以查詢到相應的數據服務，申請使用，經過審核審批管理后，使用者才能使用數據提供者的數據服務。數據服務的接入控制數據使用者通過數據提供者提供的用戶名、密碼、安全授權等信息訪問數據提供者提供的數據服務，數據提供者將對數據的訪問實施身份鑒定和訪問控制等安全策略。數據可視化展示工具數據可視化展示工具提供豐富的可視化模板，滿足綜合運行監(jiān)測、預警、分析決策等多種業(yè)務的展示需求。主要功能如下：（1）提供業(yè)務監(jiān)測、預警、分析、匯報展示等多種場景模版。（2）支持多種分析組件，支持表、交叉表、自由式表格、透視表、圖表、文本、儀表盤、選擇列表、過濾器、范圍、選項卡、填報等組件。（3）支持多種圖表，支持實時曲線圖、點圖、詞云、氣泡、折線圖、柱狀圖、地圖、3D柱圖、線圖、面積圖、餅圖、雷達圖、帕累托圖、瀑布圖、組織架構圖等。（4）支持多種圖表組件和多種數據類型的分析展示，包括繪制海量數據的地理軌跡、地理飛線、熱力分布、地域區(qū)塊、三維地圖、運輸專業(yè)圖層數據的多層疊加。（5）支持多種導出格式，支持PDF文件、Excel、csv和word文件格式導出，支持頁面屬性編輯。（6）支持數據源管理，支持接入分析型數據庫，關系型數據庫，本地CSV上傳和在線API的接入。（7）支持拼接大屏端的展示分辨率優(yōu)化，能夠適配非常規(guī)拼接分辨率適配優(yōu)化，提供軟件界面拼接系統，保證每個界面以獨立進程穩(wěn)定運行。（8）提供二次開發(fā)環(huán)境，可以導入使用二次開發(fā)的JavaScript組件。數據庫管理系統數據庫管理系統，用于系統數據管理。具體要求如下：（1）數據庫管理語句符合國際標準；支持多媒體數據類型。（2）提供各開發(fā)階段的維護、編碼環(huán)境，便于復雜軟件的開發(fā)、維護。（3）具有性能評估（響應時間、數據單位時間吞吐量）、性能監(jiān)控（內外存使用情況、系統輸入/輸出速率、SQL語句的執(zhí)行，數據庫元組控制）、性能管理（參數設定與調整）等功能，適用于數據倉庫和在線事物處理，適于海量數據處理。（4）支持分布式應用，具有數據透明度與網絡透明度。不論用戶處于網絡什么節(jié)點，數據庫管理系統均可自動搜索網絡，提取所需數據；用戶在應用中無需指出網絡所采用的協議；（5）具有并行處理能力，支持多CPU模式的系統，負載的分配形式，并行處理的顆粒度、范圍。（6）具有可移植性和可擴展性；（7）新平臺支持低版本平臺，數據庫客戶機/服務器機制支持集中式管理模式。（8）具有數據完整性約束。數據完整性指數據的正確性和一致性保護，包括實體完整性、參照完整性、復雜的事務規(guī)則；（9）具有并發(fā)控制功能，具有保證查詢結果一致性方法、死鎖的檢測和解決方法等。（10）具有安全性控制功能，包括安全保密的程度（賬戶管理、用戶權限、網絡安全控制、數據約束），獲得最高認證級別的ISO標準認證。數據處理要求數據資源編目要求數據資源分類數據資源分類在業(yè)務范圍內從管理對象、行為主題和信息類別三個不同維度定位信息分類。數據資源元數據信息資源核心元數據包括必選項、可選項和擴展項三部分。必選項包括信息資源分類、信息資源名稱、信息資源代碼、信息資源提供方（信息資源提供方、提供方內部部門）、信息資源提供方代碼、來源系統、信息資源摘要、信息資源格式（信息資源格式分類、信息資源格式類型）、信息項信息（信息項名稱、數據類型、數據長度）、共享屬性（共享類型、共享條件、共享范圍）、共享方式（共享方式分類、共享方式類型、共享服務方式）、更新周期、發(fā)布日期?？蛇x項主要包括來源數據庫、信息項信息（數據精度）、關聯資源代碼和數據元編號。擴展項指根據目錄編制單位的實際情況和需要添加的元數據項。數據資源目錄編制利用數據資源規(guī)劃理論完成本項目涉及的行業(yè)政務信息資源的梳理和目錄編制，同時建立信息資源數據字典，對運輸管理業(yè)務各個對象進行統一的、唯一的定義，明確數據定義、約束條件、業(yè)