




版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領
文檔簡介
江蘇省第三方數(shù)據(jù)交換平臺設計說明書文件編號文件編號TH-DEP-TD-01文件狀態(tài)[]草稿 []正式公布[]正在修改當前版本1.1擬制黨輝、蔣燁、朱曙鍇、顧小明日期2023-08-03審核黨輝日期2023-08-06批準周志敏日期2023-08-09修訂歷史記錄A-M-D-刪除變更版本號變更版本號日期變更類型〔A*M*D〕修改人摘要V1.0A黨輝、蔣燁20233月假設干爭論會意見形成初步技術方案V1.1A朱曙鍇、顧小明依據(jù)2023724日演示爭論會及后續(xù)爭論會意見對文檔進展內(nèi)容增加V1.13M黨輝修改和校訂名目777788881012121313142.2.215162.3.217181920212122上下級系統(tǒng)數(shù)據(jù)共享2222核心軟件系統(tǒng)設計原則24自動化數(shù)據(jù)交換24可定制數(shù)據(jù)交換24多重方式數(shù)據(jù)的呈現(xiàn)與利用25數(shù)據(jù)全生命周期治理25數(shù)據(jù)字段業(yè)務標準2626數(shù)據(jù)流治理設計27技術架構(gòu)設計282829SpringFramework29SwimFramework30Piston32領域模型和規(guī)律設計3434343742435157637071747577788080818282888890909192979899100101102102103103104104105106106107107108108109110110110引言編寫目的依據(jù)《江蘇地稅第三方數(shù)據(jù)交換平臺系統(tǒng)需求思路》以及屢次需求和技術爭論37文檔,進展下一步的設計和開發(fā)工作。背景依據(jù)省局《關于托付常州地方稅務局開發(fā)“第三方數(shù)據(jù)交換平臺工程”的通適應性強的數(shù)據(jù)交換平臺。該平臺是支撐稅源專業(yè)改革模式的重要數(shù)據(jù)平臺,支撐平臺。術語與縮寫解釋縮寫、術語縮寫、術語ETLETLExtract,transformandload.數(shù)據(jù)處理的三個環(huán)節(jié):抽取、轉(zhuǎn)換與裝載。MVCModel,viewandcontroller.一種系統(tǒng)設計的常用模式:模型、視圖、掌握器。IOCInversionofcontrol.掌握反轉(zhuǎn),面對對象設計的一種模式。AOPAspectOrientedProgramming.計的一種方法。RPCRemoteprocedurecall.序調(diào)用方式,使得遠程程序的調(diào)用跟本地程序調(diào)用在調(diào)用者角度沒有差異。參考資料《江蘇地稅第三方數(shù)據(jù)交換平臺系統(tǒng)需求思路》概要設計平臺設計與定位概述ETL〔ExtractTransformLoad〕平臺,該平臺首先從定義好的第三方數(shù)據(jù)源抽取〔Extract〕數(shù)據(jù),然后經(jīng)過轉(zhuǎn)換〔Transform〕處理進入平臺系統(tǒng),最終通過肯定的技術手段裝載〔Load〕為可以直接應用的數(shù)據(jù),如以下圖所示。ETL過程圖三方數(shù)據(jù)交換平臺是一個專注于數(shù)據(jù)處理的技術平臺,它將供給豐富的數(shù)據(jù)定制各異的數(shù)據(jù)導入、加工與應用規(guī)章。極大的敏捷性,增加了系統(tǒng)的可使用性。下面的三方數(shù)據(jù)交換平臺示意圖比較直觀的顯示了上述內(nèi)容。數(shù)據(jù)流 掌握流數(shù)據(jù)流掌握流三方數(shù)據(jù)交換平臺用戶其它業(yè)務信息系統(tǒng)三方數(shù)據(jù)交換平臺用戶其它業(yè)務信息系統(tǒng)定制數(shù)據(jù)處理規(guī)章實現(xiàn)數(shù)據(jù)到具體業(yè)務的轉(zhuǎn)換其它業(yè)務信息系統(tǒng)三方數(shù)據(jù)交換平臺數(shù)據(jù)導入數(shù)據(jù)輸入輸出數(shù)據(jù)輸入輸出數(shù)據(jù)加工數(shù)據(jù)應用通俗來講,三方數(shù)據(jù)交換平臺可以視作一個數(shù)據(jù)加工廠和數(shù)據(jù)流橋梁。原始〔數(shù)據(jù)導入〕以后,經(jīng)過加工過程〔數(shù)據(jù)加工,成為可以出售的產(chǎn)品〔可以應用的數(shù)據(jù)。除了數(shù)據(jù)工廠作用以外,它還是流淌。與現(xiàn)有信息系統(tǒng)的關系三方數(shù)據(jù)交換平臺建設的初衷不是一個孤立的系統(tǒng),它是為了加工處理數(shù)〔〕以及地稅內(nèi)部現(xiàn)存的信息系統(tǒng),包括大集中系統(tǒng)、風險治理平臺等。綜合治稅這樣的或許念平臺打下了堅實的根底。地稅現(xiàn)有信息系統(tǒng)地稅現(xiàn)有信息系統(tǒng)〔大集中、風險平臺等〕省市等其它部門信息系統(tǒng)〔國稅、工商等〕三方數(shù)據(jù)交換平臺政府公共信息門戶網(wǎng)其它信息系統(tǒng)綜合治稅平臺三方數(shù)據(jù)交換平臺關系示意圖〔現(xiàn)有系統(tǒng)接口做修改在很多狀況下沒有太大的可行性,三方數(shù)據(jù)交換平臺將會供給多種形式的數(shù)據(jù)輸入接口和輸出接口,這在后續(xù)將會具體表達。由于當前需要接入的系統(tǒng)就很多,業(yè)務規(guī)章也千差萬別,將來也可能有更多,通過這些規(guī)章的敏捷定制,實現(xiàn)了數(shù)據(jù)的業(yè)務處理。硬件與網(wǎng)絡核心硬件和網(wǎng)絡核心硬件與網(wǎng)絡是指本系統(tǒng)在稅務系統(tǒng)內(nèi)部的硬件與網(wǎng)絡局部。從宏觀來現(xiàn)互聯(lián)和安全訪問。對于部署在不同地理位置的數(shù)據(jù)交換平臺軟硬件系統(tǒng),稱之為節(jié)點。從上下分布式網(wǎng)絡。外圍硬件與網(wǎng)絡外圍硬件與網(wǎng)絡是指和第三方數(shù)據(jù)源直接有干系的硬件和網(wǎng)絡。由于第三方大的敏捷性。關于外圍硬件與網(wǎng)絡,需要在幾個不同的方面加以說明。方數(shù)據(jù)源主動發(fā)起數(shù)據(jù)通信。能位于第三方數(shù)據(jù)源,這要看通信由誰發(fā)起來打算。網(wǎng)絡互聯(lián)的安全Internet和第三方數(shù)據(jù)源進展交互,系統(tǒng)可以供給間接的方式,例如對外的Web上傳界面,F(xiàn)tp等,實現(xiàn)數(shù)據(jù)的采集,采集的數(shù)據(jù)通過異步方式轉(zhuǎn)移到核心系統(tǒng)內(nèi)。節(jié)點部署說明〔縣基于節(jié)點的網(wǎng)絡部署圖在上級機構(gòu)的系統(tǒng)里進展用戶設置和訪問權(quán)限的設置。2.2.2軟件系統(tǒng)Web及應用效勞器軟些軟件系統(tǒng)依據(jù)需求,依據(jù)硬件和網(wǎng)絡設置進展分布式部署。LinuxLinux相關操作系統(tǒng)版本為主。Oracle系列數(shù)據(jù)庫治理系統(tǒng)來進展構(gòu)建。TomcatJava應用效勞Ftp效勞器。Web操作掌握系統(tǒng)及數(shù)據(jù)呈現(xiàn)應用系統(tǒng)組成。Java企業(yè)編程所供給的根底技術框架結(jié)合換。訪問接口。核心軟件系統(tǒng)構(gòu)造核心軟件系統(tǒng)構(gòu)造圖如上圖所示,以模塊化分層的方式表述了數(shù)據(jù)交換系統(tǒng)的軟件架構(gòu),從大的換數(shù)據(jù)庫、數(shù)據(jù)應用接口和數(shù)據(jù)呈現(xiàn)界面等分層模塊。從2.2所述可以知道,軟發(fā),除此之外,各個節(jié)點的數(shù)據(jù)交換軟件系統(tǒng)在軟件架構(gòu)上是全都的。2.3.2第三方數(shù)據(jù)源差異很大,存在很大的不確定性,所以就要求系統(tǒng)要支持多種類別的數(shù)據(jù)源。FTP方式,手工文本。事先商定好的訪問規(guī)章,去對數(shù)據(jù)源進展自動訪問,實現(xiàn)數(shù)據(jù)的采集。FTPFTP三方數(shù)據(jù)源的相關操作人員或自動運行的程序?qū)⑺杞粨Q的數(shù)據(jù)按事先商定好FTP效勞器的定時訪問,獵取到固定格式的文本數(shù)據(jù)。據(jù),它文本方式存儲。在這一層面,需要確定通信和數(shù)據(jù)采集的一些根本協(xié)議。例如,所要采集數(shù)據(jù)的格式、頻率等。數(shù)據(jù)接口層數(shù)據(jù)接口層和第三方數(shù)據(jù)源示意圖本層主要負責對外接口,供給數(shù)據(jù)庫訪問程序、FTP數(shù)據(jù)訪問程序,F(xiàn)TP效勞器、WEB操作界面等具體功能來實現(xiàn)和第三方數(shù)據(jù)源的連接,實現(xiàn)數(shù)據(jù)的采集。議,實現(xiàn)數(shù)據(jù)的直接讀取。FTP效勞器供給應第三方機構(gòu),使其可以依據(jù)訪問協(xié)議,上傳本系統(tǒng)所需數(shù)據(jù)。FTP數(shù)據(jù)訪問程序連接第三方數(shù)據(jù)源供給的FTP效勞器或者本系統(tǒng)FTP效勞器,依據(jù)訪問協(xié)議,獵取數(shù)據(jù)并將其解析成可以利用的原始數(shù)據(jù)。WEB操作界面供給數(shù)據(jù)導入功能,可以實現(xiàn)格式化數(shù)據(jù)的導入。測等。傳輸掌握層傳輸掌握層示意圖傳輸掌握層是實現(xiàn)自動化數(shù)據(jù)采集的關鍵,它依據(jù)事先定義好的協(xié)議,去自反響和預警。自動數(shù)據(jù)采集承受監(jiān)聽任務腳本的方式去進展處理。首先,用戶通過WEB通信,完成數(shù)據(jù)的自動化采集。成或者采集過程中發(fā)生了特別,傳輸掌握層都會對此過程進展記錄,通過WEB界面把預警信息反響給用戶。數(shù)據(jù)處理層數(shù)據(jù)處理層示意圖數(shù)據(jù)處理層實現(xiàn)了原始采集數(shù)據(jù)的存儲以及數(shù)據(jù)的預處理等環(huán)節(jié)。以及手工匹配。自動匹配建立在關聯(lián)字段信息全都性上,依據(jù)肯定規(guī)章進展匹配,通過程序操作后,該局部數(shù)據(jù)也自動進入比照表。驗,實現(xiàn)肯定的容錯性,以最大可能來反映數(shù)據(jù)的準確性。交換數(shù)據(jù)庫交換數(shù)據(jù)庫是交換系統(tǒng)全部數(shù)據(jù)的存儲地,包括系統(tǒng)初始化數(shù)據(jù)、系統(tǒng)治理的設計。數(shù)據(jù)呈現(xiàn)界面本層主要實現(xiàn)數(shù)據(jù)的呈現(xiàn),包括各種查詢分析功能。主要有固定查詢、自主換數(shù)據(jù)質(zhì)量跟蹤監(jiān)控狀況查詢、可利用數(shù)據(jù)信息查詢等內(nèi)容。數(shù)據(jù)應用接口本層供給編程與非編程數(shù)據(jù)接口,使得交換系統(tǒng)的最終數(shù)據(jù),可以為其它系直接訪問方式、FTP文本數(shù)據(jù)共享、可編程遠程接口、人工導出文本等。上下級系統(tǒng)數(shù)據(jù)共享本系統(tǒng)除了第三方數(shù)據(jù)交換功能以外,在級別上有省、市、縣〔區(qū)〕三個級狀況等。兩種方式。數(shù)據(jù)交換標準必需通過人工干預才能進展。要確定IP地址、端口、數(shù)據(jù)庫、表〔視圖,存儲過程等、字段等參數(shù),在用戶供給。定義文本格式、csv、excel等。這個還可以連續(xù)延長下去,比方自定義格式是怎存儲方式等等。制定的數(shù)據(jù)源或數(shù)據(jù)存儲標準,去建立數(shù)據(jù)源,包括表的命名、字段的命名、字則可以自定義構(gòu)建。據(jù)的自動化匹配,進展有效數(shù)據(jù)的篩選與存儲?,F(xiàn)。核心軟件系統(tǒng)設計原則自動化數(shù)據(jù)交換在數(shù)據(jù)交換平臺的軟件體系內(nèi),處于最核心的部件是數(shù)據(jù)交換掌握組件,該組件自動運行在后臺,依據(jù)既定的標準交換協(xié)議對數(shù)據(jù)交換的各個環(huán)節(jié)進展監(jiān)FTP進展交換,但是自動化處WEB操作界面呈現(xiàn)出來??啥ㄖ茢?shù)據(jù)交換Web等。流程描述腳本供給應數(shù)據(jù)交換掌握組件來自動運行。多重方式數(shù)據(jù)的呈現(xiàn)與利用利用。本系統(tǒng)中,我們將會以兩種方式來進展數(shù)據(jù)的呈現(xiàn)與利用。Web的業(yè)務范疇之內(nèi)的可定制的數(shù)據(jù)查詢與呈現(xiàn)。Web供給基于不同方式的數(shù)據(jù)查詢與呈現(xiàn)接口以供第三方系統(tǒng)或用戶來對數(shù)據(jù)進展FTP安全條件下,依據(jù)具體的需求來確定最終承受哪些方式。數(shù)據(jù)全生命周期治理和操作界面,供具有權(quán)限的操作人員去對數(shù)據(jù)進展掌握和處理。分析查詢使用,供給數(shù)據(jù)交換成果的統(tǒng)計與分析功能。數(shù)據(jù)字段業(yè)務標準滿足《數(shù)據(jù)標準平臺》的標準的,字段要通過《數(shù)據(jù)標準平臺》審核。數(shù)據(jù)存儲設計其次是數(shù)據(jù)庫表的設計。由于本系統(tǒng)跨地域、跨部門、跨業(yè)務,跨上下級關系,所以要實現(xiàn)數(shù)據(jù)的采在省級的數(shù)據(jù)庫效勞器中,市級的交換數(shù)據(jù)存儲在市級的數(shù)據(jù)庫效勞器中,縣〔區(qū)〕級的交換數(shù)據(jù)存儲在縣〔區(qū)〕級的數(shù)據(jù)庫效勞中。另外,由于要經(jīng)過數(shù)據(jù)的ETL,才能得到可以利用的數(shù)據(jù),所以在數(shù)據(jù)庫的關于數(shù)據(jù)表的設計,要包括系統(tǒng)初始化所需的支撐表、權(quán)限掌握表以及處于的安全共享與訪問。由于本系統(tǒng)涉及到海量數(shù)據(jù)的處理,所以要充分發(fā)揮分布式存儲和運算技Oracle數(shù)據(jù)庫治理技術為中心的各項技術手段,來實現(xiàn)數(shù)據(jù)的安全存儲,高效處理。數(shù)據(jù)流治理設計從宏觀方面講,數(shù)據(jù)的流向大體有兩個方向。它系統(tǒng)進展擴展應用。這在前邊根本上已經(jīng)過闡述。方案可以選擇:一種是上級〔下級〕部門的交換數(shù)據(jù)存儲在上級〔下級〕部門的數(shù)據(jù)庫中,給下級〔上級〕部門開發(fā)訪問權(quán)限,依據(jù)訪問規(guī)章,下級〔上級〕部〔下級〔上傳〕到下級〔上級〕部門?!采霞墶砏eb系統(tǒng)通過怎么〔上如何,也不得而知。其次種方式的好處是數(shù)據(jù)本地存儲,這對數(shù)據(jù)的訪問效率以及減輕上級〔下〔上級〕部門,這是需要首要解決的技術問題。擇使用。技術架構(gòu)設計概述HTMLHTMLCSSJquery&JavaScriptAjaxvelocity任務調(diào)度引擎規(guī)章處理引擎JavabeanJava事務腳本SrpingFrameworkSwimFrameworkPistonFrameworkJEE平臺JVM數(shù)據(jù)庫(Oracle)系統(tǒng)架構(gòu)示意圖JEEMVC模式為核心,Web應用程序。在數(shù)據(jù)庫訪問層,使用高效的SwimSql映射框架,實現(xiàn)數(shù)據(jù)的獵取和長久化。在領域規(guī)律層,使用SpringWeb2.0技術,以Jquery框架為核心,構(gòu)建具有良好用戶體驗的GUI。根底組件SpringFramework【框架描述】SpringRMIwebservice遠程調(diào)用、以及使用多種方式來將數(shù)據(jù)長久化SpringSpring框架架構(gòu)圖【框架引用目的】Spring的Core封裝包Spring的CoreIoC和依靠注入特性。配置。Spring的AOP封裝包SpringAOP封裝包供給了符合AOPAlliance標準的面對方面的編程〔aspect-orientedprogramming〕實現(xiàn),讓你可以定義,例如方法攔截器〔method-interceptors〕和切點〔pointcuts,從規(guī)律上講,從而減弱代碼的source-level的元數(shù)據(jù)功能,還可Java數(shù)據(jù)庫操作的事務配置、任務特別監(jiān)控。Spring中的MVC封裝包Spring中的MVC封裝包供給了Web應用的Model-View-Controllerwebform之間。SwimFramework【框架描述】SwimJAVASwimJAVA的數(shù)據(jù)庫快速編程O/RsqlJDBC進展了格外輕量級的操JAVA程序員可以便利地使用SQLJDBCJAVA的客戶端使用,也可以在Servlet/JSP的Web應用中使用。SWIM框架技術架構(gòu)圖SpringSwim的應用架構(gòu)圖【框架引用目的】第三方數(shù)據(jù)源的數(shù)據(jù)庫。Swim框架對于JDBC操作是做過很多優(yōu)化的,兼容主流的數(shù)據(jù)庫類型,具有格外高的數(shù)據(jù)操作效率。對于動態(tài)數(shù)據(jù)源的處理也是Swim框架的強項,用于應對連接不同的第三方數(shù)據(jù)源。SwimO/R映射能滿足系統(tǒng)領域規(guī)律模式的設計。Piston遠程數(shù)據(jù)交換中間件【框架描述】Piston中間件的Java通信、安全的數(shù)據(jù)傳輸和編程的透亮性,Piston遠程數(shù)據(jù)交換中間件是必不行少的高性能中間件。Piston工作原理示意圖該中間件包含了數(shù)據(jù)交換的效勞器端組件和客戶端組件,它在底層實現(xiàn)不同地理位置的信息系統(tǒng)之間的數(shù)據(jù)交互和共享?!究蚣芤镁売伞縋iston承受自定義通信協(xié)議,在二進制流上做了高效的數(shù)據(jù)壓縮。便利的通道。等多種加密手段,確保數(shù)據(jù)交換的安全。Piston承受類似于數(shù)字證書的客戶端驗證機制,保證數(shù)據(jù)交換的客戶端身份不被偽造。Piston支持多客戶端,效勞器端使用java編程語言實現(xiàn),客戶端可以是任何語言實現(xiàn)的組件,只要遵循協(xié)議就可。Pistonwebweb掌握臺的登錄承受了用戶名、密碼、驗證碼和數(shù)字口令碼結(jié)合的方sslweb掌握臺的安全。領域模型和規(guī)律設計概述此局部文檔用于說明該平臺相關領域規(guī)律在技術上的設計,為了便利描述后〔數(shù)據(jù)導入、數(shù)據(jù)加工、數(shù)據(jù)應用〕相關主要領域規(guī)律設計、權(quán)限設計、數(shù)據(jù)上傳和下發(fā)設計等。數(shù)據(jù)交換、數(shù)據(jù)加工都涉及到了一個任務的概念。為了更好地掌握、治理這機后任務狀態(tài)恢復等。不需要使用多種規(guī)章了,所以系統(tǒng)對每一種規(guī)章都必需有對應的獨立的處理過規(guī)章處理引擎平臺中執(zhí)行簡單的匹配任務。任務調(diào)度引擎概述任務調(diào)度引擎工作原理圖每周星期二晚上11:30,或許僅僅每個月的最終一天執(zhí)行。一個自動執(zhí)行而無嘗試重執(zhí)行。1.任務適配器2.任務治理器3.任務驅(qū)動核心4.任務線程池。下面我們就分別爭論他們的作用。任務適配器務治理器做下一步的處理。任務治理器任務腳本、監(jiān)控任務線程池、發(fā)出特別警告。初始化未完成的任務:在效勞器宕機或者效勞器重啟的狀況下,JAVA進程的任務信息,自動化地啟動全部任務。務驅(qū)動核心,由任務驅(qū)動核心去驅(qū)動一個的任務線程。會具體介紹。Web操作界面的通知,Email的通知等等機制。任務驅(qū)動核心務線程。任務線程池在概念上分為內(nèi)存線程池和外存線程池。先關信息,便于平臺程序監(jiān)控;JAVA規(guī)章處理引擎概述數(shù)據(jù)規(guī)章處理引擎是整個數(shù)據(jù)匹配加工的核心架構(gòu)。主要由三個局部組成:規(guī)章解析器、規(guī)章分發(fā)器、規(guī)章處理器。的規(guī)章參數(shù)配置界面。哪個規(guī)章處理器執(zhí)行,動態(tài)加載對應規(guī)章處理器,調(diào)用并執(zhí)行。針對規(guī)章描述的不同,程序自動識別匹配加工條件,完成數(shù)據(jù)匹配加工處理。處理流程圖規(guī)章分發(fā)器規(guī)章處理流程圖設計原則這套機制的主要特點主要表達在:誤。〔具體說明見任務調(diào)度引擎說明局部去調(diào)用規(guī)章處理引擎,無需等待,不耽誤操作員進展平臺其他功能的操作。承受松耦合的設計原則,在以后的工程維護過程中,規(guī)章處理器的實現(xiàn),規(guī)章解析器和規(guī)章處理器都承受策略匹配設計原則,增規(guī)章時,只需針對規(guī)章添加的解析器和處理器,不需要對原有代碼構(gòu)造做任何調(diào)整。規(guī)章解析器規(guī)章解析器示意圖式。規(guī)章解析器由兩個解析局部組成:的規(guī)章數(shù)據(jù)描述。則內(nèi)容。操作員在頁面上設置的規(guī)章有各種各樣的參數(shù)包括表名、字段、字段值等,的數(shù)據(jù)庫條件的,所以我們需要把這些參數(shù)先轉(zhuǎn)換成程序可識別的一種描述語XMLJSON兩種數(shù)據(jù)描述格式。規(guī)章分發(fā)器規(guī)章分發(fā)器示意圖規(guī)章處理器去處理這條規(guī)章或規(guī)章組。規(guī)章組。創(chuàng)立規(guī)章處理器的實例,來處理這條規(guī)章組。規(guī)章處理器sql并完成數(shù)據(jù)處理局部的功能。sqlselect、update、insert語句,然后再依據(jù)這些sql語句去查詢數(shù)據(jù)進展匹配。系統(tǒng)核心功能設計概述流程如以下圖所示:系統(tǒng)核心功能圖系統(tǒng)通過這三個局部,可以到達數(shù)據(jù)進的來,能加工,出的去的過程。下面針對每個環(huán)節(jié)作出更加具體的描述。數(shù)據(jù)導入設計概述【導入方式分類】導入方式分類圖導入方式依據(jù)數(shù)據(jù)來源的不同可以分為三種:數(shù)據(jù)庫直連;FTP自動導入;FTP自動導入屬于自動導入,只需人為設置一次,之后的周期性任務都可由系統(tǒng)自動完成?!緦肓鞒獭咳款愋偷膶肓鞒倘缫韵聢D所示:數(shù)據(jù)導入流程圖〔比方第三方數(shù)據(jù)源操作人員在監(jiān)控中心會得到相3.3.2節(jié)中已經(jīng)給出具體的解釋?;蛘邔⒍鄰埍碓趯氕h(huán)節(jié)處理成一張表。數(shù)據(jù)交換項,完成導入工作。數(shù)據(jù)庫直接導入oracle,sybase,sqlserver,mysql端口,sid,user,password置,設置完成后供給連接測試功能,保證數(shù)據(jù)庫能順當連通。視圖方式、存儲過程方式。數(shù)據(jù)庫直連導入類型分類圖IP,端口號,數(shù)據(jù)庫類型,表名〔視圖名,存儲過程名〕導入頻率〔天、周、月等〕〔默認顯示源的字段名稱和類型,假設有數(shù)據(jù)交換人員可以修改〕數(shù)據(jù)庫直連導入工作原理圖FTP導入FTP1.FTP效勞器為外部效勞器;2.FTPFTP效勞器。在系統(tǒng)內(nèi)部實現(xiàn)上是一樣的,都是通FTP效勞器,下載相關數(shù)據(jù)。這邊主要要說的是支持的文件類型,系統(tǒng)預設是如下三種,后續(xù)可以擴展,EXCEL、CSV、TXT。FTP方式支持的文件類型圖IP,端口號,名目導入頻率〔天、周、月、年等〕文本格式〔表頭、數(shù)據(jù)字段名稱和類型、分隔符等〕FTP導入工作原理圖界面人工上傳創(chuàng)立界面人工上傳方式的數(shù)據(jù)交換項后,操作人員可以通過系統(tǒng)供給的webFTP方式的全都,系統(tǒng)預設是如下三種,后續(xù)可以擴展,EXCEL、CSV、TXT。界面人工上傳方式支持的文件類型圖操作人員需要錄入如下信息作為數(shù)據(jù)交換項的屬性:文本格式〔表頭、數(shù)據(jù)字段名稱和類型、分隔符等〕以下為界面分工上傳方式的工作原理圖:界面人工上傳導入工作原理圖數(shù)據(jù)加工設計自動匹配設計概述數(shù)據(jù)加工流程示意圖一個完整的自動匹配流程由兩局部組合完成:前臺配置、后臺數(shù)據(jù)處理。置→最終表構(gòu)造定義→匹配加工規(guī)章定義→任務時間→保存。輸入匹配數(shù)據(jù)源表名加載匹配數(shù)據(jù)源和原始數(shù)據(jù)表構(gòu)造信息表構(gòu)造信息臨時保存以便設置規(guī)章時調(diào)用比照表是指經(jīng)過加工以后,數(shù)據(jù)的最終存儲表。勾選匹配數(shù)據(jù)表和原始數(shù)據(jù)表需要導入進最終數(shù)據(jù)表的有效字段。對勾選的字段進展統(tǒng)一標準化重定義。配置界面由規(guī)章類型規(guī)定。字段關系、截取下標設置匹配執(zhí)行時間和周期后臺數(shù)據(jù)處理:由任務引擎自動完成,檢測并觸發(fā)任務執(zhí)行,創(chuàng)立規(guī)章處理并記錄相關日志信息。設計原則數(shù)據(jù)加工設計原則示意圖敏捷性:匹配設計要能夠處理各種各樣的數(shù)據(jù)進展比對。通用性:最終表構(gòu)造定義、規(guī)章定義、任務時間設置,變成操作員可配置。安全牢靠性:作員。系統(tǒng)可擴展性:作員只需關心配置參數(shù)的設置是否正確。其他調(diào)整都在程序內(nèi)部調(diào)整。時效性:信息就可以查看到具體的結(jié)果。手工匹配設計概述所以系統(tǒng)需要設計手工匹配把這局部數(shù)據(jù)利用起來。手工匹配數(shù)據(jù)需要操作員做大量的人工操作去維護。整個手工匹配流程如圖:手工匹配流程圖32個步驟由程序自動完成。操作員只需關心規(guī)章。系統(tǒng)只會返回給操作員匹配是否成功的操作結(jié)果。設計原則程序自動完成。智能學習:系統(tǒng)為手工匹配預留一個固化規(guī)章庫,每當操作員手工確認一條需要再一次就行手工匹配了。數(shù)據(jù)加工規(guī)章概述原始表字段等于匹配表字段字段值一一對應關系,比方地稅根底表中的工商登記號=國土地塊信息表中的工商登記號、地稅根底表中的企業(yè)名稱=工商數(shù)據(jù)表中的企業(yè)名稱等。原始數(shù)據(jù)表過濾原始表字段+過濾條件,原始數(shù)據(jù)中只有一局部數(shù)據(jù)需要比對,或者某個規(guī)章用于這個范圍的原始數(shù)據(jù)。比方原始數(shù)據(jù)中只需要匹配某個鄉(xiāng)鎮(zhèn)的數(shù)據(jù),=2023、只需要匹配稅號是“3204000083”開頭等。匹配數(shù)據(jù)表過濾匹配表字段+過濾條件,原始數(shù)據(jù)只與匹配表中某局部數(shù)據(jù)進展匹配。比方效率,可設置匹配表地區(qū)=原始表字段等于匹配表字段截取原始表字段=匹配表字段局部,比方地稅表中有區(qū)號,但是匹配表沒有供給區(qū)號這個字段,但是匹配表中有個字段是由區(qū)號+編號信息組成,就可以使用這條規(guī)章截取匹配表的字段提取區(qū)號。原始表字段截取等于匹配表字段截取4位代表是地市區(qū)號,工商局的數(shù)據(jù)唯一編610位代表是地市區(qū)號,就可以通過這條規(guī)章截取稅務局唯一編04610位到達數(shù)據(jù)匹配關系的建立。原始表字段截取等于匹配表字段原始表字段局部=匹配表字段,規(guī)章原理等同上述第四條規(guī)章截取字段生成字段有鄉(xiāng)鎮(zhèn)代碼字段,鄉(xiāng)鎮(zhèn)代碼字段=地市編號+序號,系統(tǒng)可以依據(jù)這條規(guī)章截取6位,保存成地市字段。字段翻譯在利用比對數(shù)據(jù)的時候,無法避開遇到以下狀況:有數(shù)據(jù)狀態(tài)字段的值一般0、1、2、30、1、2這些數(shù)值代表什么含義,機構(gòu)代碼代表是具體哪個機構(gòu)。字段翻譯可以通過根底數(shù)據(jù)字典表查找,把這些字段值翻譯成能讓人簡潔理解的具體說明。補充關聯(lián)信息字段,把其他表的信息作為一個字段補充道最終數(shù)據(jù)表中。計算生成字段例如在導入的原始數(shù)據(jù)〔國土數(shù)據(jù)〔地稅數(shù)據(jù)〕只有該企業(yè)面積單位稅額。在數(shù)據(jù)利用時,操作員很關心該納稅總額〔廠房面積×單位稅額,該規(guī)章可以自動幫操作員計算出總稅額,并保存在最終數(shù)據(jù)表中,操作員不必導出數(shù)據(jù)后人工進展計算得到總稅額。上述是系統(tǒng)預先定義的加工規(guī)章,是保證數(shù)據(jù)能夠正確建立匹配關系的基臺的規(guī)章庫。適用于各種類型的交換工程。然后分別去實現(xiàn)規(guī)章定義的解析器和規(guī)章處理器。設計原則用于某一個交換工程或者某些特定的交換工程。規(guī)章參數(shù)值全部由操作員依據(jù)具體的交換工程來設置。,也不需要去修改原來的規(guī)章構(gòu)造。數(shù)據(jù)應用設計概述依據(jù)當前需求,數(shù)據(jù)應用大致可分為:固定查詢、單戶明細信息查詢、文本導出、外部數(shù)據(jù)庫直接推送、dblink數(shù)據(jù)庫直連和程序接口。數(shù)據(jù)應用方式數(shù)據(jù)應用方式直接應用間接應用固定查詢可定制查詢單戶明細信息查詢文本導出Dblink外部數(shù)據(jù)庫直接推送程序接口數(shù)據(jù)應用分類圖固定查詢庫字典查詢、數(shù)據(jù)交換項明細查詢等。單戶明細信息查詢的交換數(shù)據(jù),便于數(shù)據(jù)利用人員全面的了解某一戶企業(yè)的第三方數(shù)據(jù)狀況。文本導出excelcsv文件導出的功能,以供人工使用。外部數(shù)據(jù)庫直接推送推送至指定外部數(shù)據(jù)庫。外部數(shù)據(jù)庫直接推送圖權(quán)限。Dblink本系統(tǒng)數(shù)據(jù)庫承受Oracle,所以可以對外開放dblink連接,外部系統(tǒng)可以通dblink方式用讀取本系統(tǒng)的數(shù)據(jù)庫數(shù)據(jù)。dblink是定義一個數(shù)據(jù)庫到另一個數(shù)據(jù)庫的路徑的對象,dblink允許你查詢遠程表及執(zhí)行遠程程序。程序接口程序接口主要承受WebService、輕量級RPC等方式。開發(fā)完畢后會供給具體API描述文檔,便利其他系統(tǒng)調(diào)用。WebService接口不管其他系統(tǒng)的WebserviceSOAP來調(diào)用它就行。SOAPPOST懇求中,發(fā)送到本系統(tǒng)的Web效勞器來。Web效勞器再把這些懇求轉(zhuǎn)發(fā)給Webservice懇求處理器。懇求處理器的作用在于,解析收到的SOAP懇求,調(diào)用Webservice,然后再生成相SOAP應答。WebSOAP應答的方式WebService調(diào)用。WebService應用構(gòu)造圖RPC接口RPC,RemoteProcedureCall,遠程過程調(diào)用。其他系統(tǒng)作為客戶端,向第三流程參考以下圖:RPC應用構(gòu)造圖A系統(tǒng)讀取本系統(tǒng)數(shù)據(jù)可以分為如下步驟〔序號為圖中顯示序號:段供給。A系統(tǒng)可以在各自代碼中嵌入。“RPC客戶端內(nèi)核”與“RPC效勞端內(nèi)核”通信,傳達懇求信息?!癛PC效勞端內(nèi)核”調(diào)用第三方數(shù)據(jù)交換平臺的數(shù)據(jù)讀取程序。數(shù)據(jù)讀取程序向“RPC效勞端內(nèi)核”返回數(shù)據(jù)?!癛PC效勞端內(nèi)核”向“RPC客戶端內(nèi)核”返回數(shù)據(jù)?!癛PC客戶端內(nèi)核”向A系統(tǒng)的調(diào)用程序返回數(shù)據(jù)。數(shù)據(jù)上傳和下發(fā)設計概述級平臺使用狀況統(tǒng)計信息等。始數(shù)據(jù)或最終比對好的數(shù)據(jù)。下面分別對數(shù)據(jù)上傳和數(shù)據(jù)下發(fā)作相應的描述。數(shù)據(jù)上傳數(shù)據(jù)上傳示意圖括數(shù)據(jù)利用率、使用狀況等信息。這些信息需要定時上傳省局節(jié)點的。務。在當前網(wǎng)絡環(huán)境不是很良好或者數(shù)據(jù)特別的狀況下系統(tǒng)會對市局節(jié)點的治理員查后嘗試連續(xù)重上傳。數(shù)據(jù)上傳流程圖數(shù)據(jù)下發(fā)數(shù)據(jù)下發(fā)方示意圖原始數(shù)據(jù)或最終比對好的數(shù)據(jù)。市分割數(shù)據(jù)下發(fā),有市級節(jié)點去匹配數(shù)據(jù)。否有的下發(fā)描述公布,這就是一個監(jiān)聽的概念。據(jù)給那個市級平臺,下發(fā)數(shù)據(jù)如何分割,數(shù)據(jù)庫地址、帳號密碼等信息。行。比照數(shù)據(jù),數(shù)據(jù)量比較大。數(shù)據(jù)下發(fā)流程圖任務監(jiān)控治理中心設計義。數(shù)據(jù)的導入、加工、應用、下發(fā)、權(quán)限治理等都以數(shù)據(jù)交換項為宿主。數(shù)據(jù)交換項示意圖在系統(tǒng)中我們關心的數(shù)據(jù)不同的生命周期〔導入前、導入時、導入后、加工〕可以認為就是數(shù)據(jù)交換項重要的。點。數(shù)據(jù)在每個環(huán)節(jié)都會有對應的用戶界面展現(xiàn),而且可以掌握。分析查詢使用,供給數(shù)據(jù)交換成果的統(tǒng)計與分析功能。交換項的特別狀況也會很好的反響。這里所說的特別狀況的反響是指后臺自息,用戶依據(jù)系統(tǒng)供給的信息,分析特別的產(chǎn)生緣由,從而去處理特別。系統(tǒng)權(quán)限設計對于系統(tǒng)來說,具有很多不同的操作人員,而不同的操作人員對于系統(tǒng)功能流程如以下圖所示用戶登錄流程圖必需具有肯定的崗位〔一個或多個,而崗位才擁有具體的權(quán)限。系統(tǒng)內(nèi)置的治理位,并進展權(quán)限安排。所謂權(quán)限,就是指對系統(tǒng)中某項或多項功能具有操作權(quán)。如以下圖所示。功能權(quán)限關系圖對于系統(tǒng)功能的操作,除了在權(quán)限上嚴格設置保證功能的操作安全外,對任追溯,如以下圖所示。數(shù)據(jù)權(quán)限設計
權(quán)限監(jiān)控分析圖數(shù)據(jù)權(quán)限指的是用戶查看數(shù)據(jù)的權(quán)限。數(shù)據(jù)權(quán)限系統(tǒng)我們承受基于崗位和交〔概念包括了一組第界面可以做后續(xù)的修改。對應關系如以下圖:數(shù)據(jù)權(quán)限關系圖據(jù)信息。數(shù)據(jù)標準設計系統(tǒng)》審核。程如以下圖所示:數(shù)據(jù)標準實現(xiàn)流程圖字段標準化輕松實現(xiàn)。現(xiàn)有系統(tǒng)集成設計考慮各地當前數(shù)據(jù)交換方式不同,有些已有自己獨立的數(shù)據(jù)交換系統(tǒng)。更換參考以下圖:系統(tǒng)集成方案圖如圖中所示,對于數(shù)據(jù)的進入,有兩個方案:1.操作人員可以通過本系統(tǒng)常口,以供其他系統(tǒng)用于推送數(shù)據(jù)。3.3.7中的數(shù)據(jù)應用中描述的,外部數(shù)據(jù)。最終是要進入《數(shù)據(jù)倉庫》的。對于進數(shù)據(jù)倉庫可以有四個方案:《數(shù)據(jù)倉庫》調(diào)用《第三方數(shù)據(jù)交換平臺》的數(shù)據(jù)輸出接口《第三方數(shù)據(jù)交換平臺》調(diào)用《數(shù)據(jù)倉庫》的數(shù)據(jù)抽取接口〔假設供給〕《第三方數(shù)據(jù)交換平臺》的數(shù)據(jù)庫使用dblink連接《數(shù)據(jù)倉庫送數(shù)據(jù)《數(shù)據(jù)倉庫》使用dblink連接《第三方數(shù)據(jù)交換平臺》從其拉數(shù)據(jù)。數(shù)據(jù)使用反響設計從上面對整個系統(tǒng)的設計可以看出,數(shù)據(jù)是以數(shù)據(jù)交換項這個對象作為宿主得知加工好的數(shù)據(jù)在其他系統(tǒng)的使用狀況呢。這局部內(nèi)容將表達系統(tǒng)是如何實現(xiàn)數(shù)據(jù)使用反響功能的。針對不同的使用狀況我們把數(shù)據(jù)使用反響功能設計為兩種反響機制:1WEB界面填寫反響信息WEB界面填寫反響信息示意圖數(shù)據(jù)使用方在數(shù)據(jù)使用過程中,可以通過第三方數(shù)據(jù)交換平臺供給的WEBAPI的狀況,純?nèi)斯げ僮鞯囊环N方式。2API,以供其他系統(tǒng)調(diào)用。API回寫反響信息示意圖API接口提交使用狀況的反響。此種方案需要其他系API的代碼,具體文檔在本系統(tǒng)開發(fā)完畢階段會供給應使用方。系統(tǒng)功能設計概述在系統(tǒng)功能上,我們把平臺分為四局部。的途徑,內(nèi)容,文件格式,頻率等可依據(jù)實際狀況敏捷定制。的過程安排置型自動處理和人工干預處理兩局部。導出接口,而涉及到和各種實際業(yè)務結(jié)合的應用,則不在平臺處理范圍內(nèi)。設置等。數(shù)據(jù)交換局部數(shù)據(jù)交換局部的功能主要包括自定義交換工程設置,治理和日常監(jiān)控。數(shù)據(jù)交換流程數(shù)據(jù)交換流程示意圖交換工程設置包括交換工程的建,編輯以及刪除功能:交換工程的建【功能描述】包括:1、交換工程的名稱2、交換工程的描述3、交換內(nèi)容4、信息交換數(shù)據(jù)源5、數(shù)據(jù)更范圍6、數(shù)據(jù)更方式7、錯誤數(shù)據(jù)處理方式8、交換部門9、數(shù)據(jù)訪問權(quán)限【交換工程名稱設置】定義交換工程名稱,手工錄入【交換工程描述】定義交換工程的具體描述,或額外備注,作為交換工程名稱的補充,手工錄入【交換部門設置】定義交換工程對應的數(shù)據(jù)交換部門。交換部門在系統(tǒng)設置中進展維護,在設置時進展選擇?!窘粨Q內(nèi)容設置】的設置。設置過程中調(diào)用地稅方數(shù)據(jù)標準庫,如增一個交換字段內(nèi)容為工商登記在地稅方數(shù)據(jù)標準中未定義,則手工設置以上內(nèi)容?!窘粨Q數(shù)據(jù)源設置】內(nèi)容的設置功能。數(shù)據(jù)源類型分為:數(shù)據(jù)庫直連方式、FTP文件效勞器方式、手工文件導入方式數(shù)據(jù)庫直連方式:等常見數(shù)oracleip,端口,sid,user,password等相關工程的設置,設置完成后供給連接測試功能,保證數(shù)據(jù)庫能順當連通。sql語句,并確定和交換內(nèi)容的對應規(guī)章。FTP文件效勞器方式:FTP效勞器能順當連通。FTP效勞器連通后,指定交換文件的類型〔txt,tsv,csv,excel...〕和文件名稱規(guī)章,并確定和交換內(nèi)容的對應規(guī)章。手工文件導入方式:和文件名稱規(guī)章,并確定和交換內(nèi)容的對應規(guī)章。交換文件格式定義:換文件的格式,如分割符設置,標題行設置,文本字段符號等。【數(shù)據(jù)更范圍設置】定義每次數(shù)據(jù)更的范圍:1、增量更2、全部更據(jù)的根底上增,不處理原來已經(jīng)交換過的數(shù)據(jù)??赵械慕粨Q數(shù)據(jù),再從數(shù)據(jù)源將全部數(shù)據(jù)更過來?!緮?shù)據(jù)更方式設置】定義每次數(shù)據(jù)更的方式:1、增2、關鍵字段掩蓋增方式:即每次數(shù)據(jù)更都是增,而不管數(shù)據(jù)與原來數(shù)據(jù)的關系。關鍵字段掩蓋:也就是啟用關鍵字處理,在處理增量數(shù)據(jù)的時候,假設遇到僅在數(shù)據(jù)更范圍為增量更時啟用。組合方式設置,以適應數(shù)據(jù)交換的各種狀況?!惧e誤數(shù)據(jù)處理方式設置】時的處理方式:1、無視錯誤數(shù)據(jù),只交換正確局部的數(shù)據(jù),并將錯誤數(shù)據(jù)在日志中進展記錄2、覺察錯誤就停頓交換,并進展日志記錄【數(shù)據(jù)訪問權(quán)限設置】定義交換數(shù)據(jù)的訪問權(quán)限,分為:1、核心機密數(shù)據(jù)2、敏感信息數(shù)據(jù)3、公共數(shù)據(jù)分別對應不同的數(shù)據(jù)安全級別和訪問權(quán)限?!沧C數(shù)據(jù)庫端的安全,可以對非公開數(shù)據(jù)進展加密存儲〕【交換工程設置完成】據(jù)字典。交換工程的編輯【功能描述】工程的建章節(jié)?!菊f明】更。交換工程的刪除【功能描述】將定義好的交換工程刪除?!菊f明】消滅過多的冗余數(shù)據(jù),假設需要保存數(shù)據(jù),則在操作前先進展數(shù)據(jù)備份。交換工程調(diào)度【功能描述】方式和執(zhí)行頻率?!菊f明】運行方式分為手動執(zhí)行和自動執(zhí)行。選定交換用的數(shù)據(jù)文件,系統(tǒng)將依據(jù)交換工程的設置,進展數(shù)據(jù)交換。自行執(zhí)行的開頭時間,完畢時間和執(zhí)行頻率〔天,周,月,年等。交換工程的監(jiān)控數(shù)據(jù)交換工程的監(jiān)控,包括總體運行狀況一覽和工程日志治理??傮w運行狀況一覽【功能描述】運行特別,特別發(fā)生時間等?!静樵儣l件】交換工程名稱〔可模糊,交換部門,是否啟用,運行正常/次運行時間【查詢結(jié)果】數(shù)據(jù)交換工程名稱,交換部門,是否啟用,運行狀況〔正常/不正常發(fā)生時間,最終運行時間,交換數(shù)據(jù)記錄數(shù),錯誤數(shù)據(jù)數(shù)量?!菊f明】查詢結(jié)果受操作人員權(quán)限影響。日志治理【功能描述】緣由。日志治理供給查看,導出,清空等日志治理常用操作?!静樵儣l件】交換工程名稱〔可模糊,交換部門,有無錯誤日志,最終一次運行時間【查詢結(jié)果】向下鉆取可查看具體交換工程的日志?!静僮鳌繉С鋈罩荆蹇杖罩??!菊f明】查詢結(jié)果受操作人員權(quán)限影響。數(shù)據(jù)交換的一些原則數(shù)據(jù)交換局部的功能以敏捷定義為原則,系統(tǒng)理論上考慮各種狀況,并供給并不是由交換系統(tǒng)來打算,而是應當由治理要求來打算。數(shù)據(jù)加工局部自動匹配和人工干預匹配。在匹配過程中又同時涉及到數(shù)據(jù)的分類和過濾。數(shù)據(jù)加工流程數(shù)據(jù)加工流程示意圖自動匹配交換工程查詢功能【功能描述】【說明】查詢功能是設置加工配置的前置功能,先查詢出交換工程列表信息〔包括交進展開頭配置功能,已設置規(guī)章組的交換工程只能進展修改配置功能。地稅方匹配數(shù)據(jù)源設置【功能描述】加載匹配數(shù)據(jù)表和原始數(shù)據(jù)表的數(shù)據(jù)構(gòu)造并保存。默認是地稅戶管清查表。【說明】是匹配的數(shù)據(jù)源與其他的三方數(shù)據(jù)進展匹配。定義交換數(shù)據(jù)最終數(shù)據(jù)表構(gòu)造【功能描述】原始數(shù)據(jù)和匹配數(shù)據(jù)有哪些字段是有效、可利用?!菊f明】雙方的數(shù)據(jù)由于原來是保存在不同的部門下,而且不同的部門信息化程度不一定義交換數(shù)據(jù)匹配規(guī)章【功能描述】系列操作形成一個有優(yōu)先級挨次規(guī)章組列表。【說明】原始表字段等于匹配表字段字段值一一對應關系,比方地稅根底表中的工商登記號=國土地塊信息表中的工商登記號、地稅根底表中的企業(yè)名稱=工商數(shù)據(jù)表中的企業(yè)名稱等。原始數(shù)據(jù)表過濾原始表字段+過濾條件,原始數(shù)據(jù)中只有一局部數(shù)據(jù)需要比對,或者某個規(guī)章?lián)?,鄉(xiāng)鎮(zhèn)代碼=2023是“3204000083”開頭等。匹配數(shù)據(jù)表過濾匹配表字段+過濾條件,原始數(shù)據(jù)只與匹配表中某局部數(shù)據(jù)進展匹配。比方處理效率,可設置匹配表地區(qū)=原始表字段等于匹配表字段截取原始表字段=匹配表字段局部,比方地稅表中有區(qū)號,但是匹配表沒有供給區(qū)號這個字段,但是匹配表中有個字段是由區(qū)號+編號信息組成,就可以使用這條規(guī)章截取匹配表的字段提取區(qū)號。原始表字段截取等于匹配表字段原始表字段局部=匹配表字段,規(guī)章原理等同上述第四條規(guī)章??啥x一條或多條規(guī)章來滿足數(shù)據(jù)的自動匹配關系。如規(guī)章一定義地稅方登記信息中的工商登記號碼=工商原始登記數(shù)據(jù)的工商登記號碼;規(guī)章二,工商原始登記數(shù)據(jù)中的登記號碼前6位=320400;規(guī)章三 這樣一系列規(guī)章,規(guī)章與規(guī)章之間為規(guī)律與的關系。這樣一套規(guī)組在匹配時使用的數(shù)據(jù)是前面的規(guī)章未匹配上的數(shù)據(jù)。定義交換數(shù)據(jù)加工規(guī)章【功能描述】補全的描述?!菊f明】加工規(guī)章:截取字段生成字段鄉(xiāng)鎮(zhèn)代碼字段,鄉(xiāng)鎮(zhèn)代碼字段=地市編號+序號,系統(tǒng)可以依據(jù)這條規(guī)章截取6位,保存成地市字段。字段翻譯0、1、2、30、1、2這些數(shù)值代表什么含義,機構(gòu)代碼代表是具體哪個機構(gòu)。字段翻譯可以補充關聯(lián)信息字段,把其他表的信息作為一個字段補充道最終數(shù)據(jù)表中。計算生成字段例如在導入的原始數(shù)據(jù)〔國土數(shù)據(jù),國土數(shù)據(jù)只有該企業(yè)的廠房面積,而匹配數(shù)據(jù)〔地稅數(shù)據(jù)〕只有該企業(yè)面積單位稅額。在數(shù)據(jù)利用時,操作員很關心廠房面積×單位稅額并保存在最終數(shù)據(jù)表中,操作員不必導出數(shù)據(jù)后人工進展計算得到總稅額。設置自動匹配任務【功能描述】為該交換工程的自動匹配任務設置任務啟用的時間、周期?!菊f明】自動匹配任務啟用時間準確到小時。處理類型分為一次、每日、每周、每月、每年。修改數(shù)據(jù)加工配置【功能描述】現(xiàn)?!菊f明】跳過前面幾個步驟直接修改正任務時間。手工匹配交換工程查詢【功能描述】工程【說明】〔包括交換工程的根本信息,已匹配上的記錄總數(shù)、未匹配上的記錄總數(shù)。操作員選擇操作某個交換工程,再針對該交換工程進展手工匹配。未匹配原始數(shù)據(jù)查詢【功能描述】依據(jù)條件查詢該交換工程全部未成功匹配的數(shù)據(jù)。【說明】利用的進展手工匹配流程。匹配數(shù)據(jù)源查詢【功能描述】默認查詢該交換工程設置的匹配數(shù)據(jù)源表的全部記錄。可依據(jù)查詢條件,模糊過濾數(shù)據(jù)?!菊f明】與這條原始數(shù)據(jù)匹配的一條匹配數(shù)據(jù)。手工匹配關系確認【功能描述】系?!菊f明】依據(jù)最終數(shù)據(jù)表構(gòu)造信息插入到最終數(shù)據(jù)表中。加載此交換工程的加工規(guī)章,把插入最終數(shù)據(jù)表這條記錄依據(jù)加工的數(shù)據(jù)構(gòu)造保持全都。個固化關系庫,節(jié)約手工匹配操作。手工撤銷匹配交換工程查詢【功能描述】工程【說明】〔包括交換工程的根本信息,已匹配上的記錄總數(shù)、未匹配上的記錄總數(shù)。操作員選擇操作某個交換工程,再針對該交換工程進展已匹配記錄查詢。已匹配記錄查詢【功能描述】依據(jù)條件查詢該交換工程全部已匹配的原始數(shù)據(jù)【說明】終數(shù)據(jù)表信息。由操作員人工審核這條已匹配的記錄是否正確。撤銷匹配關系【功能描述】〔包括自動匹配和人工匹配時發(fā)生匹配錯誤〕與實際狀況不符合,可回退這條數(shù)據(jù)的狀態(tài)。數(shù)據(jù)匹配綜合治理自動匹配治理【功能描述】此功能設置交換工程的自動匹配狀態(tài)。【說明】檢查時否應當執(zhí)行匹配任務。假設不啟用則需操作員去手工開啟數(shù)據(jù)匹配任務。交換工程匹配狀況概覽【功能描述】此功能主要查詢交換工程匹配狀況的相關信息?!菊f明】按數(shù)據(jù)交換工程查詢數(shù)據(jù)匹配的狀況一覽,如數(shù)據(jù)是否進展了匹配關系設〔匹配到多少記錄,未匹配到多少記錄,對匹配到的記錄和未匹配到的記錄可以進展查詢。數(shù)據(jù)應用局部本局部主要是數(shù)據(jù)的簡潔查詢,以及數(shù)據(jù)輸出接口,包含:1、數(shù)據(jù)字典查詢2、交換工程狀況查詢3、按交換工程的簡潔數(shù)據(jù)查詢4、單戶明細信息查詢5、數(shù)據(jù)輸出接口6、成果展現(xiàn)交換,匹配并分發(fā)的數(shù)據(jù)。數(shù)據(jù)字典查詢【功能描述】主要針對通過交換工程建立的交換數(shù)據(jù)字典的查詢,在數(shù)據(jù)交換工程建的時以及對應的數(shù)據(jù)字典。相關人員準時全面把握數(shù)據(jù)交換的內(nèi)容細節(jié),為交換數(shù)據(jù)的治理和利用供給幫助。【查詢條件】交換工程名稱〔可模糊,交換部門【查詢結(jié)果】符合條件的交換工程列表,并可向下鉆取查詢具體交換工程的數(shù)據(jù)字典?!静僮鳌繑?shù)據(jù)字典導
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
- 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 第15課《我們不亂扔》教學設計-2024-2025學年一年級道德與法治上冊統(tǒng)編版
- 展覽館裝修合同
- 2025年度建筑企業(yè)農(nóng)民工勞動合同創(chuàng)新模式試點方案
- 2025年度五星級酒店與VIP客人個性化服務協(xié)議
- 2025年度房產(chǎn)贈與與可持續(xù)發(fā)展合同
- 2025年度冷鏈物流貨運損壞賠償協(xié)議書
- 二零二五年度人工智能教育平臺合作協(xié)議中的支付及費用分攤細則
- 2025年度帶寵物友好房屋出租協(xié)議電子版
- 2025年度廣告代理合同解除通知期限與費用結(jié)算規(guī)范
- 2025年度報廢車買賣及報廢車輛拆解與環(huán)保設施投資合同
- 2022-2023年質(zhì)量員之市政質(zhì)量專業(yè)管理實務通關提分題庫及完整答案
- 四年級語文下冊第六單元【集體備課】(教材解讀+教學設計)
- 云南礦產(chǎn)資源分布
- 2015-2022年青島酒店管理職業(yè)技術學院高職單招語文/數(shù)學/英語筆試參考題庫含答案解析
- 保險第三方理賠調(diào)查服務方案
- 我愛運動手抄報電子小報模板(附A4線稿)可打印涂色
- GB/T 9113-2010整體鋼制管法蘭
- GB/T 32722-2016土壤質(zhì)量土壤樣品長期和短期保存指南
- GB/T 2951.12-2008電纜和光纜絕緣和護套材料通用試驗方法第12部分:通用試驗方法-熱老化試驗方法
- 2009數(shù)據(jù)結(jié)構(gòu)英文試卷A及答案
- FZ/T 51010-2014纖維級聚對苯二甲酸1,3-丙二醇酯切片(PTT)
評論
0/150
提交評論