統(tǒng)一數(shù)據(jù)交換平臺

統(tǒng)一數(shù)據(jù)交換平臺四川賽思特科技有限公司統(tǒng)一數(shù)據(jù)交換平臺項目總體概述

統(tǒng)一數(shù)據(jù)交換平臺內(nèi)核采用AMQ4.1.1，服務(wù)器容器完全兼容Tomcat、Weblogic，JAVA虛擬機(jī)要求1.5以上版本?？蛻舳四壳爸С諮AVA、C和C++三種協(xié)議，是一個高效的、可管理的數(shù)據(jù)交換平臺。統(tǒng)一數(shù)據(jù)交換平臺交換平臺設(shè)計框架圖統(tǒng)一數(shù)據(jù)交換平臺系統(tǒng)特點管理方式靈活：管理模式采用集中和分布式管理相結(jié)合，上級節(jié)點可以管理和監(jiān)控下級節(jié)點；各級節(jié)點也可以管理和監(jiān)控本節(jié)點。路由可配置：可以通過復(fù)合隊列配置多種路由形式，支持一個消息既路由，又不影響偵聽的路由模式。接口封裝優(yōu)化：對外接口將消息隊列的協(xié)議和錯誤處理等復(fù)雜細(xì)節(jié)優(yōu)化封裝，實現(xiàn)消息傳輸?shù)姆€(wěn)定性最大限度地和業(yè)務(wù)系統(tǒng)剝離?？缙脚_特性：系統(tǒng)采用java開發(fā)，可以兼容主流的軟硬件平臺以及J2EE中間件，同時也兼容各種主流的數(shù)據(jù)庫產(chǎn)品。統(tǒng)一數(shù)據(jù)交換平臺核心交換接口描述1． 支持多種數(shù)據(jù)交換方式（1）同步請求/回答方式:適合客戶端向服務(wù)器端可靠的發(fā)送關(guān)鍵數(shù)據(jù)（2）異步請求/回答方式:適合客戶端向服務(wù)器實時發(fā)送非關(guān)鍵數(shù)據(jù)（3）對話方式:適合長時間在客戶端和服務(wù)器之間相互發(fā)送大量數(shù)據(jù)（4）廣播通知方式:適合服務(wù)器端向多個客戶端單向發(fā)送消息。（5）管道方式:適合多服務(wù)器端逐級傳送消息，對于區(qū)域中心要在實現(xiàn)管道的同時，保存消息隊列到數(shù)據(jù)庫中。（6）隊列方式:適合網(wǎng)絡(luò)環(huán)境較差情況下發(fā)送數(shù)據(jù)發(fā)布訂閱方式:適合服務(wù)器端向多個客戶端單向發(fā)送數(shù)據(jù)。統(tǒng)一數(shù)據(jù)交換平臺2．?dāng)?shù)據(jù)傳輸優(yōu)先權(quán)管理和訪問路由數(shù)據(jù)傳輸優(yōu)先權(quán)管理是統(tǒng)一數(shù)據(jù)交換平臺提供的另一個核心能力。某一服務(wù)請求經(jīng)常需要比其他服務(wù)更高的優(yōu)先權(quán)。例如，同步數(shù)據(jù)的優(yōu)先級要比異步數(shù)據(jù)的優(yōu)先級高，對大多數(shù)需要傳輸?shù)臄?shù)據(jù)來說，要盡可能的優(yōu)先滿足同步數(shù)據(jù)的傳輸。3．大容量數(shù)據(jù)傳輸支持（大于1G）統(tǒng)一數(shù)據(jù)交換平臺4．?dāng)帱c續(xù)傳網(wǎng)絡(luò)中傳輸數(shù)據(jù)，網(wǎng)絡(luò)的短暫中斷不可避免，統(tǒng)一數(shù)據(jù)交換平臺通過緩存、存取、數(shù)據(jù)源管理來保障數(shù)據(jù)傳輸?shù)臅r效性，穩(wěn)定性，安全性。即使出現(xiàn)網(wǎng)絡(luò)中斷，統(tǒng)一數(shù)據(jù)交換平臺也能在一定范圍內(nèi)保證數(shù)據(jù)不被丟失，并在網(wǎng)絡(luò)恢復(fù)后，在有硬件支持的情況下可斷點續(xù)傳N小時以前的數(shù)據(jù),對未傳輸?shù)臄?shù)據(jù)，在保證相關(guān)實時數(shù)據(jù)可靠穩(wěn)定傳輸?shù)那闆r下，根據(jù)優(yōu)先級和不同的策略重新傳輸，并保證數(shù)據(jù)傳輸不重復(fù)。統(tǒng)一數(shù)據(jù)交換平臺5．壓縮傳輸6．生命周期控制網(wǎng)絡(luò)中傳輸數(shù)據(jù)，網(wǎng)絡(luò)的短暫中斷不可避免，統(tǒng)一數(shù)據(jù)交換平臺通過緩存、存取、數(shù)據(jù)源管理來保障數(shù)據(jù)傳輸?shù)臅r效性，穩(wěn)定性，安全性。即使出現(xiàn)網(wǎng)絡(luò)中斷，統(tǒng)一數(shù)據(jù)交換平臺也能在一定范圍內(nèi)保證數(shù)據(jù)不被丟失，并在網(wǎng)絡(luò)恢復(fù)后，在有硬件支持的情況下可斷點續(xù)傳N小時以前的數(shù)據(jù),對未傳輸?shù)臄?shù)據(jù)，在保證相關(guān)實時數(shù)據(jù)可靠穩(wěn)定傳輸?shù)那闆r下，根據(jù)優(yōu)先級和不同的策略重新傳輸，并保證數(shù)據(jù)傳輸不重復(fù)。統(tǒng)一數(shù)據(jù)交換平臺管理功能描述1.服務(wù)配置管理設(shè)置核心交換接口的各種參數(shù)，管理消息隊列，保證數(shù)據(jù)交換平臺的靈活性，穩(wěn)定性和效率性2.服務(wù)管理：控制數(shù)據(jù)交換平臺的啟動停止，并且可以查看信息服務(wù)器的狀態(tài)信息，例如服務(wù)器類型，服務(wù)器ip，數(shù)據(jù)庫信息，cpu使用率，內(nèi)存使用率，硬盤剩余空間等等。3.帳號管理：系統(tǒng)管理員知對本系統(tǒng)的管理員帳號，進(jìn)行管理。包括帳號的增刪改。統(tǒng)一數(shù)據(jù)交換平臺4.實時監(jiān)控管理，報警：查看系統(tǒng)運(yùn)行的狀態(tài)，查看實時消息隊列。查看各種日志信息，過濾出錯日志。啟動報警機(jī)制：例如email通知，手機(jī)提醒。5.日志管理：系統(tǒng)自動記錄歷史數(shù)據(jù)傳輸日志，歷史維護(hù)日志以及升級日志。提供日志下載的功能。。6.信息統(tǒng)計：信息統(tǒng)計：分類統(tǒng)計數(shù)據(jù)傳輸信息7.集中管理監(jiān)控：統(tǒng)一交換平臺支持國家中心和區(qū)域中心的集中管理以及監(jiān)控統(tǒng)一數(shù)據(jù)交換平臺系統(tǒng)流程圖統(tǒng)一數(shù)據(jù)交換平臺數(shù)據(jù)交換平臺部署圖統(tǒng)一數(shù)據(jù)交換平臺使用說明

1.1系統(tǒng)配置系統(tǒng)配置的功能分為：節(jié)點管理、數(shù)據(jù)庫管理、服務(wù)管理和報警策略。1.1.1節(jié)點管理在節(jié)點管理里，可以配置本級節(jié)點的基本屬性及其上級節(jié)點的管理信息，作為管理節(jié)點，也可以在這個模塊中監(jiān)控下屬節(jié)點的工作狀態(tài)，配置其基本節(jié)點屬性。統(tǒng)一數(shù)據(jù)交換平臺節(jié)點屬性參數(shù)名說明本級節(jié)點屬性節(jié)點名稱該節(jié)點的名稱，可以用中文表示節(jié)點標(biāo)識該節(jié)點的表示，全網(wǎng)唯一，不能用全角心跳間隔向上級節(jié)點發(fā)送心跳信息的時間間隔，以秒為單位自動升級系統(tǒng)是/否采用自動升級機(jī)制上級節(jié)點屬性節(jié)點IP上級節(jié)點的IP，如果是多個，用半角的“,”隔開HTTP端口上級節(jié)點的HTTP服務(wù)端口JMS端口上級節(jié)點的JMS服務(wù)端口（本地節(jié)點向該節(jié)點以UDP方式發(fā)送心跳信息）1參數(shù)說明節(jié)點管理的參數(shù)說明如下表4所示：表4節(jié)點管理的參數(shù)說明統(tǒng)一數(shù)據(jù)交換平臺2配置界面——節(jié)點管理

本地節(jié)點管理的配置界面如下圖5和圖6所示：圖5本地節(jié)點管理配置界面1統(tǒng)一數(shù)據(jù)交換平臺

圖6下級節(jié)點視圖在下級節(jié)點視圖中，可以實時監(jiān)控所有該節(jié)點的下級節(jié)點的工作狀態(tài)。統(tǒng)一數(shù)據(jù)交換平臺1.1.2數(shù)據(jù)庫管理數(shù)據(jù)庫管理模塊配置持久化消息的存儲格式，系統(tǒng)運(yùn)行后更改其參數(shù)，會造成隊列中已有的消息丟失。1.參數(shù)說明數(shù)據(jù)庫管理參數(shù)表如下表5所示：數(shù)據(jù)庫管理參數(shù)名說明

數(shù)據(jù)庫類型持久化消息存儲形式，系統(tǒng)內(nèi)置“文件形式”、“Mysql”、“Oracle”、“Derby”，其中“文件形式”為缺省方式數(shù)據(jù)標(biāo)識對應(yīng)不同的數(shù)據(jù)庫類型，不可更改。

表5數(shù)據(jù)庫管理參數(shù)表統(tǒng)一數(shù)據(jù)交換平臺數(shù)據(jù)庫配置界面如下圖7所示：2配置界面——數(shù)據(jù)管理圖7數(shù)據(jù)庫配置界面不同類型的數(shù)據(jù)庫，其配置參數(shù)不同，圖上所示為Oracle的標(biāo)準(zhǔn)JDBC配置參數(shù)。統(tǒng)一數(shù)據(jù)交換平臺1.1.3服務(wù)管理服務(wù)管理是系統(tǒng)配置的核心部分，每一個節(jié)點可以配置多個服務(wù)；每一個服務(wù)可以配置多個連接方式和相應(yīng)隊列。1.參數(shù)說明服務(wù)管理的參數(shù)說明如下表6所示：服務(wù)管理參數(shù)名說明基本參數(shù)服務(wù)名稱該服務(wù)的名稱，用英文表示啟動時清空消息是否在系統(tǒng)啟動時清空隊列中的所有的消息。持久化消息是否持久化消息數(shù)據(jù)路徑如果是文件形式持久化消息，則應(yīng)設(shè)置其路徑數(shù)據(jù)源名稱數(shù)據(jù)源的beanId，對應(yīng)于數(shù)據(jù)庫設(shè)置中的beanid表6服務(wù)管理參數(shù)表

在基本參數(shù)中可設(shè)置服務(wù)的名稱，是否持久化，數(shù)據(jù)源名稱，數(shù)據(jù)路徑等參數(shù)，輸入后點擊“添加”即可添加新的服務(wù)，也可點擊“修改”保存修改的服務(wù)。統(tǒng)一數(shù)據(jù)交換平臺服務(wù)管理配置界面如下圖8所示圖8服務(wù)管理配置界面2.配置界面——服務(wù)管理在服務(wù)管理界面可以對本節(jié)點以及下屬節(jié)點的服務(wù)進(jìn)行管理和監(jiān)控。針對一個節(jié)點，可以新建、修改、刪除某一個服務(wù)。對于某一個節(jié)點里具體的某項服務(wù)內(nèi)容，點擊該服務(wù)名內(nèi)容可以設(shè)定該服務(wù)名的參數(shù)。這些參數(shù)包括:基本參數(shù)、傳輸設(shè)置、物理隊列、復(fù)合隊列、路由設(shè)置、隊列策略。需選中服務(wù)的單選按鈕，再點擊啟動即可使設(shè)置生效。統(tǒng)一數(shù)據(jù)交換平臺在服務(wù)管理界面可以對本節(jié)點以及下屬節(jié)點的服務(wù)進(jìn)行管理和監(jiān)控。針對一個節(jié)點，可以新建、修改、刪除某一個服務(wù)。對于某一個節(jié)點里具體的某項服務(wù)內(nèi)容，點擊該服務(wù)名內(nèi)容可以設(shè)定該服務(wù)名的參數(shù)。這些參數(shù)包括:基本參數(shù)、傳輸設(shè)置、物理隊列、復(fù)合隊列、路由設(shè)置、隊列策略。需選中服務(wù)的單選按鈕，再點擊啟動即可使設(shè)置生效。統(tǒng)一數(shù)據(jù)交換平臺

基本參數(shù)設(shè)置如下圖9所示：圖9服務(wù)管理界面－基本參數(shù)統(tǒng)一數(shù)據(jù)交換平臺傳輸參數(shù)設(shè)置如下圖10所示：圖10服務(wù)管理界面－傳輸參數(shù)設(shè)置統(tǒng)一數(shù)據(jù)交換平臺

對于每一個服務(wù)，可以設(shè)置若干連接，目前可以支持的協(xié)議分為：Tcp、Stomp、Udp三種,而Tcp是最常用的，也是完全可以滿足業(yè)務(wù)需求的一種協(xié)議。物理隊列參數(shù)設(shè)置如下圖11所示：圖11服務(wù)管理界面－物理隊列通過這一參數(shù)設(shè)置可以增加修改該服務(wù)的消息隊列，每一個消息隊列可以設(shè)置日志級別；對應(yīng)文件形式傳輸?shù)年犃?，建議單獨(dú)使用一個隊列。統(tǒng)一數(shù)據(jù)交換平臺復(fù)合隊列的參數(shù)設(shè)置如下圖12所示：圖12服務(wù)管理界面－復(fù)合隊列復(fù)合隊列是物理隊列的集合。一個復(fù)合隊列，可以包括多個物理隊列；當(dāng)消息到達(dá)該復(fù)合隊列時，服務(wù)器將自動將該消息路由到物理隊列里。物理隊列可以使用選擇器對接收的消息進(jìn)行篩選。統(tǒng)一數(shù)據(jù)交換平臺路由設(shè)置的參數(shù)設(shè)置如下圖13所示：

圖13服務(wù)管理界面－路由設(shè)置通過這一參數(shù)設(shè)置可以設(shè)置到達(dá)本地節(jié)點的某一個隊列的消息，自動路由到目標(biāo)隊列中。設(shè)置服務(wù)管理的任意一項，設(shè)置后點擊頂端的返回可回到服務(wù)的列表頁面，此時若要使設(shè)置后的服務(wù)生效，需點擊啟動可重啟服務(wù)使設(shè)置生效。圖13服務(wù)管理界面－路由設(shè)置通過這一參數(shù)設(shè)置可以設(shè)置到達(dá)本地節(jié)點的某一個隊列的消息，自動路由到目標(biāo)隊列中。設(shè)置服務(wù)管理的任意一項，設(shè)置后點擊頂端的返回可回到服務(wù)的列表頁面，此時若要使設(shè)置后的服務(wù)生效，需點擊啟動可重啟服務(wù)使設(shè)置生效。統(tǒng)一數(shù)據(jù)交換平臺1.1.4報警策略為了在過量負(fù)載情況下仍然保證系統(tǒng)的可靠性。當(dāng)出現(xiàn)系統(tǒng)沒有可用空間或沒有可用內(nèi)存的情況時，平臺就會采用報警策略，同時自動放棄，而不是重試使情況變得更糟。1.參數(shù)說明報警策略的參數(shù)說明如下表7所示：報警策略參數(shù)名說明報警閥值硬盤剩余空間小于當(dāng)硬盤剩余空間小于某一個值時觸發(fā)報警內(nèi)存使用大于當(dāng)內(nèi)存使用大于某一個值時觸發(fā)報警CPU占用大于當(dāng)CPU占用大于某一個值時觸發(fā)報警報警策略短消息使用短消息報警，需填寫手機(jī)號碼（需要網(wǎng)絡(luò)支持）電子郵件使用電子郵件報警，需填寫郵件地址（需要網(wǎng)絡(luò)支持）重新啟動強(qiáng)制重新啟動表7報警參數(shù)說明統(tǒng)一數(shù)據(jù)交換平臺2.配置界面——報警管理報警的配置如下圖14所示：圖14報警策略配置統(tǒng)一數(shù)據(jù)交換平臺1.2帳號管理1.2.1操作說明：

統(tǒng)一數(shù)據(jù)交換平臺將分兩個角色：系統(tǒng)管理員和普通管理員。只有系統(tǒng)管理員登陸，才能顯示如圖所示的界面，普通管理員是無法看到該界面的。統(tǒng)一數(shù)據(jù)交換平臺通過帳號管理可以添加刪除修改本系統(tǒng)下的所有系統(tǒng)管理員和普通管理員的帳號和密碼。1.2.2帳號管理頁面帳號管理頁面如下圖15所示：圖15帳號管理統(tǒng)一數(shù)據(jù)交換平臺1.2.3實時監(jiān)控數(shù)據(jù)交換平臺能夠通過管理工具的實時監(jiān)控功能監(jiān)控和控制數(shù)據(jù)交換過程。所有的實時信息又分為實時的系統(tǒng)信息和實時的消息信息兩大類。1.3實時系統(tǒng)信息1.3.1操作說明：通過實時監(jiān)控，將集中顯示主節(jié)點及其子節(jié)點的所有的實時系統(tǒng)信息。1.3.2實時系統(tǒng)信息頁面：統(tǒng)一數(shù)據(jù)交換平臺圖16實時系統(tǒng)信息

系統(tǒng)的實時系統(tǒng)信息頁面將提供如下圖16所示的信息：統(tǒng)一數(shù)據(jù)交換平臺1.4實時消息信息1.4.1操作說明：通過實時監(jiān)控，將集中顯示主節(jié)點及子節(jié)點的消息信息，點查看按鈕，會在本頁面列出所有發(fā)送過的消息對列，點擊顯示消息隊列的按鈕，還會把此隊列下的所有消息顯示出來。1.4.2實時消息信息頁面：統(tǒng)一數(shù)據(jù)交換平臺實時消息信息頁面如下圖17所示：圖17實時消息信息頁面統(tǒng)一數(shù)據(jù)交換平臺點擊圖中的“查看”，該頁會出現(xiàn)對應(yīng)的消息隊列信息，如下圖18所示：圖18對應(yīng)的消息隊列信息統(tǒng)一數(shù)據(jù)交換平臺點擊消息隊列中的隊列名稱，又會在該頁出現(xiàn)具體的消息列表，如下圖19所示：圖19具體的消息列表信息統(tǒng)一數(shù)據(jù)交換平臺1.5日志管理數(shù)據(jù)交換平臺提供各種日志，分別幫助用戶跟蹤、分析、調(diào)試應(yīng)用系統(tǒng)和方便地進(jìn)行運(yùn)行審計，并在系統(tǒng)出現(xiàn)故障時可以快速地進(jìn)行運(yùn)行故障定位。日志統(tǒng)計分析功能提供用戶在各個部署點查看一段時間內(nèi)本部署點上交換平臺所處理的數(shù)據(jù)的各種信息。通過對日志信息的綜合統(tǒng)計分析，提供給平臺管理員或普通用戶關(guān)于平臺運(yùn)行狀態(tài)的直觀信息。數(shù)據(jù)交換平臺提供了以下三種日志：（1）歷史日志；（2）日常維護(hù)日志（3）升級日志統(tǒng)一數(shù)據(jù)交換平臺1.5.1歷史日志：傳輸歷史日志是根據(jù)數(shù)據(jù)種類、收發(fā)地址等記錄數(shù)據(jù)交換的日志。

操作說明：點擊歷史日志，會出現(xiàn)本系統(tǒng)和子系統(tǒng)的日志查詢頁面，選擇查詢條件，點擊查詢，該頁面會出現(xiàn)查詢結(jié)果。歷史日志頁面：統(tǒng)一數(shù)據(jù)交換平臺

歷史日志查詢頁面如下圖20所示：圖20日志查詢頁面統(tǒng)一數(shù)據(jù)交換平臺在該查詢頁面中點擊“確定”后，會出現(xiàn)查詢結(jié)果頁面，如下圖21所示：圖21查詢結(jié)果頁面統(tǒng)一數(shù)據(jù)交換平臺1.5.2日常維護(hù)日志：日常維護(hù)日志是記錄統(tǒng)一數(shù)據(jù)交換平臺日常維護(hù)信息的日志。日常維護(hù)日志操作說明：點擊日常維護(hù)日志，會出現(xiàn)本系統(tǒng)和子系統(tǒng)的日志查詢頁面，選擇查詢條件，點擊查詢，本頁面會出現(xiàn)查詢結(jié)果。統(tǒng)一數(shù)據(jù)交換平臺日常維護(hù)日志頁面：日常維護(hù)日志查詢頁面如下圖22所示：圖22日常維護(hù)日志查詢頁面統(tǒng)一數(shù)據(jù)交換平臺在該頁面中點擊“確定”后，會出現(xiàn)日常維護(hù)日志查詢結(jié)果頁面，如下圖23所示：圖23日常維護(hù)日志查詢結(jié)果頁面統(tǒng)一數(shù)據(jù)交換平臺1.5.3升級日志：升級日志包括本地升級的記錄和下載新的版本升級本地以及升級服務(wù)器設(shè)置。升級日志操作說明：點擊升級日志就會出現(xiàn)如圖24所示的升級日志頁面圖24升級日志頁面統(tǒng)一數(shù)據(jù)交換平臺若是國家中心已發(fā)布新的版本，在此頁面可選中要升級版本，點擊“下載升級包”會彈出一個確認(rèn)的對話框，選擇“是”，開始下載升級包，進(jìn)入如圖25下載完成的頁面。在此頁面中已告訴您一些注意事項，你可通過提示的命令參數(shù)來關(guān)閉服務(wù)器和關(guān)閉進(jìn)程。在最下邊列出的是你在升級時所要使用的命令腳本，你可通過更新腳本來升級您的系統(tǒng)。點擊復(fù)制可將命令腳本復(fù)制到剪切板中。點擊返回則回到圖24升級日志頁面。統(tǒng)一數(shù)據(jù)交換平臺圖25升級下載完成頁面點擊“刪除”可刪除選中的本地版本，點擊設(shè)置進(jìn)入如圖25所示的升級服務(wù)器設(shè)置頁面。統(tǒng)一數(shù)據(jù)交換平臺圖25升級信息頁面統(tǒng)一數(shù)據(jù)交換平臺在此您可填寫遠(yuǎn)程升級服務(wù)器信息和本地服務(wù)器信息為升級做好提前設(shè)置。升級服務(wù)器設(shè)置

參數(shù)名說明遠(yuǎn)程升級服務(wù)器服務(wù)器地址遠(yuǎn)程升級服務(wù)器的IP地址服務(wù)器端口遠(yuǎn)程升級服務(wù)器所用的HTTP端口升級路徑遠(yuǎn)程升級服務(wù)器的項目系統(tǒng)所在根目錄本地服務(wù)器系統(tǒng)ID為本地服務(wù)器系統(tǒng)定義的ID號系統(tǒng)名稱本地服務(wù)器系統(tǒng)的名稱系統(tǒng)IP本地的IP地址管理員姓名本地服務(wù)器的管理員郵件地址管理員的郵件地址聯(lián)系電話管理員聯(lián)系電話統(tǒng)一數(shù)據(jù)交換平臺1.5.4升級管理升級管理操作說明：升級管理頁面如圖26列出了現(xiàn)有的版本信息。圖26升級管理頁面統(tǒng)一數(shù)據(jù)交換平臺點擊“初始化版本”可生成一個最初的版本，并將以前的所有版本刪除。在對應(yīng)的版本上點擊“發(fā)布”可發(fā)布此版本及此版本以前的版本，此時狀態(tài)已變成“已發(fā)布”，操作變成了“取消發(fā)布”，并在區(qū)域中心升級日志中可看到此版本。點擊“取消發(fā)布”可將此已發(fā)布的版本取消，同時狀態(tài)變成“未發(fā)布