企業(yè)服務(wù)總線性能

1、企業(yè)服務(wù)總線性能馬永光2015-05-18簡(jiǎn)介天津聯(lián)怡科技有限公司企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司一：ESB性能簡(jiǎn)介二：ESB測(cè)試用例三：ESB部署調(diào)優(yōu)企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司信息交換平臺(tái)作為信息“高速公路”，承擔(dān)報(bào)文轉(zhuǎn)換、協(xié)議適配、服務(wù)路由等重要的工作，它的性能處理能力從整體IT架構(gòu)層面將影響到全行的業(yè)務(wù)處理能力，采用什么樣的部署模式、硬件設(shè)備成為下一步選擇的關(guān)鍵點(diǎn)。企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司從硬件方面，如何進(jìn)行硬件選型以滿足預(yù)計(jì)性能指標(biāo)，是否便于部署、管理將是測(cè)試過(guò)程中需要考慮的重要內(nèi)容。因此，測(cè)試的目標(biāo)總結(jié)如下：通過(guò)各種場(chǎng)景測(cè)試信息交換平臺(tái)在不同硬件上的性能表現(xiàn)

2、，為硬件選型提供依據(jù)；通過(guò)測(cè)試，為下一步核心系統(tǒng)調(diào)整的方案選擇提供數(shù)據(jù)支持?？疾煊布桨钙脚_(tái)在部署、管理方面的能力。性能測(cè)試過(guò)程中的指標(biāo)：系統(tǒng)的執(zhí)行效率測(cè)試在各種負(fù)載壓力情況下，獲取典型事務(wù)的平均交易響應(yīng)時(shí)間、每秒通過(guò)事務(wù)數(shù)等效率指標(biāo)。資源利用率在性能測(cè)試中，對(duì)應(yīng)用和數(shù)據(jù)庫(kù)服務(wù)器硬件資源進(jìn)行監(jiān)控，以了解在不同并發(fā)用戶數(shù)下系統(tǒng)平臺(tái)的硬件資源使用情況。 企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司工具名稱說(shuō)明第三方測(cè)試工具LoadRunner壓力測(cè)試工具自行開(kāi)發(fā)的測(cè)試程序Tuxedo模擬Server模擬核心交易處理Web Service模擬Server模擬支付系統(tǒng)服務(wù)處

3、理Tuxedo模擬客戶端使用Tuxedo訪問(wèn)信息交換平臺(tái)測(cè)試工具測(cè)試工具除使用LoadRunner作為測(cè)試工具之外，還需要使用如下自己開(kāi)發(fā)的測(cè)試程序：企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司一：ESB性能簡(jiǎn)介二：ESB測(cè)試用例三：ESB部署調(diào)優(yōu)企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司系統(tǒng)間交互企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司SOAPWTCSOCKETWEBSERVICEFTPEMAILEJBT3HTTPTCPUDPTUXEDOMQJMSESB常用測(cè)試場(chǎng)景企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司標(biāo)準(zhǔn)XML到標(biāo)準(zhǔn)XML,不做報(bào)文格式校驗(yàn)測(cè)試出基準(zhǔn)值；請(qǐng)求端Soap協(xié)議，服務(wù)端WTC協(xié)議 George Jo

4、hn Reminder Dont forget the meeting! ESB測(cè)試場(chǎng)景一企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司標(biāo)準(zhǔn)XML到標(biāo)準(zhǔn)XML,不做報(bào)文格式校驗(yàn)測(cè)試標(biāo)準(zhǔn)XML到標(biāo)準(zhǔn)XML,做報(bào)文拆組包，做報(bào)文格式校驗(yàn)，正確的上送報(bào)文 George John Reminder Dont forget the meeting! ESB測(cè)試場(chǎng)景二 George John Reminder Dont forget the meeting! 企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司報(bào)文字段轉(zhuǎn)換MFLJAVA CALLXMLQUERY企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司交易碼交易碼180027服務(wù)碼服務(wù)

5、碼0500300040交易名稱交易名稱根據(jù)帳號(hào)查找客戶信息服務(wù)名稱服務(wù)名稱客戶信息查詢?cè)冀涌谠冀涌诜?wù)規(guī)范服務(wù)規(guī)范英文名稱英文名稱中文名稱中文名稱數(shù)據(jù)類型數(shù)據(jù)類型數(shù)據(jù)長(zhǎng)度數(shù)據(jù)長(zhǎng)度英文名稱英文名稱中文名稱中文名稱數(shù)據(jù)類型數(shù)據(jù)類型數(shù)據(jù)長(zhǎng)度數(shù)據(jù)長(zhǎng)度備注備注輸入輸入1AcctNo賬號(hào)、卡號(hào)CHAR32AcctNo賬號(hào)、卡號(hào)CHAR322FrntNo前置機(jī)編號(hào)CHAR8FrtSerNo前置機(jī)編號(hào)CHAR83TermSeq終端流水CHAR8TmnSeqNo前置流水CHAR84TermDate終端日期DATE10TmnTranDate前置日期DATE105TermTime終端時(shí)間CHAR6TmnTime

6、終端時(shí)間CHAR66TranCode交易代碼CHAR67Brc交易機(jī)構(gòu)代碼CHAR98Teller交易柜員代碼CHAR69ChannelId交易渠道CHAR210TranDate交易日期DATE1011TranTime交易時(shí)間CHAR612TermId終端號(hào)CHAR1513TermIp終端IPCHAR15輸出輸出1CustomName客戶名稱CHAR70CltName客戶名稱CHAR602CustomId客戶號(hào)CHAR21CltNo客戶號(hào)CHAR203IdType證件類型CHAR2CdtlType證件類型CHAR24IdNo證件號(hào)碼CHAR20CdtlNo證件號(hào)碼CHAR185CustomTy

7、pe客戶類別CHAR1CltType客戶類別CHAR16Sex性別CHAR1Sex性別CHAR17TranCode交易代碼CHAR68RspCode響應(yīng)代碼CHAR6企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司報(bào)文字段定義（原）企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司報(bào)文字段定義（標(biāo)）企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司報(bào)文字段轉(zhuǎn)換(: pragma bea:global-element-parameter parameter=$reqt1 element=ns0:reqt location=./XSD/S0200100003reqt.xsd :)(: pragma bea:global-element-

8、return element=msg location=./XSD/S801112VBSreqt.xsd :)declare namespace ns0 = http:/ namespace xf = /VBS/XQ/T0200100003reqt/;declare function xf:T0200100003reqt($reqt1 as element(ns0:reqt) as element(msg) for $TranCode in $reqt1/ns0:appHead/ns0:TranCode return data($TranCode) for $

9、FileFlag in $reqt1/ns0:extHead/ns0:FileFlag return data($FileFlag) 企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司報(bào)文字段轉(zhuǎn)換企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司報(bào)文字段轉(zhuǎn)換企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司標(biāo)準(zhǔn)XML到標(biāo)準(zhǔn)XML,做報(bào)文拆組包，做校驗(yàn)測(cè)試消費(fèi)方和請(qǐng)求方都通過(guò)WTC協(xié)議 George John Reminder Dont forget the meeting! ESB George John Reminder Dont forget the meeting! 測(cè)試場(chǎng)景三企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司W(wǎng)tc（webl

10、ogic tuxedo connection）連接是weblogic tuxedo的域間通信的連接，wtc是調(diào)用tuxedo服務(wù)的基礎(chǔ)。企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司測(cè)試標(biāo)準(zhǔn)XML到標(biāo)準(zhǔn)XML,做報(bào)文拆組包，做報(bào)文格式校驗(yàn)消費(fèi)方和請(qǐng)求方都通過(guò)Soap協(xié)議提供方返回ESB消費(fèi)方請(qǐng)求測(cè)試場(chǎng)景四企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司AbstractSOAP 1.2為在一個(gè)松散的、分布的環(huán)境中使用XML對(duì)等地交換結(jié)構(gòu)化的和類型化的信息提供了一個(gè)簡(jiǎn)單且輕量級(jí)的機(jī)制。這是一個(gè)基于XML的協(xié)議，同時(shí)它由四部分組成: 一個(gè)作為描述在消息中的內(nèi)容以及如何處理消息的信息框架的信封(envelope)，一組用于

11、表示應(yīng)用定義的數(shù)據(jù)類型的編碼規(guī)則(encoding rules)，一個(gè)用于表示遠(yuǎn)程過(guò)程調(diào)用和返回的約定以及一個(gè)使用底層協(xié)議進(jìn)行消息交換的綁定(binding)約定。潛在地，SOAP可以與很多其他的協(xié)議綁定使用；不過(guò)，在本文檔中，只定義了SOAP與HTTP已經(jīng)SOAP與HTTP Extension Framework的綁定。Simple Object Access Protocol企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司SOAP的這項(xiàng)能力使得它可被很多類型的系統(tǒng)用于從消息系統(tǒng)到RPC(Remote Procedure Call)的延伸。SOAP由四部分組成:SOAP envelop (SOAP信封)

12、，它構(gòu)造定義了一個(gè)整體的表示框架，可用于表示在消息(message)中的是什么是什么，誰(shuí)誰(shuí)應(yīng)當(dāng)處理它，以及這是可選可選的 還是強(qiáng)制強(qiáng)制的。SOAP encoding rules (SOAP編碼規(guī)則)，定義了一個(gè)編序機(jī)制用于交換應(yīng)用程序定義的數(shù)據(jù)類型的實(shí)例。SOAP RPC representation (SOAP RPC表示)，定義了一個(gè)用于表示遠(yuǎn)端過(guò)程調(diào)用和響應(yīng)的約定。SOAP binding (SOAP綁定) 定義了一個(gè)使用底層傳輸協(xié)議來(lái)完成在結(jié)點(diǎn)間交換SOAP信封的約定。企業(yè)服務(wù)總線性能測(cè)試標(biāo)準(zhǔn)XML到非標(biāo)準(zhǔn)XML，做報(bào)文拆組包和格式校驗(yàn)，不做字段映射消費(fèi)方使用Soap協(xié)議，服務(wù)方使用W

13、TC協(xié)議00000493165017RS0 tp165017 TLS824柜員密碼不符09410阿麗亞烏斯曼檢查柜員密碼ESB消費(fèi)方請(qǐng)求測(cè)試場(chǎng)景五天津聯(lián)怡科技有限公司企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司企業(yè)服務(wù)總線性能測(cè)試標(biāo)準(zhǔn)XML到非標(biāo)準(zhǔn)XML，做報(bào)文拆組包和格式校驗(yàn)，做字段映射消費(fèi)方使用Soap協(xié)議，服務(wù)方使用WTC協(xié)議00000493165017RS0 tp165017 TLS824柜員密碼不符09410阿麗亞烏斯曼檢查柜員密碼ESB消費(fèi)方請(qǐng)求測(cè)試場(chǎng)景六天津聯(lián)怡科技有限公司企業(yè)服務(wù)總線性能6的場(chǎng)景下增加Report跟蹤消費(fèi)方使用Soap協(xié)議，服務(wù)方使用WTC協(xié)議0000049316501

14、7RS0 tp165017 TLS824柜員密碼不符09410阿麗亞烏斯曼檢查柜員密碼ESB消費(fèi)方請(qǐng)求測(cè)試場(chǎng)景七天津聯(lián)怡科技有限公司REPORTJMS SERVERFILE STOREDATABASEMONITOR企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司企業(yè)服務(wù)總線性能組合交易測(cè)試 一個(gè)上送報(bào)文中通過(guò)信息交換平臺(tái)分別調(diào)用兩個(gè)系統(tǒng)的服務(wù),系統(tǒng)中需要添加邏輯判斷和路由消費(fèi)方使用Soap上送標(biāo)準(zhǔn)報(bào)文，通過(guò)WTC和SOAP分別調(diào)用不同服務(wù)系統(tǒng)的服務(wù)，至少包含三個(gè)調(diào)用，可考慮沖正交易。00000493165017RS0 tp165017 TLS824柜員密碼不符09410

15、阿麗亞烏斯曼檢查柜員密碼CombinationESB消費(fèi)方請(qǐng)求測(cè)試場(chǎng)景八天津聯(lián)怡科技有限公司 George John Reminder Dont forget the meeting! 企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司企業(yè)服務(wù)總線性能組合交易測(cè)試 一個(gè)上送報(bào)文中通過(guò)信息交換平臺(tái)分別調(diào)用兩個(gè)系統(tǒng)的服務(wù),系統(tǒng)中需要添加邏輯判斷和路由消費(fèi)方使用Soap上送標(biāo)準(zhǔn)報(bào)文，通過(guò)WTC和SOAP分別調(diào)用不同服務(wù)系統(tǒng)的服務(wù)，至少包含三個(gè)調(diào)用，可考慮沖正交易。00000493165017RS0 tp165017 TLS824柜員密碼不符09410阿麗亞烏斯曼檢查柜員密碼CombinationESB消費(fèi)方請(qǐng)求測(cè)

16、試場(chǎng)景八天津聯(lián)怡科技有限公司 George John Reminder Dont forget the meeting! 企業(yè)服務(wù)總線性能交易分發(fā)功能測(cè)試，一個(gè)上送報(bào)文到達(dá)交換平臺(tái)，交換平臺(tái)同時(shí)發(fā)送報(bào)文到多個(gè)系統(tǒng)。交易處理過(guò)程中，需要消息通知，給多個(gè)業(yè)務(wù)系統(tǒng)發(fā)送通知報(bào)文。00000493165017RS0 tp165017 TLS824柜員密碼不符09410阿麗亞烏斯曼檢查柜員密碼ESB消費(fèi)方請(qǐng)求測(cè)試場(chǎng)景九天津聯(lián)怡科技有限公司 George John Reminder Dont forget the meeting! George John Reminder Dont forget the m

17、eeting! Radio broadcast企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司一：ESB性能簡(jiǎn)介二：ESB測(cè)試用例三：ESB部署調(diào)優(yōu)企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司通過(guò)Workmanager進(jìn)行流量控制我們假設(shè)有轉(zhuǎn)賬交易A和查詢交易B，我們希望在遇到ESB繁忙的時(shí)候A能夠得到優(yōu)先處理，而當(dāng)系統(tǒng)不繁忙的時(shí)候A和B都能夠盡可能的得到處理。為了能夠比較容易的看到效果，我們讓A，B交易的處理過(guò)程完全相同，這樣便于看到因?yàn)檎?qǐng)求數(shù)量變化所帶來(lái)的影響。當(dāng)沒(méi)有流量控制時(shí)：如果讓A，B的初始請(qǐng)求數(shù)量完全1：1，可以看到AB交易的處理能力和響應(yīng)時(shí)間的曲線是基本重疊的，并

18、且隨著達(dá)到系統(tǒng)處理能力的上限，響應(yīng)時(shí)間會(huì)隨并發(fā)請(qǐng)求數(shù)量的增長(zhǎng)而增長(zhǎng)。企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司通過(guò)Workmanager進(jìn)行流量控制如果這個(gè)時(shí)候增加低優(yōu)先的B交易的并發(fā)數(shù)量，B的TPS會(huì)上升，高優(yōu)先的A會(huì)下降，同時(shí)響應(yīng)時(shí)間會(huì)增長(zhǎng)，這并不符合高優(yōu)先的控制原則。企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司Oracle在測(cè)試中使用的流量控制機(jī)制可以達(dá)到如下的效果：如果只有低優(yōu)先的業(yè)務(wù)，系統(tǒng)可以使用全部的資源進(jìn)行處理，當(dāng)出現(xiàn)高優(yōu)先的業(yè)務(wù)時(shí)，按照比例讓位給高優(yōu)先業(yè)務(wù)。企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司如果高低優(yōu)先的業(yè)務(wù)同時(shí)在ESB上處理，并且并發(fā)數(shù)量相同，OSB可以直接控制高優(yōu)先的處理多，低優(yōu)先的處

19、理少。傳統(tǒng)廠商的產(chǎn)品中也可以設(shè)置處理的優(yōu)先級(jí)，但以消息優(yōu)先級(jí)居多，通過(guò)控制消息的處理頻率和密度，間接實(shí)現(xiàn)對(duì)處理資源的使用。Oracle除了設(shè)置消息的優(yōu)先級(jí)之外，更重要的是可以調(diào)控不同級(jí)別的請(qǐng)求在ESB上所占用CPU的時(shí)間開(kāi)銷(xiāo)比例，真正實(shí)現(xiàn)了處理資源上的分配和管理。企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司流量控制實(shí)現(xiàn)機(jī)制流量控制實(shí)現(xiàn)機(jī)制企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司LocalProxy調(diào)用時(shí)會(huì)使用前面ProxyService的線程模型繼續(xù)執(zhí)行，因此前面ProxyService上的Dispatch Policy會(huì)一直作用到LocalProxy的處理過(guò)程之中。Business Service會(huì)使用

20、新的線程去執(zhí)行，因此如果在Pipeline中routing到了其他的非LocalProxy，前端的流量控制就到此結(jié)束了。Business Service如果是JMS等異步的方式，Biz上的流量控制效果會(huì)差一些，因?yàn)楸旧淼奶幚磉^(guò)程太短，消息實(shí)際上都被堆在了隊(duì)列里。Oracle的OSB產(chǎn)品在前端接入和后端調(diào)用業(yè)務(wù)系統(tǒng)兩個(gè)層面提供流量控制的能力，在配置前端接入的ProxyService和后端業(yè)務(wù)系統(tǒng)調(diào)用的BusinessService時(shí)可以指定相應(yīng)的DispatchPolicy實(shí)現(xiàn)流量控制。企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司ProxyService中的流量控制策略企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公

21、司BusinessService中的流量控制策略企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司OSB底層通過(guò)使用WebLogic中的workmanager為流量控制提供最大并行執(zhí)行數(shù)量、最大排隊(duì)等待的請(qǐng)求數(shù)量、以及在所有請(qǐng)求超過(guò)系統(tǒng)處理能力的情況下按比例分配OSB的執(zhí)行資源。企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司基于消息隊(duì)列的聯(lián)邦基于消息隊(duì)列的聯(lián)邦基于消息隊(duì)列的聯(lián)邦，是通過(guò)消息隊(duì)列異步的可靠傳輸和高吞吐，實(shí)現(xiàn)ESB處理過(guò)程與數(shù)據(jù)傳輸相分離，以減少處理資源在長(zhǎng)時(shí)間傳輸上的等待。但是因?yàn)橄㈥?duì)列所具有的單向傳輸特性，因此一個(gè)同步調(diào)用過(guò)程需

22、要有請(qǐng)求和響應(yīng)的兩個(gè)隊(duì)列才能完成處理，并且需要ESB根據(jù)消息中的關(guān)鍵字進(jìn)行返回結(jié)果的匹配。因此對(duì)于雙向調(diào)用的系統(tǒng)需要建立至少4個(gè)消息隊(duì)列。使用JMS或MQ建立聯(lián)邦通道，除了需要在OSB上配置Business Service和ProxyService之外，還需要單獨(dú)建立JMS的消息隊(duì)列和配置每一組MQ的通訊連接。企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司企業(yè)級(jí)范圍的服務(wù)網(wǎng)絡(luò)OSB 1Domain AOSB 2Domain BOSB 3Domain C跨越多個(gè)SOA域的復(fù)合應(yīng)用在多個(gè)ESB實(shí)例見(jiàn)使用JMS/SAF和 WS-RM 進(jìn)行服務(wù)中介和路由跨服務(wù)網(wǎng)絡(luò)，確保一致的安全、策略和從整個(gè)服務(wù)網(wǎng)絡(luò)重用資產(chǎn)構(gòu)建可跨域邊界運(yùn)行的復(fù)合應(yīng)用，以提供更高價(jià)值企業(yè)服務(wù)總線性能天津聯(lián)怡科技有限公司JMS/MQJMS是OSB產(chǎn)品的內(nèi)置通訊協(xié)議，可用于XML、文本或二進(jìn)制任意一種格式報(bào)文的傳輸，使用JMS可以實(shí)現(xiàn)異步或同異步匹配的消息傳輸。在導(dǎo)入MQ的支持包后，OSB同時(shí)也支持基于IBM MQ作為異步傳輸通道。隊(duì)列方式的優(yōu)勢(shì)：可以進(jìn)行報(bào)文的持久化，在OSB服務(wù)器宕機(jī)后依然可以保證消息可被處理由服務(wù)提供方根據(jù)自己的處理能力主動(dòng)獲取消息可以提供單向無(wú)返回的報(bào)文傳輸 隊(duì)列方式的不足：為了實(shí)現(xiàn)兩個(gè)聯(lián)邦節(jié)點(diǎn)的雙向調(diào)用，需要配置2對(duì)InQ和OutQ的隊(duì)列集群。大規(guī)模集群情況下，需要維護(hù)和監(jiān)控大量的隊(duì)列。