性能測試計劃

1、Box4.0 Performance Test Information Technologies, IncHang zhou, ChinaBox4.0性能測試計劃1 修訂記錄修訂日期版本號描述擬制審核2009.3.9目錄1修訂記錄22概述42.1概述43測試環(huán)境和依賴53.1環(huán)境總體描述53.2軟硬件環(huán)境53.3測試環(huán)境拓?fù)鋱D53.4測試資源需求63.5測試工具及說明64測試范圍74.1性能測試需求74.2性能測試用例7Client 性能7InfoSrv常規(guī)性能71 InfoSrv Capacity8瞬間峰值測試8Controller 性能測試8穩(wěn)定性測試8Server failover95測

2、試結(jié)果及分析106總結(jié)116.1性能概述116.2Bug list116.3是否可以發(fā)布112 概述2.1 概述本次針對Box4.0進行了完整的性能測試，包含部分有：l Client性能l Infoserver常規(guī)性能l 1Infoserver Capacity，瞬間峰值l Controller性能，穩(wěn)定性，Server failover。3 測試環(huán)境和依賴3.1 環(huán)境總體描述要求獨立的千兆網(wǎng)絡(luò)環(huán)境來作server的性能測試。3.2 軟硬件環(huán)境設(shè)備硬件配置軟件配置InfoServer1服務(wù)器CPU: xeon 5110 1.6G*2 ;MEM:2G; NET:1000M網(wǎng)絡(luò)Linux 2.6.

3、16.29-xenU-hosting-3.0.0;Infoserver 2.0.2; InfoServer2服務(wù)器CPU: xeon 5110 1.6G*2 ;MEM:2G; NET:1000M網(wǎng)絡(luò)Linux 2.6.16.29-xenU-hosting-3.0.0;Infoserver 2.0.2; gc服務(wù)器CPU: xeon 5110 1.6G*2 ;MEM:256M; NET:1000M網(wǎng)絡(luò)Linux 2.6.16.29-xenU-hosting-3.0.0;Gc 2.0.2; TCS服務(wù)器?說明Infoserver1服務(wù)器,Infoserver2服務(wù)器,gc服務(wù)器為物理機3.3 測試

4、環(huán)境拓?fù)鋱D 性能測試拓?fù)鋱D：ControllerInfoServer千兆交換機Client1Client2.Client N3.4 測試資源需求Server: 服務(wù)器配置物理機三臺Client: 6 臺Switch: 1Gbps Uplink3.5 測試工具及說明本次測試主要使用的工具 sessPFTest 是由開發(fā)寫的針對于Box4.0性能測試工具優(yōu)化后的工具修改者新增功能說明sessPFTestKin基本功能AS,DS,AV的模擬實現(xiàn)John針對新版本重新調(diào)試，修改調(diào)用功能增加session join/leave response time 的接口Rongxia?其他測試工具：Top, S

5、ar, Ethereal and OnlineEye4 測試范圍4.1 性能測試需求l 優(yōu)化測試工具， 規(guī)范測試數(shù)據(jù)， 建立測試基準(zhǔn)，和conference比較。l Client性能測試l Infoserver常規(guī)性能測試l Infoserver Capacity測試l 瞬間峰值測試l Controller性能測試l 穩(wěn)定性測試l Server failover測試4.2 性能測試用例4.2.1 Client 性能Case1: 語音 - 參考以前的測試標(biāo)準(zhǔn)再測試一次,增加考慮窄帶語音，高清晰語音。Case2: 視頻 增加對CBR/VBR的考慮，增加對分層編碼的考慮，增加對UDP 的考慮. 4.

6、2.2 InfoSrv常規(guī)性能注意：默認(rèn)Video UDP/CBR, Audio UDP，清晰語音(30kbps左右) .Case1 一個真實會議，1路Video, 2 路audio, Docshare+ AS, 模擬用戶400人左右, 一臺InfoSrv,持續(xù)2 小時；Case2 一個真實會議，1路Video, 2 路audio, MP+H323用戶接入, 模擬用戶400人左右, 一臺InfoSrv,持續(xù)2 小時；Case3 一個真實會議，1路Video, 2 路audio, 模擬用戶400人左右, 200 旁聽用戶，一臺InfoSrv,持續(xù)2 小時；Case4 一個真實會議，4路Video

7、(UDP/CBR), 3 路audio(UDP),模擬用戶300人左右,一臺InfoSrv, 持續(xù)2 小時； Case5 一個真實會議，4路Video(TCP/CBR), 3 路audio(UDP),模擬用戶300人左右,一臺InfoSrv, 持續(xù)2 小時； Case6 一個真實會議，4路Video(TCP/VBR), 3 路audio(UDP),模擬用戶300人左右,一臺InfoSrv, 持續(xù)2 小時； Case7 一個真實會議，4路Video(UDP/VBR), 3 路audio(UDP),模擬用戶300人左右,一臺InfoSrv, 持續(xù)2 小時； Case8 一個真實會議，4路Video

8、(UDP/CBR), 3 路audio(TCP),模擬用戶300人左右,一臺InfoSrv, 持續(xù)2 小時； Case9 一個真實會議，4路Video(UDP/CBR), 3 路audio(TCP/窄帶語音),模擬用戶300人左右,一臺InfoSrv, 持續(xù)2 小時；Case10 一個真實會議，4路Video(UDP/CBR), 3 路audio(TCP/高清晰語音),模擬用戶300人左右,一臺InfoSrv, 持續(xù)2 小時；Case11 一個真實會議，10路Video, 10路audio,模擬用戶300人左右, 一臺InfoSrv, 持續(xù)2-4 小時；Case12 10個模擬會議，每會議 2

9、路Video, 4 路audio,模擬client400人左右,一臺InfoSrv, 持續(xù)2小時；Case13 30個模擬會議，每會議 2路Video, 4 路audio,模擬client400人左右,一臺InfoSrv, 持續(xù)2小時； Case14 40個模擬會議，每會議 2路Video, 4 路audio,模擬client600人左右,兩臺InfoSrv, 持續(xù)2小時； Case15一個真實會議，下掛三級Infoserver, 4 Video, 3路Audio, 模擬client1000人左右, 持續(xù)2小時。 l 單會議真實客戶發(fā)送數(shù)據(jù)，模擬用戶接收數(shù)據(jù), 視頻質(zhì)量選擇缺省的4 級.? 根

10、據(jù)我們新的缺省值，需要修改模擬視頻數(shù)據(jù)，和模擬音頻數(shù)據(jù)。l 真實用戶和模擬用戶按比例依次加入,比如一個真實用戶, 80 個模擬用戶, 再加一個真實用戶,再模擬用戶.l 多會議全部用模擬用戶,取Video - 110kbps, Audio - 15kbps 進行測試.?4.2.3 1 InfoSrv CapacityCase1 真實會議, Audio 1Send , 30kbps Case2 真實會議, Audio 3Send , 30kbps Case3 真實會議, Audio 1Send, Video 1Send, 110kbps ?Case4 真實會議, Audio 1Send, Vide

11、o 16Send, 110kbps ?Case5 真實會議,Video 4Send, Audio 3 Send, 其他模擬用戶加入, 模擬用戶只接收 Case6 真實會議,Video 1Send, Audio 1 Send, 其他都是旁聽模擬用戶加入4.2.4 瞬間峰值測試Case1 真實會議,1AV. 已有100 attendee, 100 attendee并發(fā)登陸，紀(jì)錄平均登陸響應(yīng)時間.Case2 真實會議,1AV. 已有200 attendee, 100 attendee并發(fā)退出4.2.5 Controller 性能測試Case1模擬并發(fā)2000用戶, 持續(xù)4小時。 4.2.6 穩(wěn)定性測

12、試Case1不斷開關(guān)會議同時進行以下3個case，持續(xù)7×24小時以上，記錄CPU、mem信息l case1. 2個摸似會議, 每會議16人,發(fā)送16路視頻和4路音頻,開啟會議60秒后全部退了,等30秒后重新加入,反復(fù)進行l(wèi) case2. 2個模擬會議，每個會議50人，不發(fā)送音視頻，開啟會議60秒后全部退了，等30秒后重新加入，反復(fù)進行l(wèi) case3. 一個真實會議，加入100個虛擬用戶一直開著 4.2.7 Server failoverCase1 一個真實會議， 兩個用戶端發(fā)送(1Video, 2 Audio)， 500 模擬attendee. 2 臺InfoSrv A, B . 該會議全部開A上。A down 后， B 全部接管。 Case2 一個真實會議， 兩個用戶端發(fā)送(1Video, 2 Audio)， 500 模擬attendee. 4 臺InfoSrv A1/A2, B, C 級連. 100人在A1上，200人在B上，200人在C上。A1 down 后， A2 全部接管。