智能家居主機(jī)軟件測試報(bào)告

TSHome智能家居主機(jī)軟件測試報(bào)告文件編號(hào)保密級(jí)別總頁數(shù)編制

變更日志編號(hào)版本修改內(nèi)容修改人修改日期1V1.0初稿

目錄1 測試內(nèi)容 測試內(nèi)容1.1測試概要1.1.1測試概述本文是針對(duì)TSHome智能家居主機(jī)軟件的測試階段的測試總結(jié)，針對(duì)測試狀況進(jìn)行分析匯總。經(jīng)過6個(gè)版本測試，目前已測部分的功能穩(wěn)定，主機(jī)還有功能沒有覆蓋測試到，待終端項(xiàng)目完成后補(bǔ)充測試，直至測試覆蓋率為100%。1.1.2人力資源版本人力資源工作期間TSHomeHOST1.02013-4-15~2013-5-151.1.3環(huán)境描述軟件配置：資源描述數(shù)量操作系統(tǒng)Linux系統(tǒng)1數(shù)據(jù)庫Sqlite311.1.4測試時(shí)間起始時(shí)間結(jié)束時(shí)間版本號(hào)BUG總數(shù)2013-4-152013-5-15TSHomeHOST1.057主要結(jié)論和關(guān)鍵風(fēng)險(xiǎn)2.1測試結(jié)論在測試階段，主機(jī)部分有需要終端、服務(wù)器、主機(jī)的聯(lián)調(diào)、控制，目前終端尚未開發(fā)完成，該報(bào)告針對(duì)主機(jī)可測試的功能點(diǎn)的總結(jié)。遺留的未測試到的功能點(diǎn)，需要等到終端開發(fā)完成后，再進(jìn)行測試。已測試的主機(jī)功能包括：主機(jī)和server之間通信模塊：登錄功能；注銷功能；心跳功能；下載配置信息功能；斷開外網(wǎng)服務(wù)功能；主機(jī)和終端之間通信模塊：登錄功能；主機(jī)上其他模塊：UI界面操作功能；配置設(shè)備和網(wǎng)關(guān)功能；控制程序開關(guān)功能；提供P2P穿墻功能；提供主機(jī)停止外網(wǎng)服務(wù)功能；提供配置文件的導(dǎo)入功能；測試執(zhí)行情況可參見：48:3000/projects/tshome-host/issues48:8080/testlink/index.php；2.2關(guān)鍵風(fēng)險(xiǎn)目前測試中只是在廠內(nèi)有限的環(huán)境和條件下進(jìn)行，沒有能模擬現(xiàn)場復(fù)雜的情形，待現(xiàn)場應(yīng)用時(shí)再進(jìn)行跟蹤。

測試對(duì)象質(zhì)量評(píng)估3.1測試執(zhí)行過程統(tǒng)計(jì)一級(jí)功能模塊二級(jí)功能模塊需求名稱主機(jī)與server之間的通信模塊主機(jī)登錄server建立P2P連接主機(jī)索要公鑰服務(wù)器返回公鑰主機(jī)傳送對(duì)稱密鑰服務(wù)器返回sessionID主機(jī)登錄服務(wù)器返回登錄結(jié)果00成功，01用戶名密碼錯(cuò)誤，02用戶已登錄主機(jī)注銷server主機(jī)發(fā)送注銷申請(qǐng)服務(wù)器返回注銷結(jié)果主機(jī)下載配置信息發(fā)送更新時(shí)間發(fā)送不更新標(biāo)識(shí)更新表內(nèi)容更新標(biāo)結(jié)構(gòu)Server控制主機(jī)斷開外網(wǎng)連接功能主機(jī)返回結(jié)果，00停止成功，01錯(cuò)誤加密模塊對(duì)稱加密算法模塊；使用對(duì)稱密鑰加解密使用非對(duì)稱密鑰加解密主機(jī)與終端之間的通信模塊終端登錄主機(jī)終端登錄主機(jī)認(rèn)證信息加解密終端注銷登錄終端注銷與主機(jī)連接認(rèn)證信息加解密終端通過主機(jī)控制家居設(shè)備主機(jī)接受處理解密終端發(fā)送的控制設(shè)備命令照明系統(tǒng)（KNX協(xié)議）窗簾系統(tǒng)（KNX協(xié)議）暖通空調(diào)系統(tǒng)（KNX協(xié)議）安防系統(tǒng)（KNX協(xié)議）庭院系統(tǒng)（KNX協(xié)議）背景音樂（串口）投影儀（串口）家庭影院（紅外）斷開外網(wǎng)功能主機(jī)接受處理終端斷開外網(wǎng)鏈接請(qǐng)求命令加解密切換內(nèi)外網(wǎng)功能內(nèi)外網(wǎng)切換外網(wǎng)控制命令加解密家居子系統(tǒng)控制模塊與KNX網(wǎng)關(guān)通信功能照明系統(tǒng)窗簾系統(tǒng)暖通空調(diào)系統(tǒng)安防系統(tǒng)庭院系統(tǒng)連接自動(dòng)檢測和重連功能與WIFI網(wǎng)關(guān)通信功能背景音樂系統(tǒng)投影儀家庭影院系統(tǒng)連接自動(dòng)檢測和重連串口通信功能背景音樂系統(tǒng)投影儀設(shè)備其他類似的串口家居設(shè)備支持動(dòng)態(tài)擴(kuò)充協(xié)議，以支持新的設(shè)備紅外通信功能紅外學(xué)習(xí)功能控制紅外設(shè)備場景控制功能配置多系統(tǒng)場景配置定時(shí)場景其他模塊UI界面操作功能配置硬件端口信息配置主機(jī)IP地址信息；配置程序端口信息；配置程序啟動(dòng)、關(guān)閉、重啟；配置主機(jī)用戶信息；提供導(dǎo)入設(shè)備配置信息功能；配置設(shè)備和網(wǎng)關(guān)信息功能配置網(wǎng)關(guān)與各網(wǎng)口的配對(duì)信息控制程序開關(guān)功能啟動(dòng)程序關(guān)閉程序重啟程序P2P穿墻功能提供P2P穿墻與外網(wǎng)終端鏈接主機(jī)停止外網(wǎng)服務(wù)功能主機(jī)停止與外網(wǎng)鏈接配置文件導(dǎo)入功能導(dǎo)入配置文件用戶信息管理功能admin用戶登錄admin用戶注銷3.2測試執(zhí)行統(tǒng)計(jì)數(shù)據(jù)版本名稱工作量投入（人天）測試用例規(guī)模用例執(zhí)行發(fā)現(xiàn)缺陷數(shù)代碼規(guī)?？傆美龜?shù)新增用例數(shù)手工執(zhí)行自動(dòng)執(zhí)行移植代碼行數(shù)非移植代碼行數(shù)TSHomeHOST0.114014030TSHomeHOST0.214014013TSHomeHOST0.31401407TSHomeHOST0.41401402TSHomeHOST0.51401403TSHomeHOST0.614014023.3測試用例執(zhí)行結(jié)果統(tǒng)計(jì)數(shù)據(jù)統(tǒng)計(jì)總用例數(shù)主機(jī)與severer間通信主機(jī)與終端間通信主機(jī)其他模塊實(shí)際測試用例14098735總數(shù)14098735成功用例數(shù)8669710失敗用例數(shù)5429025未執(zhí)行用例數(shù)0000測試用例設(shè)計(jì)以詳細(xì)設(shè)計(jì)說明書作為輸入，共設(shè)計(jì)用例140個(gè)。用例覆蓋了系統(tǒng)設(shè)計(jì)規(guī)格書中的所有新增需求點(diǎn)，測試用例覆蓋率為100％。

測試對(duì)象質(zhì)量評(píng)估4.1缺陷統(tǒng)計(jì)1、以版本日期為單位的缺陷統(tǒng)計(jì)版本號(hào)致命嚴(yán)重一般提示總計(jì)TSHomeHOST0.10610030TSHomeHOST0.2236013TSHomeHOST0.312407TSHomeHOST0.402402TSHomeHOST0.515513TSHomeHOST0.613102總計(jì)521301572、以特性為單位的缺陷統(tǒng)計(jì)模塊/特性致命嚴(yán)重一般提示總計(jì)主機(jī)與server通信31212012主機(jī)與終端通信00000主機(jī)其他模塊2918130總計(jì)521301574.2缺陷分析4.2.1質(zhì)量評(píng)價(jià)結(jié)果從缺陷統(tǒng)計(jì)數(shù)據(jù)可以看出，問題主要集中在主機(jī)程序和主機(jī)的其他模塊上，目前有4個(gè)問題遺留。4.3性能評(píng)估序號(hào)測試版本網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)是否同一NAT測試結(jié)果主機(jī)終端主機(jī)終端10.4版本project-term電信外網(wǎng)電信外網(wǎng)是打洞20次，成功20次成功率100%20.4版本project-inne電信內(nèi)網(wǎng)電信內(nèi)網(wǎng)是打洞20次，成功20次成功率100%30.4版本project-innerproject-term電信外網(wǎng)電信內(nèi)外網(wǎng)是內(nèi)外網(wǎng)同時(shí)打洞30次，成功30次成功率100%40.5版本project-term電信外網(wǎng)聯(lián)通3G否打洞60次，成功24次，失敗6次，終端未發(fā)送SDP消息30次。成功率40%（終端存在問題）50.5版本project-term聯(lián)通3G電信外網(wǎng)否打洞30次，成功27次成功率90%60.5版本project-term電信寬帶電信3G否打洞30次，成功24次，失敗6次成功率80%其中打洞成功的是24次中，有12次主機(jī)顯示了報(bào)文錯(cuò)誤。4.4性能評(píng)價(jià)通過采用不同的網(wǎng)段進(jìn)行測試，打洞成功率>80%，滿足業(yè)界要求。

附件5.1附件1：遺留問題報(bào)告遺留問題統(tǒng)計(jì)表問題總數(shù)致命問題嚴(yán)重問題一般問題建議問題其他統(tǒng)計(jì)項(xiàng)軟件400040

5.2遺留問題列表5.2.2建議問題列表問題單號(hào)1012問題簡述主機(jī)：主機(jī)是聯(lián)通3G網(wǎng)絡(luò)，終端是電信，登錄時(shí)主機(jī)報(bào)錯(cuò)問題描述主機(jī)：主機(jī)是聯(lián)通3G網(wǎng)絡(luò)，終端是電信，登錄時(shí)主機(jī)報(bào)錯(cuò)問題級(jí)別一般（偶然性出現(xiàn)）問題分析與對(duì)策重現(xiàn)幾率小，待可以多次重現(xiàn)后解決規(guī)避措施后續(xù)階段觀察備注問題單號(hào)1131問題簡述主機(jī)：0.6版本更新配置，內(nèi)存崩潰問題描述主機(jī)：0.6版本更新配置，內(nèi)存崩潰

在服務(wù)器端修改配置文件，增加某表的數(shù)據(jù)，其中id全都一致。大概有20000行的數(shù)據(jù)問題級(jí)別一般（偶然性出現(xiàn)）問題分析與對(duì)策1.該問題是給的配置文件的問題，將t_camera中的一條記錄生成了兩遍2.這種問題下，sqlite3庫沒有任何報(bào)錯(cuò)，而這顯然不符合我們的需求，這是sqlite3庫的bug；

3.可以有辦法進(jìn)行規(guī)避，就是獲取create中的字段數(shù)，和insert中的字段數(shù)進(jìn)行比較，但這種操作影響效率。

4.故決定，此問題暫停處理。首先要保證server給的數(shù)據(jù)正確，這樣這種bug不會(huì)出現(xiàn)。規(guī)避措施待后續(xù)階段觀察備注問題單號(hào)1089問題簡述主機(jī)：0.5版本終端打洞過程中，主機(jī)崩潰問題描述這次使用的主機(jī)再電信，終端是聯(lián)通3G，多次重復(fù)登錄后主機(jī)崩潰問題級(jí)別一般（偶然性）問題分析與對(duì)策該問題需要重現(xiàn)，請(qǐng)盡可能模擬重現(xiàn)的場景規(guī)避措施待后續(xù)階段觀察備注問題單號(hào)1125問