軟件系統(tǒng)測試大綱.doc

軟件系統(tǒng)測試大綱1范圍本標(biāo)準(zhǔn)規(guī)定了軟件系統(tǒng)的整體測試方案，圍繞APP、云服務(wù)平臺(tái)及嵌入式系統(tǒng)而展開的一些列測試與驗(yàn)證活動(dòng)，使用產(chǎn)品不局限于智能家居部所研發(fā)的智能單品。2 測試目的通過測試驗(yàn)證該軟件系統(tǒng)是否達(dá)到設(shè)計(jì)指標(biāo)，判斷軟件產(chǎn)品質(zhì)量是否符合產(chǎn)品需求、功能實(shí)現(xiàn)是否正確、性能和安全性方面是否符合發(fā)布標(biāo)準(zhǔn)、用戶體驗(yàn)方式是否符合用戶習(xí)慣。3測試環(huán)境3.1軟件環(huán)境云平臺(tái)：搭建在阿里云端的平臺(tái)支撐系統(tǒng)(含數(shù)據(jù)庫、應(yīng)用程序及算法等，依服務(wù)器配置要求為準(zhǔn))移動(dòng)端應(yīng)用軟件：APP軟件(含IOS版與安卓版)3.2硬件產(chǎn)品產(chǎn)品1、產(chǎn)品2、產(chǎn)品33.3用戶環(huán)境模擬用戶環(huán)境:智能家居辦公區(qū)(覆蓋用研室、軟測實(shí)驗(yàn)室、硬件試驗(yàn)室及辦公區(qū)區(qū)域)實(shí)際用戶環(huán)境:一居室(面積小于70m)、二居室(70m100m)、三居室(100m130m)及復(fù)式房(面積不定)等4測試方法使用依產(chǎn)品需求文檔、軟件規(guī)格文檔及用戶環(huán)境為基礎(chǔ)構(gòu)造的測試用例來驗(yàn)證測試和數(shù)據(jù)。5測試項(xiàng)目5.1功能測試所有需求文檔、軟件技術(shù)規(guī)格書描述與硬件產(chǎn)品功能規(guī)格書描述的功能均實(shí)現(xiàn)正確。此部分依據(jù)對(duì)應(yīng)公牛智家APP及產(chǎn)品的測試用例執(zhí)行。功能點(diǎn)不限于:基本功能模塊、通信模塊、計(jì)量模塊、應(yīng)用程序的界面模塊、易用性模塊、兼容性、安裝與卸載程序、接口測試模塊等，具體測試功能點(diǎn)視產(chǎn)品需求、軟件功能或硬件功能而定。5.2性能測試重點(diǎn)業(yè)務(wù)功能、性能能滿足上線運(yùn)營要求。具體測試方法與測試功能點(diǎn)視產(chǎn)品而定。5.3安全性測試接口和數(shù)據(jù)調(diào)用等方面符合國家性、行業(yè)性規(guī)范；沒有安全性漏洞。具體測試方法與測試功能視產(chǎn)品而定。5.4用戶體驗(yàn)測試(可選)該部分測試內(nèi)容包含功能測試模塊中的易用性測試及用戶研究部門提供的體驗(yàn)性測試。5.5穩(wěn)定性測試模擬環(huán)境下完整系統(tǒng)的穩(wěn)定性測試及實(shí)際用戶環(huán)境下的系統(tǒng)完整性測試。測試內(nèi)容不局限于網(wǎng)關(guān)配網(wǎng)、設(shè)備入網(wǎng)、設(shè)備開啟與關(guān)閉、多設(shè)備聯(lián)動(dòng)控制、設(shè)備響應(yīng)等。66.1需求分析與評(píng)審熟悉產(chǎn)品需求，主要包含如下幾點(diǎn)：1.理解產(chǎn)品需求，并做好確認(rèn)和記錄(不限于產(chǎn)品文檔、設(shè)計(jì)文檔、開發(fā)文檔、評(píng)審記錄、UI原型圖等)2.明確測試需求，評(píng)估工作量3.關(guān)注產(chǎn)品并了解開發(fā)團(tuán)隊(duì)的開發(fā)難點(diǎn)4.關(guān)注需求變更，及時(shí)更新測試用例6.2測試計(jì)劃與策略測試計(jì)劃：根據(jù)測試需求和排期，制定測試計(jì)劃，劃分測試時(shí)間點(diǎn)等。測試策略：明確測試范圍、測試類型、測試優(yōu)先級(jí)。并根據(jù)項(xiàng)目研發(fā)實(shí)際情況，及時(shí)調(diào)整修改測試計(jì)劃或策略，保證測試節(jié)奏與進(jìn)度。6.3測試用例設(shè)計(jì)與評(píng)審測試用例設(shè)計(jì)是每個(gè)測試人員必備的技能，也驗(yàn)證產(chǎn)品質(zhì)量的關(guān)鍵所在。要確保測試用例邏輯清晰、覆蓋全面與簡潔；除確保覆蓋產(chǎn)品功能外，盡可能從用戶需求角度來設(shè)計(jì)測試用例。測試用例評(píng)審是測試人員不斷完善學(xué)習(xí)的過程，積極聽取評(píng)審人給出的合理建議，提取有用信息添加到測試用例中，來提高測試用例對(duì)產(chǎn)品功能的測試覆蓋率。6.4執(zhí)行測試用例嚴(yán)格且認(rèn)真執(zhí)行測試用例，并如實(shí)記錄測試結(jié)果。測試過程步驟：1冒煙測試，主要驗(yàn)證發(fā)布的版本是否可以正常執(zhí)行。對(duì)于可以正常執(zhí)行的軟件產(chǎn)品，直接進(jìn)入功能性測試環(huán)節(jié)；對(duì)于無法正常執(zhí)行的軟件產(chǎn)品，及時(shí)通知測試負(fù)責(zé)人、開發(fā)負(fù)責(zé)人和項(xiàng)目負(fù)責(zé)人等，保存已完成的測試內(nèi)容并終止該軟件產(chǎn)品的測試。2功能性測試，依據(jù)產(chǎn)品的測試用例執(zhí)行并記錄測試結(jié)果；在測試過程中及時(shí)完善或修正測試用例。3性能性測試，依據(jù)產(chǎn)品的測試用例執(zhí)行并記錄測試結(jié)果；在測試過程中及時(shí)完善或修正測試用例。4易用性測試，采用用戶思維模擬用戶環(huán)境或用戶習(xí)慣來驗(yàn)證產(chǎn)品的友好界面、易操作性等行為。依據(jù)產(chǎn)品的測試用例執(zhí)行，在測試過程中及時(shí)完善或修正測試；可與功能性測試合并進(jìn)行。5安全性測試(可選)，該項(xiàng)測試內(nèi)容依據(jù)產(chǎn)品需求而定，必要時(shí)可委托第三方執(zhí)行。注意:對(duì)于測試過程中發(fā)現(xiàn)的bug依據(jù)Bug提報(bào)規(guī)范將其提報(bào)至Bug管理系統(tǒng)以便追蹤狀態(tài)。6.5Bug提報(bào)提報(bào)原則：1.詳細(xì)了解產(chǎn)品或被測系統(tǒng)的功能，避免提交無效bug和重復(fù)bug。2.Bug描述要清晰，復(fù)現(xiàn)步驟要準(zhǔn)確，需要在Bug提報(bào)中上傳異常圖片或日志文件，必要時(shí)提供視頻文件。3.對(duì)于一些未考慮到或需要優(yōu)化的地方，需要多提建議。Bug提報(bào)注意事項(xiàng):1.必現(xiàn)性Bug：直接提報(bào)至bug管理系統(tǒng)，并提交異常圖片或日志文件，注明詳細(xì)測試環(huán)境與對(duì)比環(huán)境。2.概率性Bug：及時(shí)與開發(fā)人員確認(rèn)，并提交錯(cuò)誤圖片或日志文件；盡可能找出復(fù)現(xiàn)規(guī)律，并與前一版本或變更測試環(huán)境做對(duì)比驗(yàn)證，并詳細(xì)記錄測試環(huán)境、對(duì)比環(huán)境與對(duì)比結(jié)果；并及時(shí)提交至bug管理系統(tǒng)上進(jìn)行追蹤。6.6撰寫測試報(bào)告輸出一個(gè)完整且清晰的測試報(bào)告是測試人員必備的技能，也是項(xiàng)目組評(píng)估版本質(zhì)量的一個(gè)重要依據(jù)，可參考測試報(bào)告模板。一般測試報(bào)告包含且不局限如下內(nèi)容:1測試環(huán)境與測試主題內(nèi)容2測試結(jié)果概述3測試用例執(zhí)行情況4Bug統(tǒng)計(jì)及修復(fù)情況5測試結(jié)論6風(fēng)險(xiǎn)評(píng)估6.7測試報(bào)告評(píng)審對(duì)于非轉(zhuǎn)階段軟件產(chǎn)品測試版本，由測試團(tuán)隊(duì)整理完成測試報(bào)告后與開發(fā)人員確認(rèn)Bug后，可直接發(fā)布測試報(bào)告給項(xiàng)目組成員。對(duì)于轉(zhuǎn)階段版本由測試團(tuán)隊(duì)提前提交預(yù)審核的測試報(bào)告，由項(xiàng)目經(jīng)理召集項(xiàng)目組成員對(duì)預(yù)審核測試報(bào)告進(jìn)行評(píng)審。評(píng)審流程如下:1.項(xiàng)目組成員共同討論bug的處置意見并達(dá)成共識(shí)；無法達(dá)成共識(shí)的內(nèi)容，由項(xiàng)目經(jīng)理與產(chǎn)品經(jīng)理協(xié)商處理并提供最終的處理建議。2.評(píng)審結(jié)束后，bug對(duì)應(yīng)負(fù)責(zé)人及時(shí)在bug管理系統(tǒng)上修正bug狀態(tài)和備注處理意見。3.測試團(tuán)隊(duì)發(fā)布評(píng)審后的測試報(bào)告和評(píng)審記錄表，并將評(píng)審記錄表提交至品管人員處存檔。6.8注意事項(xiàng)6.8.1文檔資料審核1.提測郵件中的發(fā)布說明文檔必須完整，含固件或軟件資料的校驗(yàn)內(nèi)容、注意事項(xiàng)、變更內(nèi)容、影響范圍等。注意事項(xiàng)中需特別備注哪些版本不能直接更新至該版本，或該版本測試不能搭配哪些軟硬件版本等。2.提測郵件中的資料下載路徑或存放位置必須正確。3.提測郵件中提供的WEB類環(huán)境搭建說明文檔描述需清晰和操作步驟需準(zhǔn)確,還需要明確硬件環(huán)境和軟件環(huán)境的配置要求。硬件環(huán)境要求不限于處理器信息、內(nèi)存容量、磁盤容量、數(shù)據(jù)庫服務(wù)器要求、網(wǎng)絡(luò)帶寬等內(nèi)容；軟件環(huán)境要求不限于操作類型、操作系統(tǒng)版本、安裝此軟件前必須安裝的軟件程序等。6.8.2 環(huán)境搭建1.固件類產(chǎn)品：依據(jù)提測郵件中的注意事項(xiàng)搭配正確的產(chǎn)品硬件，未在提測郵件中提及的部分采用當(dāng)前最新版本硬件；搭配APP軟件時(shí)，測試場景需要涵蓋IOS操作系統(tǒng)與安卓操作系統(tǒng)，請(qǐng)明確對(duì)應(yīng)的應(yīng)用程序版本；2.APP類產(chǎn)品:依據(jù)提測郵件中的注意事項(xiàng)搭配正確的操作系統(tǒng)，未提及部分需要在通用的系統(tǒng)環(huán)境下驗(yàn)證(含安卓系統(tǒng)與IOS系