客戶端軟件驗收測試標(biāo)準(zhǔn)

1、客戶端軟件驗收測試標(biāo)準(zhǔn)版本號：修改日期客戶端軟件驗收測試介入規(guī)范VersionPage of7客戶端軟件驗收測試介入規(guī)范VersionPage #of7版本修改記錄客戶端軟件驗收測試介入規(guī)范VersionPage of7TOC o 1-5 h z1.前言41.1.文檔范圍4 HYPERLINK l bookmark21.2.目標(biāo)42.驗收測試介入標(biāo)準(zhǔn)43.驗收標(biāo)準(zhǔn)43.1.缺陷嚴重級別定義53.2.各缺陷級別的現(xiàn)象舉例53.3.驗收通過標(biāo)準(zhǔn)44.驗收測試內(nèi)容65.附件75.1.缺陷分析報告模版75.2.測試用例模版7客戶端軟件驗收測試介入規(guī)范VersionPage of71.前言1.1.文檔范

2、圍本文檔定義了軟件的驗收測試標(biāo)準(zhǔn)。包括驗收測試需要的交付件、缺陷級別定義、驗收通過標(biāo)準(zhǔn)和驗收測試內(nèi)容等。1.2.目標(biāo)為軟件驗收測試提供指導(dǎo)。驗收測試結(jié)果只對PM判斷是否上線起參考作用，不對最終的軟件質(zhì)量進行跟蹤負責(zé)。2.驗收測試介入標(biāo)準(zhǔn)乙方應(yīng)在雙方約定時間內(nèi)提供以下交付件，供做軟件驗收測試和評估。無法提供以下材料，不進入驗收測試。其他說明：被退回次數(shù)超過3次（含）將不再接收驗收測試。表1交付件說明序號項目名稱遞交日期備注1.系統(tǒng)設(shè)計文檔已提交(2009.11)評審修改完成的系統(tǒng)設(shè)計文檔2.測試用例集2009.12.25軟件測試用例、測試用例執(zhí)行記錄。用例3.缺陷列表2009.12.25驗收測試

3、前的缺陷分析報告列表（含遺留）。4.測試報告2009.12.25驗收測試版本的軟件測試報告參考附件模板測試報告模板5.軟件2009.12.25服務(wù)器端軟件以及客戶端軟件（除種植系統(tǒng)）6.客戶端開發(fā)提供realeasenote2009.12.25說明本次測試版本號（更新功能、列表）3.驗收標(biāo)準(zhǔn)3.1.驗收退回標(biāo)準(zhǔn)退回情況分為兩種：第一種，測試根據(jù)乙方提供測試用例，挑選主流程業(yè)務(wù)的測試用例，建立“預(yù)測試用例集”（類似于冒煙測試用例集，一個系統(tǒng)基本取兩到三個用例），預(yù)測試用例集中有一條用例執(zhí)行不通過，本次提交測試退回。第二種：不達到驗收測試標(biāo)準(zhǔn)（參見3.2章），驗收測試不通過，給予退回。下次提交測試

4、時間：退回之日（不含退回日）起五個工作日后提交新的驗收版本。32.驗收通過標(biāo)準(zhǔn)測試按乙方提供的測試用例集和自由測試方式進行驗收測試，測試覆蓋率達到70%以上，要求驗收測試發(fā)現(xiàn)的缺陷數(shù)量不大于表4的數(shù)據(jù)。缺陷來源不局限于用例集。表4驗收通過標(biāo)準(zhǔn)階段BlockerMajorNormal驗收測試如果驗收測試結(jié)果不符合表4要求，測試給予本次驗收測試的結(jié)果為Fail。3.3.缺陷嚴重級別定義缺陷嚴重級別分為3級，各個級別定義如表2。表2缺陷嚴重級別描述級別名稱詳細描述Blocker致命缺陷程序無法運行的錯誤測試無法執(zhí)行的錯誤Major嚴重缺陷鏈接錯誤前后模塊不致需求問題實現(xiàn)與需求不符出現(xiàn)調(diào)試代碼功能性錯

5、誤程序性能低下程序引起的安全問題Normal一般缺陷頁面格式錯誤文案錯誤圖片錯誤兼容性錯誤校檢錯誤關(guān)聯(lián)性錯誤配置問題功能易用程度低合理建議遺留問題暫時無法實現(xiàn)技術(shù)問題3.4.各缺陷級別的現(xiàn)象舉例為了更合理的定義缺陷級別，表3列舉各級別的現(xiàn)象描述。表3中羅列的缺陷描述不能表達所有的缺陷現(xiàn)象，因此僅作為參考，如果有表3之外的缺陷現(xiàn)象發(fā)生，按照表2定義的級別描述來確定其嚴重級別。表3各缺陷級別的現(xiàn)象舉例級別常見缺陷現(xiàn)象Blocker災(zāi)難性的缺陷，會對系統(tǒng)造成致命影響，例如系統(tǒng)崩潰、應(yīng)用程序死掉、應(yīng)用程序異常退出、通訊意外中斷或系統(tǒng)進入死循環(huán)、死機、黑屏、數(shù)據(jù)丟失、用戶無法登錄等情況。如果此級別的問題

6、存在，用戶是絕對不能接受的。基本功能無法實現(xiàn)或遺漏，如某一應(yīng)用程序啟動不了或關(guān)鍵功能無法運行，關(guān)鍵數(shù)據(jù)錯失較多。性能問題，如操作實時失敗、數(shù)據(jù)庫讀寫效率低無法正常安裝。升級腳本錯誤，使升級失敗。內(nèi)存使用錯誤，如內(nèi)存泄漏、內(nèi)存溢出、數(shù)組越界等。進程資源不能釋放。正常情況下基本功能無法工作，例如不能登錄、不能搜索商品、商品不能交易等對現(xiàn)有應(yīng)用系統(tǒng)造成惡略影響Major基本功能存在部分問題或次要功能無法實現(xiàn)或遺漏。程序拋出異常信息沒有處理，如空指針、通訊異常等。安裝后文件不全、文件錯誤造成基本功能無法實現(xiàn)前后臺版本不兼容?？蛻舳斯δ軐崿F(xiàn)與需求不符測試中發(fā)現(xiàn)死機、重啟、黑屏等，但概率較低主要界面顯示有明顯的錯誤Normal對系統(tǒng)造成重要影響，存在的缺陷會影響到用戶的使用，但不會對主要功能造成威脅。例如產(chǎn)品非主要功能實現(xiàn)不完全或不合理、實現(xiàn)了超出需求范圍的功能、缺陷引起操作失敗、產(chǎn)生非預(yù)期的結(jié)果等。如果此級別的問題存在，用戶會不滿并有可能進行投訴，但在一定條件下用戶會容許此類問題的存在主要界面顯示不合理或者顯示錯誤按鍵設(shè)置不合理，或者主要功能的操作不便利次要的功能實現(xiàn)不完全對系統(tǒng)影響很小，不涉及主要功能的一些界面問題，例如涉及某些次要界面的操作便利性，告警消息顯示不正確等。一般來說，用戶會容許此類少量問題的存在。次要界面顯示不合理或者不友好和用戶手冊不一致，但更符合用戶操