軟件測試流程分享.pptx

軟件測試流程分享 目錄 整體流程各階段質(zhì)量評審方式和標(biāo)準(zhǔn)Bug分布CodeReview單元測試測試用例設(shè)計功能測試性能測試異常測試 1 整體流程 測試溝通 溝通紀(jì)要 測試設(shè)計 測試設(shè)計文檔 測試執(zhí)行 測試報告 時間軸 測試介入 線上檢查 2 各階段質(zhì)量評審方式和標(biāo)準(zhǔn) 邏輯BUG代碼做了錯誤的事情 例如條件語句寫錯 變量未賦值等銜接BUG對象之間銜接時候出現(xiàn)錯誤 例如接口之間傳遞參數(shù)出錯等渲染BUG能夠用眼睛看出來的錯誤 出現(xiàn)在UI例如頁面布局與MRD不一致 3 Bug分布 DAO DataService PageService Action 模板 ST 針對渲染和銜接BUG http請求 http應(yīng)答 3 Bug分布 并非所有的類都要做UT 4 CodeReview 何時進(jìn)行開發(fā)人員每次提交代碼前 都應(yīng)通過本地單測并將代碼提交team間及測試人員Review Reveiw通過后才能入庫 優(yōu)點保持項目整體代碼風(fēng)格一致團(tuán)隊間互相熟悉代碼提前發(fā)現(xiàn)錯誤CodeReview要點遵守代碼規(guī)范 保持項目整體代碼風(fēng)格一致邏輯錯誤異常條件考慮不足 5 單元測試 單元測試開發(fā)原則短 一般在10行以內(nèi)平 基本上都是順序執(zhí)行 沒有分支語句 沒有循環(huán)語句快 一個用例執(zhí)行時間在毫秒級別一致性 測試用例多次執(zhí)行 結(jié)果一致原子性 測試用例的執(zhí)行結(jié)果 要么是PASS 要么是FAIL獨(dú)立性 測試用例之間獨(dú)立 即測試用例的執(zhí)行順序不影響結(jié)果單元測試架構(gòu)工具c 單測框架 Gtestc 覆蓋率分析 Lcovpython單測框架 unittest nosejava單測框架 Junitjava覆蓋率分析 cobertura 6 測試用例設(shè)計 輸入細(xì)化的測試需求測試的方法相關(guān)的資源輸出完成測試需求的數(shù)據(jù)設(shè)計完成測試步驟完成測試預(yù)期可選 標(biāo)識別用例的優(yōu)先級可選 和測試需求綁定用例間的執(zhí)行順序 測試分類 功能測試性能測試異常測試 6 1功能測試 對產(chǎn)品的各功能進(jìn)行驗證 檢查產(chǎn)品是否達(dá)到用戶要求的功能 構(gòu)造輸入 正常 異常 測試數(shù)據(jù) 正常數(shù)據(jù) 配置文件 正常配置 測試環(huán)境 正常環(huán)境 測試步驟針對系統(tǒng)功能進(jìn)行驗證檢查輸出數(shù)據(jù) 正確性 新舊diff功能 正確性 針對namespace database的增刪改查功能的系統(tǒng)測試 測試輸入測試數(shù)據(jù) 系統(tǒng)對外部數(shù)據(jù)沒有強(qiáng)依賴 測試使用數(shù)據(jù)可以進(jìn)行構(gòu)造測試環(huán)境 單點server 后臺數(shù)據(jù)庫系統(tǒng)配置 使用線上配置測試步驟針對namespace database的增刪改查 及交叉功能應(yīng)用常用測試設(shè)計方法進(jìn)行測試設(shè)計 測試輸出檢查增刪改查的功能是否實現(xiàn) 數(shù)據(jù)是否正確 6 1功能測試 舉例 6 2性能測試 基本概念 CPU IO 內(nèi)存 帶寬 成功率 超時率 響應(yīng)時間 并發(fā)用戶數(shù) 資源指標(biāo) 產(chǎn)品指標(biāo) 資源指標(biāo)與硬件消耗直接相關(guān) 本質(zhì)反映的是成本問題 產(chǎn)品指標(biāo)與場景需求直接相關(guān) 本質(zhì)反映的是效果問題 6 2性能測試 關(guān)鍵指標(biāo) 14 step1 分析對象設(shè)計原理確認(rèn)資源消耗類型確認(rèn)具體關(guān)注指標(biāo) 性能測試場景設(shè)計架構(gòu)部署方案設(shè)計性能預(yù)期設(shè)計 穩(wěn)定 極限 壓力方案設(shè)計 step2 step3 step4 step5 環(huán)境 數(shù)據(jù)與工具選擇環(huán)境 超時 線程 日志 硬件資源等 數(shù)據(jù) 大小 讀寫方式 cache機(jī)制 工具選擇 線程池 連接方式 通信方式 壓力增加方式 執(zhí)行方案執(zhí)行輪次優(yōu)化 對比方案 結(jié)果指標(biāo)分析指標(biāo)組合判斷性能指標(biāo)評估瓶頸判斷優(yōu)化方案設(shè)計 6 2性能測試 測試方案設(shè)計 6 2性能測試 舉例 消息發(fā)送平臺接口測試測試目的 測試線上單臺機(jī)器消息發(fā)送接口的發(fā)送能力 系統(tǒng)入口接受外部請求的能力 期望值 系統(tǒng)入口 2000QPS 單機(jī)500QPS 線上共四臺機(jī)器 CUP IDLE 30以上 性能測試過程 1 搭建性能測試環(huán)境 準(zhǔn)備線上測試機(jī)器并構(gòu)造壓測數(shù)據(jù) 2 起壓線程 從10 300 依次增加 遇到瓶頸后 尋找臨界屆值的點 3 發(fā)送請求數(shù) 隨著線程的增加 請求數(shù)略有增加 保證壓測時間不低于200s 6 2性能測試 舉例 性能測試結(jié)果分析 構(gòu)造系統(tǒng)的異常場景 檢查系統(tǒng)的穩(wěn)定性 正確性構(gòu)造輸入測試數(shù)據(jù) 異常數(shù)據(jù) 配置文件 異常配置 測試環(huán)境 異常環(huán)境 CPU 內(nèi)存 磁盤 網(wǎng)絡(luò) 依賴系統(tǒng)異常 測試步驟構(gòu)造各種異常場景檢查輸出數(shù)據(jù) 是否正常 是