招標(biāo)手機(jī)APP測試總結(jié)報告

1、招標(biāo) app測試總結(jié)報告 招標(biāo) app測試總結(jié)報告 作 者： 日 期：xx-03-10 文檔編號：002 版 本： ver 1.0 目 錄 1.測試概述 1 1.1. 編寫目的 1 1.2. 測試范圍 1 2. 測試方案執(zhí)行情況 1 2.1. 測試類型 1 2.2. 測試環(huán)境與配置 2 2.3. 測試人員 2 2.4. 測試問題總結(jié) 3 3. 測試總結(jié) 3 3.1.測試用例執(zhí)行結(jié)果 3 3.2. 平安測試 4 3.2.1. 軟件權(quán)限 5 3.2.2. 安裝與卸載平安性 5 3.2.2. 數(shù)據(jù)平安性 6 3.2.3. 通訊平安性 7 3.2.4. 人機(jī)接口平安性 7 3.3. 安裝、卸載測試 8

2、 3.3.1. 安裝 8 3.3.2. 卸載 8 3.4. ui測試 9 3.4.1. 導(dǎo)航測試 9 3.4.2. 圖形測試 9 3.4.3. 內(nèi)容測試 9 3.5. 功能測試 10 3.5.1. 運(yùn)行 10 3.5.2. 注冊 10 3.5.3. 登錄 10 3.5.4. 注銷 11 3.5.5. 應(yīng)用的前后臺切換 11 3.5.6. 免登入 11 3.5.7. 數(shù)據(jù)更新 12 3.5.8. 離線瀏覽 12 3.5.9. app更新 12 3.5.10. 時間測試 13 3.5.11. 性能測試 13 3.5.12. 交叉性事件測試 13 3.6. 兼容測試 14 3.7. 用戶體驗(yàn)測試 1

3、4 4. 測試結(jié)果 15 1.測試概述 1.1. 編寫目的 本測試報告為招標(biāo) app的測試報告，目的在于總結(jié)測試階段的測試情況以及分析測試結(jié)果，描述系統(tǒng)是否符合用戶需求，是否已到達(dá)用戶預(yù)期的功能目標(biāo)，并對測試質(zhì)量進(jìn)行分析。 測試報告參考文檔提供應(yīng)用戶、測試人員、開發(fā)人員、工程管理者、其他管理人員和需要閱讀本報告的高層經(jīng)理閱讀。 1.2. 測試范圍 測試主要根據(jù)用戶需求說明書和軟件需求規(guī)格說明書以及相應(yīng)的文檔進(jìn)行系統(tǒng)測試，包括功能測試、性能測試、平安性和訪問控制測試、用戶界面測試以及兼容性測試等，而單元測試和集成測試由開發(fā)人員來執(zhí)行。 主要功能包括：用戶登錄、我的工程、推薦工程訂閱、行業(yè)資訊、我

4、的收藏、意見反應(yīng)、我的ca鎖。 2. 測試方案執(zhí)行情況 2.1. 測試類型 測試類型 測試內(nèi)容 測試目的 所用的測試工具和方法 功能測試 用戶登錄、我的工程、推薦工程訂閱、行業(yè)資訊、我的收藏、意見反應(yīng)、我的ca鎖 核實(shí)所有功能均已正常實(shí)現(xiàn)，即可按用戶的需求使用軟件： 1、 業(yè)務(wù)流程檢驗(yàn)：各個業(yè)務(wù)流程能夠滿足用戶需求，用戶使用不會產(chǎn)生疑問；2、 數(shù)據(jù)準(zhǔn)確：推送的信息與交易平臺生產(chǎn)信息一致，不會出現(xiàn)消息錯誤或漏發(fā)、重復(fù)發(fā)送。 采用黑盒測試，使用邊界值測試、等價類劃分等測試方法，進(jìn)行手工測試 用戶界面測試 1、 頁面結(jié)構(gòu)：包括菜單、背景、顏色、字體、按鈕、title、提示信息的一致性等 2、 友好性

5、、易用性、合理性、一致性、正確性 核實(shí)軟件風(fēng)格符合可接受標(biāo)準(zhǔn)，能夠保證用戶界面友好性、易操作性，符合用戶操作習(xí)慣 手工測試 兼容性測試 1、 用不同型號的安卓 ：華為、小米、三星、oppo、聯(lián)想等，屏幕尺寸：3.5英寸5.5英寸，操作系統(tǒng)：android4.0及以上 2、 不同版本的ios ：ios9.0及以上 核實(shí)軟件在不同的系統(tǒng)中運(yùn)行穩(wěn)定 黑盒測試、 手工測試 平安性和訪問控制測試 1、 注冊、登錄、退出登錄 2、 權(quán)限限制 3、 通過修改url非法訪問 4、 登錄超時限制 1、 應(yīng)用程序級別的平安性：核實(shí)用戶只能操作其所擁有權(quán)限能操作的功能 2、 系統(tǒng)級別的平安性：核實(shí)只能具備系統(tǒng)訪問權(quán)

6、限的用戶才能訪問系統(tǒng) 黑盒測試、 手工測試 性能測試 1、 注冊、登錄響應(yīng)速度 2、 各功能模塊切換響應(yīng)速度 核實(shí)程序在多數(shù)據(jù)推送、 多程序運(yùn)行的情況下軟件性能的穩(wěn)定性，不造成程序崩潰或相關(guān)的異?，F(xiàn)象 黑盒測試、 手工測試 2.2. 測試環(huán)境與配置 資源名稱/類型 配 置 測試移動端 主頻2.2ghz，硬盤500g，內(nèi)存4gb 應(yīng)用效勞器 tomcat7.0效勞器 數(shù)據(jù)庫管理系統(tǒng) mysql,sqllite 應(yīng)用軟件 eclipse8、android、svn客戶端 2.3. 測試人員 職務(wù) 姓名 e-mail 開發(fā)工程師 測試人員1 測試人員2 2.4. 測試問題總結(jié) 在app開始測試及投入使

7、用的過程中，一直存在或多或少的影響用戶使用體驗(yàn)的問題存在，至今仍有局部問題沒有徹底解決。 3. 測試總結(jié) 3.1.測試用例執(zhí)行結(jié)果 測試用例標(biāo)識符 測試用例名稱 狀態(tài) 測試結(jié)果 備注 功能測試 testcase001 用戶 在線注冊 已執(zhí)行 測試通過 用戶登錄注冊 testcase002 注冊協(xié)議查看 已執(zhí)行 測試通過 testcase003 注冊后訂閱工程功能 已執(zhí)行 測試通過 testcase004 注冊帳號登錄 已執(zhí)行 測試通過 testcase005 智慧交易云系統(tǒng)注冊帳號登錄 已執(zhí)行 測試通過 testcase006 記住密碼和自動登錄功能 已執(zhí)行 測試通過 testcase007

8、按地市訂閱工程分類 已執(zhí)行 測試通過 推薦工程訂閱 testcase008 取消已訂閱工程分類 已執(zhí)行 測試通過 testcase009 已訂閱工程類別消息推送 已執(zhí)行 有重復(fù)數(shù)據(jù)推送 testcase010 已訂閱工程消息推送提醒 已執(zhí)行 重復(fù)提醒； 提醒消息與翻開查看時內(nèi)容不符；小米4沒有消息提醒 testcase011 推薦工程信息分頁查看 已執(zhí)行 只有上下頁跳轉(zhuǎn)功能，看不到明確頁數(shù) testcase012 推薦工程信息關(guān)鍵字檢索 已執(zhí)行 測試通過 testcase013 按地市條件篩選推薦工程信息 已執(zhí)行 測試通過 testcase014 推薦工程收藏功能 已執(zhí)行 局部工程信息無法收藏

9、 testcase015 推薦消息點(diǎn)擊查看 已執(zhí)行 公告內(nèi)容有圖片或者表格時內(nèi)容顯示有誤 testcase016 我的工程消息推送 已執(zhí)行 有重復(fù)信息推送；投標(biāo)人角色沒有信息推送 我的工程 testcase017 我的工程信息點(diǎn)擊查看 已執(zhí)行 公告內(nèi)容有圖片或者表格時內(nèi)容顯示有誤 testcase018 我的工程信息分頁查看 已執(zhí)行 測試通過 testcase019 我的工程信息關(guān)鍵字檢索 已執(zhí)行 測試通過 testcase020 我的工程信息按消息類型分類檢索 已執(zhí)行 測試通過 testcase021 我的工程新消息紅色字體區(qū)分顯示 已執(zhí)行 測試通過 testcase022 行業(yè)資訊信息推送

10、 已執(zhí)行 測試通過 行業(yè)資訊 testcase023 行業(yè)資訊信息點(diǎn)擊查看 已執(zhí)行 測試通過 testcase024 行業(yè)資訊信息分頁查看 已執(zhí)行 測試通過 testcase025 行業(yè)資訊信息關(guān)鍵字檢索 已執(zhí)行 測試通過 testcase026 我的工程信息收藏 已執(zhí)行 測試通過 我的收藏 testcase027 訂閱推薦工程信息收藏 已執(zhí)行 測試通過 testcase028 收藏工程信息查看 已執(zhí)行 測試通過 testcase029 收藏工程信息關(guān)鍵字檢索 已執(zhí)行 測試通過 testcase030 收藏工程信息刪除 已執(zhí)行 測試通過 testcase031 收藏工程信息分頁查看 已執(zhí)行 測

11、試通過 testcase032 用戶提交意見建議 已執(zhí)行 測試通過 意見反應(yīng) testcase033 提交的意見在頁面上顯示 已執(zhí)行 測試通過 testcase034 意見回復(fù)內(nèi)容在頁面上的顯示 已執(zhí)行 測試通過 testcase035 ca鎖到期10日內(nèi)登錄后顯示提醒頁面 已執(zhí)行 測試通過 我的ca鎖 3.2. 平安測試 3.2.1. 軟件權(quán)限 3.2.1.1. 扣費(fèi)風(fēng)險 測試內(nèi)容 是否扣費(fèi) 備注 收發(fā)短信 否 接收短信無費(fèi)用（如短信驗(yàn)證碼）撥打 是 撥打app內(nèi)提供的客服 有費(fèi)用（由運(yùn)營商收?。┻B接網(wǎng)絡(luò) 是 連接2g、3g、4g及wifi網(wǎng)絡(luò)有費(fèi)用（由運(yùn)營商收?。?.2.1.2. 隱私泄漏

12、風(fēng)險 測試內(nèi)容 是否泄漏 備注 訪問 信息 否 app暫時無任何功能和需求會訪問 信息 訪問通訊錄信息 否 app暫時無任何功能和需求會訪問通訊錄信息 3.2.1.3. 限制性測試 測試內(nèi)容 是否限制 限制/允許使用 發(fā)送接受信息功能 允許 限制/允許應(yīng)用程序來注冊自動啟動應(yīng)用程序 允許 限制/允許使用 讀取用戶數(shù)據(jù) 允許 限制/允許使用 寫人用戶數(shù)據(jù) 允許 3.2.2. 安裝與卸載平安性 測試內(nèi)容 測試結(jié)果 應(yīng)用程序應(yīng)能正確安裝到設(shè)備驅(qū)動程序上 是 能夠在安裝設(shè)備驅(qū)動程序上找到應(yīng)用程序的相應(yīng)圖標(biāo) 是 是否包含數(shù)字簽名信息 否 安裝路徑應(yīng)能指定 否 jad文件顯示的資料內(nèi)容與應(yīng)用程序顯示的資料

13、內(nèi)容應(yīng)一致 是 沒有用戶的允許, 應(yīng)用程序不能預(yù)先設(shè)定自動啟動 是 卸載是否平安, 其安裝進(jìn)去的文件是否全部卸載 是 卸載用戶使用過程中產(chǎn)生的文件是否有提示 否 其修改的配置信息是否復(fù)原 否 卸載是否影響其他軟件的功能 否 卸載應(yīng)該移除所有的文件 是 3.2.2. 數(shù)據(jù)平安性 測試內(nèi)容 測試結(jié)果 當(dāng)將密碼或其他的敏感數(shù)據(jù)輸人到應(yīng)用程序時, 其不會被儲存在設(shè)備中, 同時密碼也不會被解碼 是 輸人的密碼將不以明文形式進(jìn)行顯示 是 密碼或其他的敏感數(shù)據(jù)將不被儲存在它們預(yù)輸人的位置上 否 不同的應(yīng)用程序的個人身份證或密碼長度必需至少在6一20 個字符長度之間 是 備份應(yīng)該加密, 恢復(fù)數(shù)據(jù)應(yīng)考慮恢復(fù)過程

14、的異常通訊中斷等, 數(shù)據(jù)恢復(fù)后再使用前應(yīng)該經(jīng)過校驗(yàn) 否 應(yīng)用程序應(yīng)考慮系統(tǒng)或者虛擬機(jī)器產(chǎn)生的用戶提示信息或平安警告 否 應(yīng)用程序不能忽略系統(tǒng)或者虛擬機(jī)器產(chǎn)生的用戶提示信息或平安警告, 更不能在平安警告顯示前，利用顯示誤導(dǎo)信息欺騙用戶，應(yīng)用程序不應(yīng)該模擬進(jìn)行平安警告誤導(dǎo)用戶 是 在數(shù)據(jù)刪除之前，應(yīng)用程序應(yīng)當(dāng)通知用戶或者應(yīng)用程序提供一個“取消”命令的操作 是 “ 取消” 命令操作能夠按照設(shè)計要求實(shí)現(xiàn)其功能 是 應(yīng)用程序應(yīng)當(dāng)能夠處理當(dāng)不允許應(yīng)用軟件連接到個人信息管理的情況 否 當(dāng)進(jìn)行讀或?qū)懹脩粜畔⒉僮鲿r, 應(yīng)用程序?qū)蛴脩舭l(fā)送一個操作錯誤的提示信息 否 在沒有用戶明確許可的前提下不損壞刪除個人信息

15、管理應(yīng)用程序中的任何內(nèi)容 是 應(yīng)用程序讀和寫數(shù)據(jù)正確 是 應(yīng)用程序應(yīng)當(dāng)有異常保護(hù) 否 如果數(shù)據(jù)庫中重要的數(shù)據(jù)正要被重寫, 應(yīng)及時告知用戶 否 能合理地處理出現(xiàn)的錯誤 否 意外情況下應(yīng)提示用戶 否 3.2.3. 通訊平安性 測試內(nèi)容 測試結(jié)果 當(dāng)創(chuàng)立連接時, 應(yīng)用程序能夠處理因?yàn)榫W(wǎng)絡(luò)連接中斷, 進(jìn)而告訴用戶連接中斷的情況 否 應(yīng)能處理網(wǎng)絡(luò)異常和及時將異常情況通報用戶 是 應(yīng)用程序關(guān)閉或網(wǎng)絡(luò)連接不再使用時應(yīng)及時關(guān)閉) 斷開 是 、s覆蓋測試 -app和后臺效勞一般都是通過來交互的，驗(yàn)證環(huán)境下是否正常；-公共網(wǎng)絡(luò)環(huán)境中（如：麥當(dāng)勞、星巴克等）都要輸入用戶名和密碼，通過ssl認(rèn)證來訪問網(wǎng)絡(luò)，需要對使用

16、 client的library異常作捕獲處理 否 3.2.4. 人機(jī)接口平安性 測試內(nèi)容 測試結(jié)果 返回菜單總保持可用 否 命令有優(yōu)先權(quán)順序 否 聲音的設(shè)置不影響應(yīng)用程序的功能 是 應(yīng)用程序必需利用目標(biāo)設(shè)備適用的全屏尺寸來顯示上述內(nèi)容 是 應(yīng)用程序必需能夠處理不可預(yù)知的用戶操作, 例如錯誤的操作和同時按下多個鍵 否 3.3. 安裝、卸載測試 3.3.1. 安裝 測試內(nèi)容 測試結(jié)果 軟件在不同操作系統(tǒng)（palm os、symbian、linux、android、ios、black berry os 6.0、windows phone 7）下安裝是否正常 是（只測試了android、ios）軟件安

17、裝后是否能夠正常運(yùn)行，安裝后的文件夾及文件是否寫到了指定的目錄里 是 軟件安裝向?qū)У膗i測試 否 軟件安裝過程中意外情況的處理是否符合需求（如死機(jī)，重啟，斷電）否 安裝空間缺乏時是否有相應(yīng)提示 否 安裝后沒有生成多余的目錄結(jié)構(gòu)和文件 是 依照安裝手冊是否能順利安裝 是 3.3.2. 卸載 測試內(nèi)容 測試結(jié)果 直接刪除安裝文件夾卸載是否有提示信息 否 測試系統(tǒng)直接卸載程序是否有提示信息 否 測試卸載后文件是否全部刪除所有的安裝文件夾 是 卸載過程中出現(xiàn)的意外情況的測試（如死機(jī)、斷電、重啟）否 卸載是否支持取消功能 是 3.4. ui測試 3.4.1. 導(dǎo)航測試 測試內(nèi)容 測試結(jié)果 在不同的連接頁

18、面之間需要導(dǎo)航 是 是否易于導(dǎo)航，導(dǎo)航是否直觀 否 是否有搜索引擎 是 導(dǎo)航幫助是否準(zhǔn)確直觀 否 導(dǎo)航與頁面結(jié)構(gòu)、菜單、連接頁面的風(fēng)格是否一致 否 3.4.2. 圖形測試 測試內(nèi)容 測試結(jié)果 橫向比擬，各控件操作方式統(tǒng)一 是 自適應(yīng)界面設(shè)計，內(nèi)容根據(jù)窗口大小自適應(yīng) 是 頁面標(biāo)簽風(fēng)格是否統(tǒng)一 是 頁面是否美觀 否 頁面的圖片應(yīng)有其實(shí)際意義而要求整體有序美觀 否 圖片質(zhì)量要高且圖片尺寸在設(shè)計符合要求的情況下應(yīng)盡量小 是 界面整體使用的顏色不宜過多 是 3.4.3. 內(nèi)容測試 測試內(nèi)容 測試結(jié)果 輸入框說明文字的內(nèi)容與系統(tǒng)功能是否一致 是 文字長度是否加以限制 否 文字內(nèi)容是否表意不明 否 是否有錯

19、別字 否 信息是否為中文顯示 是 是否有敏感性詞匯、關(guān)鍵詞 否 是否有敏感性圖片，如：涉及版權(quán)、專利、隱私等圖片 否 3.5. 功能測試 3.5.1. 運(yùn)行 測試內(nèi)容 測試結(jié)果 app安裝完成后的試運(yùn)行，可正常翻開軟件 是 app翻開測試，是否有加載狀態(tài)進(jìn)度提示 是 app翻開速度測試，速度是否可觀 否 app頁面間的切換是否流暢，邏輯是否正確 邏輯正確，切換不夠流暢 3.5.2. 注冊 測試內(nèi)容 測試結(jié)果 后臺可否增加用戶 是 用戶名密碼長度是否限制 是 注冊后是否有提示頁面 否 前臺注冊頁面和后臺的管理頁面數(shù)據(jù)是否一致 是 注冊后，在后臺管理中頁面提示 否 3.5.3. 登錄 測試內(nèi)容 測

20、試結(jié)果 使用合法的用戶登錄系統(tǒng) 是 系統(tǒng)是否允許屢次非法的登陸，是否有次數(shù)限制 否 使用已經(jīng)登陸的賬號登陸系統(tǒng)是否正確處理 是 使用禁用的賬號登陸系統(tǒng)是否正確處理 是 用戶名、口令（密碼）錯誤或漏填時能否登陸 否 刪除或修改后的用戶，原用戶登陸 否 不輸入用戶口令和用戶、重復(fù)點(diǎn)（確定或取消按鈕）是否允許登陸 否 頁面中有退出登錄按鈕 是 登陸超時的處理 否 3.5.4. 注銷 測試內(nèi)容 測試結(jié)果 是否能正常注銷 否 注銷原用戶，新用戶系統(tǒng)能否正確處理 否 使用錯誤的賬號、口令、無權(quán)限的被禁用的賬號進(jìn)行注銷 否 3.5.5. 應(yīng)用的前后臺切換 測試內(nèi)容 測試結(jié)果 app切換到后臺，再回到app，

21、檢查是否停留在上一次操作界面 否 app切換到后臺，再回到app，檢查功能及應(yīng)用狀態(tài)是否正常 是 鎖屏解屏后進(jìn)入app注意是否會崩潰，功能狀態(tài)是否正常，尤其是對于從后臺切換回前臺數(shù)據(jù)有自動更新的時候 否（個別情況下app會白屏）當(dāng)app使用過程中有 進(jìn)來中斷后再切換到app，功能狀態(tài)是否正常 是 當(dāng)殺掉app進(jìn)程后，再開啟app，app能否正常啟動 是 出現(xiàn)必須處理的提示框后，切換到后臺，再切換回來，檢查提示框是否還存在，有時候會出現(xiàn)應(yīng)用自動跳過提示框的缺陷 是 3.5.6. 免登入 測試內(nèi)容 測試結(jié)果 app是否有免登錄功能，需要考慮ios版本差異 否 考慮無網(wǎng)絡(luò)情況時能否正常進(jìn)入免登錄狀態(tài)

22、 否 切換用戶登錄后，要校驗(yàn)用戶登錄信息及數(shù)據(jù)內(nèi)容是否相應(yīng)更新，確保原用戶退出 是 切換到后臺，再切換回前臺的測試 是 密碼更換后，檢查有數(shù)據(jù)交換時是否進(jìn)行了有效身份的校驗(yàn) 否 檢查用戶主動退出登錄后，下次啟動app，應(yīng)停留在登錄界面 是 3.5.7. 數(shù)據(jù)更新 測試內(nèi)容 測試結(jié)果 需要確定哪些地方需要提供手動刷新，哪些地方需要自動刷新，哪些地方需要手動+自動刷新 是 從后臺切換回前臺時需要進(jìn)行數(shù)據(jù)更新 是 根據(jù)業(yè)務(wù)、速度及流量的合理分配，確定哪些內(nèi)容需要實(shí)時更新，哪些需要定時更新 是 確定數(shù)據(jù)展示局部的處理邏輯，是每次從效勞端請求，還是有緩存到本地 是 檢查有數(shù)據(jù)交換的地方，均有相應(yīng)的異常處

23、理 否 3.5.8. 離線瀏覽 測試內(nèi)容 測試結(jié)果 在無網(wǎng)絡(luò)情況可以瀏覽本地數(shù)據(jù) 否 退出app再開啟app時能正常瀏覽 否 切換到后臺再切回前臺可以正常瀏覽 否 鎖屏后再解屏回到應(yīng)用前臺可以正常瀏覽 否 在對效勞端的數(shù)據(jù)有更新時會給予離線的相應(yīng)提示 否 3.5.9. app更新 測試內(nèi)容 測試結(jié)果 當(dāng)客戶端有新版本時，有更新提示 否 當(dāng)客戶端有新版本時，在本地不刪除客戶端的情況下，直接更新檢查是否能正常更新 是（客戶端自動更新）3.5.10. 時間測試 測試內(nèi)容 測試結(jié)果 修改系統(tǒng)時間，后臺發(fā)布信息時間是否隨之更改 是 修改 時間，推送信息時間是否隨之更改 否 3.5.11. 性能測試 3.5.11.1. 響應(yīng)測試 測試內(nèi)容 測試結(jié)果 運(yùn)行app時斷掉網(wǎng)絡(luò)，是否影響 其它使用 否 安裝、卸載的響應(yīng)時間，是否能夠接受 是 app各類功能性操作的響應(yīng)時間，是否能夠接受 否（推薦工程訂閱功能響應(yīng)有點(diǎn)慢）反復(fù)進(jìn)行安裝卸載，查看系統(tǒng)資源是否正常 是 3.5.12. 交叉性事件測試 測試內(nèi)容 測試結(jié)果 多個app同時運(yùn)行是否影響正常功能 否 app運(yùn)行時前/后臺切換是否影響正常功能 否 app運(yùn)行時撥打/接聽 是否影響正常功能 否