軟件測試計劃與相關(guān)文檔.ppt

1、軟件測試基礎(chǔ)教程,由安博測試空間技術(shù)中心,6.1 測試計劃的制定 6.2 測試文檔 6.3 測試用例文檔的設(shè)計 6.4 測試總結(jié)報告 習(xí)題,軟件測試計劃的制定 測試文檔的形成 測試用例文檔的編寫 測試報告的編寫格式,6.1.1 測試計劃 6.1.2 測試計劃的制定 6.1.3 軟件開發(fā)、軟件測試與測試計劃制定的并行關(guān)系,軟件測試是一個有組織有計劃的活動，應(yīng)當(dāng)給予充分的時間和資源進行測試計劃，這樣軟件測試才能在合理的控制下正常進行。測試計劃（Test Planning）作為測試的起始步驟，是整個軟件測試過程的關(guān)鍵管理者。 1測試計劃的定義 測試計劃規(guī)定了測試各個階段所要使用的方法策略、測試環(huán)境、

2、測試通過或失敗的準(zhǔn)則等內(nèi)容。ANSI/IEEE軟件測試文檔標(biāo)準(zhǔn)829-1983將測試計劃定義為：“一個敘述了預(yù)定的測試活動的范圍、途徑、資源及進度安排的文檔。它確認(rèn)了測試項、被測特征、測試任務(wù)、人員安排，以及任何偶發(fā)事件的風(fēng)險。”,2測試計劃的目的和作用 測試計劃的目的是明確測試活動的意圖。它規(guī)范了軟件測試內(nèi)容、方法和過程，為有組織地完成測試任務(wù)提供保障。專業(yè)的測試必須以一個好的測試計劃作為基礎(chǔ)。盡管測試的每一個步驟都是獨立的，但是必須要有一個起到框架結(jié)構(gòu)作用的測試計劃。 3測試計劃書 測試計劃文檔化就成為測試計劃書，包含總體計劃也包含分級計劃，是可以更新改進的文檔。從文檔的角度看，測試計劃書

3、是最重要的測試文檔，完整細(xì)致并具有遠(yuǎn)見性的計劃書會使測試活動安全順利地向前進行，從而確保所開發(fā)的軟件產(chǎn)品的高質(zhì)量。,4測試計劃的內(nèi)容 軟件測試計劃是整個測試過程中最重要的部分，為實現(xiàn)可管理且高質(zhì)量的測試過程提供基礎(chǔ)。測試計劃以文檔形式描述軟件測試預(yù)計達(dá)到的目標(biāo)，確定測試過程所要采用的方法策略。測試計劃包括測試目的、測試范圍、測試對象、測試策略、測試任務(wù)、測試用例、資源配置、測試結(jié)果分析和度量以及測試風(fēng)險評估等，測試計劃應(yīng)當(dāng)足夠完整但也不應(yīng)當(dāng)太詳盡。借助軟件測試計劃，參與測試的項目成員，尤其是測試管理人員，可以明確測試任務(wù)和測試方法，保持測試實施過程的順暢溝通，跟蹤和控制測試進度，應(yīng)對測試過程中

4、的各種變更。因此一份好的測試計劃需要綜合考慮各種影響測試的因素。,實際的測試計劃內(nèi)容因不同的測試對象而靈活變化，但通常來說一個正規(guī)的測試計劃應(yīng)該包含以下幾個項目，也可以看作是通用的測試計劃樣本以供參考： 測試的基本信息： 包括測試目的、背景、測試范圍等； 測試的具體目標(biāo)： 列出軟件需要進行的測試部分和不需要進行的測試部分； 測試的策略： 測試人員采用的測試方法，如回歸測試、功能測試、自動測試等； 測試的通過標(biāo)準(zhǔn)： 測試是否通過的界定標(biāo)準(zhǔn)以及沒有通過情況的處理方法； 停測標(biāo)準(zhǔn)：,給出每個測試階段停止測試的標(biāo)準(zhǔn)； 測試用例： 詳細(xì)描述測試用例，包括測試值、測試操作過程、測試期待值等； 測試的基本支

5、持： 測試所需硬件支持、自動測試軟件等； 部門責(zé)任分工： 明確所有參與軟件管理、開發(fā)、測試、技術(shù)支持等部門的責(zé)任細(xì)則； 測試人力資源分配： 列出測試所需人力資源以及軟件測試人員的培訓(xùn)計劃； 測試進度安排： 制定每一個階段的詳細(xì)測試進度安排表； 風(fēng)險估計和危機處理： 估計測試過程中潛在的風(fēng)險以及面臨危機時的解決辦法。,一個理想的測試計劃應(yīng)該體現(xiàn)以下幾個特點： 在檢測主要缺陷方面有一個好的選擇； 提供絕大部分代碼的覆蓋率； 具有靈活性； 易于執(zhí)行、回歸和自動化； 定義要執(zhí)行測試的種類； 測試文檔明確說明期望的測試結(jié)果； 當(dāng)缺陷被發(fā)現(xiàn)時提供缺陷核對； 明確定義測試目標(biāo)； 明確定義測試策略； 明確定義

6、測試通過標(biāo)準(zhǔn)； 沒有測試冗余； 確認(rèn)測試風(fēng)險； 文檔化確定測試的需求； 定義可交付的測試件。,軟件測試計劃是整個軟件測試流程工作的基本依據(jù)，測試計劃中所列條目在實際測試中必須一一執(zhí)行。在測試的過程中，若發(fā)現(xiàn)新的測試用例，就要盡早補充到測試計劃中。若預(yù)先制定的測試計劃項目在實際測試中不適用或無法實現(xiàn)，那么也要盡快對計劃進行修改，使計劃具有可行性。,1測試計劃的制定 測試的計劃與控制是整個測試過程中最重要的階段，它為實現(xiàn)可管理且高質(zhì)量的測試過程提供基礎(chǔ)。這個階段需要完成的主要工作內(nèi)容是：擬定測試計劃，論證那些在開發(fā)過程中難于管理和控制的因素，明確軟件產(chǎn)品的最重要部分（風(fēng)險評估）。 （1）概要測試計

7、劃 概要測試計劃是在軟件開發(fā)初期制定，其內(nèi)容包括： 定義被測試對象和測試目標(biāo)； 確定測試階段和測試周期的劃分； 制定測試人員，軟、硬件資源和測試進度等方面的計劃； 明確任務(wù)與分配及責(zé)任劃分； 規(guī)定軟件測試方法、測試標(biāo)準(zhǔn)。比如，語句覆蓋率達(dá)到98%，三級以上的錯誤改正率達(dá)98%等； 所有決定不改正的錯誤都必須經(jīng)專門的質(zhì)量評審組織同意； 支持環(huán)境和測試工具等。,（2）詳細(xì)測試計劃 詳細(xì)測試計劃是測試者或測試小組的具體的測試實施計劃，它規(guī)定了測試者負(fù)責(zé)測試的內(nèi)容、測試強度和工作進度，是檢查測試實際執(zhí)行情況的重要標(biāo)準(zhǔn)。 詳細(xì)測試計劃的主要內(nèi)容有：計劃進度和實際進度對照表；測試要點；測試策略；尚未解決的

8、問題和障礙。 （3）制定主要內(nèi)容 計劃進度和實際進度對照表；測試要點；測試策略；尚未解決的問題和障礙。,（4）制定測試大綱（用例） 測試大綱是軟件測試的依據(jù)，保證測試功能不被遺漏，并且功能不被重復(fù)測試，使得能合理安排測試人員，使得軟件測試不依賴于個人。 測試大綱包括：測試項目、測試步驟、測試完成的標(biāo)準(zhǔn)以及測試方式（手動測試或自動測試）。測試大綱不僅是軟件開發(fā)后期測試的依據(jù)，而且在系統(tǒng)的需求分析階段也是質(zhì)量保證的重要文檔和依據(jù)。無論是自動測試還是手動測試，都必須滿足測試大綱的要求。 測試大綱的本質(zhì)：從測試的角度對被測對象的功能和各種特性的細(xì)化和展開。針對系統(tǒng)功能的測試大綱是基于軟件質(zhì)量保證人員對

9、系統(tǒng)需求規(guī)格說明書中有關(guān)系統(tǒng)功能定義的理解，將其逐一細(xì)化展開后編制而成的。 測試大綱的好處：保證測試功能不被遺漏，使得軟件功能不被重復(fù)測試，合理安排測試人員，使得軟件測試不依賴于個人。測試大綱不僅是軟件開發(fā)后期測試的依據(jù)，而且在系統(tǒng)的需求分析階段也是質(zhì)量保證的重要文檔和依據(jù)。,（5）制定測試通過或失敗的標(biāo)準(zhǔn) 測試標(biāo)準(zhǔn)為可觀的陳述，它指明了判斷/確認(rèn)測試在何時結(jié)束，以及所測試的應(yīng)用程序的質(zhì)量。測試標(biāo)準(zhǔn)可以是一系列的陳述或?qū)α硪晃臋n（如測試過程指南或測試標(biāo)準(zhǔn)）的引用。 測試標(biāo)準(zhǔn)應(yīng)該指明： 確切的測試目標(biāo) 度量的尺度如何建立 使用了那些標(biāo)準(zhǔn)對度量進行評價,（6）制定測試掛起標(biāo)準(zhǔn)和恢復(fù)的必要條件 指明

10、掛起全部或部分測試項的標(biāo)準(zhǔn)，并指明恢復(fù)測試的標(biāo)準(zhǔn)及其必須重復(fù)的測試活動。 （7）制定測試任務(wù)安排 明確測試任務(wù)，對每項任務(wù)都必須明確7個主題。 任務(wù)：用簡潔的句子對任務(wù)加以說明 方法和標(biāo)準(zhǔn)：指明執(zhí)行該任務(wù)時，應(yīng)該采用的方法以及所應(yīng)遵守的標(biāo)準(zhǔn)。 輸入輸出：給出該任務(wù)所必需的輸入輸出 時間安排：給出任務(wù)的起始和持續(xù)時間 資源：給出任務(wù)所需要的人力和物力資源 風(fēng)險和假設(shè)：指明啟動該任務(wù)應(yīng)滿足的假設(shè)，以及任務(wù)執(zhí)行可能存在的風(fēng)險 角色和職責(zé)：指明由誰負(fù)責(zé)該任務(wù)的組織和執(zhí)行，以及誰將擔(dān)負(fù)怎樣的職責(zé),（8）制定應(yīng)交付的測試工作產(chǎn)品 指明應(yīng)交付的文檔、測試代碼和測試工具，一般包括這些文檔：測試計劃、測試方案、

11、測試用例、測試規(guī)程、測試日志、測試總結(jié)報告、測試輸入與輸出數(shù)據(jù)、測試工具。 （9）制定工作量估計 給出前面定義任務(wù)的人力需求和總計 （10）編寫測試方案文檔 測試方案文檔是設(shè)計測試階段文檔，指明為完成軟件或軟件集成的特性測試而進行的設(shè)計測試方法的細(xì)節(jié)文檔。,軟件開發(fā)、軟件測試與測試計劃制定的并行關(guān)系如圖6-1所示。,圖6-1 軟件開發(fā)、軟件測試與測試計劃制定的并行關(guān)系,6.2.1 測試文檔 6.2.2 軟件生命周期各階段的測試任務(wù)與可交付的文檔,1測試文檔的定義 測試文檔（Testing Documentation）記錄和描述了整個測試流程，它是整個測試活動中非常重要的文件。測試過程實施所必備

12、的核心文檔是：測試計劃、測試用例（大綱）和軟件測試報告。,2測試文檔的重要性 軟件測試是一個很復(fù)雜的過程，涉及軟件開發(fā)其他階段的工作，對于提高軟件質(zhì)量、保證軟件正常運行有著十分重要的意義，因此必須把對測試的要求、過程及測試結(jié)果以正式的文檔形式寫下來。軟件測試文檔用來描述要執(zhí)行的測試及測試的結(jié)果?？梢哉f，測試文檔的編制是軟件測試工作規(guī)范化的一個重要組成部分。 軟件測試文檔不只在測試階段才開始考慮，它應(yīng)在軟件開發(fā)的需求分析階段就開始著手編制，軟件開發(fā)人員的一些設(shè)計方案也應(yīng)在測試文檔中得到反映，以利于設(shè)計的檢驗。測試文檔對于測試階段的工作有著非常明顯的指導(dǎo)作用和評價作用。即便在軟件投入運行的維護階段

13、，也常常要進行再測試或回歸測試，這時仍會用到軟件測試文檔。,3測試文檔的內(nèi)容 整個測試流程會產(chǎn)生很多個測試文檔，一般可以把測試文檔分為兩類：測試計劃和測試分析報告。 測試計劃文檔描述將要進行的測試活動的范圍、方法、資源和時間進度等。測試計劃中羅列了詳細(xì)的測試要求，包括測試的目的、內(nèi)容、方法、步驟以及測試的準(zhǔn)則等。在軟件的需求和設(shè)計階段就要開始制定測試計劃，不能在開始測試的時候才制定測試計劃。通常，測試計劃的編寫要從需求分析階段開始，直到軟件設(shè)計階段結(jié)束時才完成。 測試報告是執(zhí)行測試階段的測試文檔，對測試結(jié)果進行分析說明。說明軟件經(jīng)過測試以后，結(jié)論性的意見如何，軟件的能力如何，存在哪些缺陷和限制

14、等，這些意見既是對軟件質(zhì)量的評價，又是決定該軟件能否交付用戶使用的依據(jù)。由于要反映測試工作的情況，自然應(yīng)該在測試階段編寫。,測試報告包含了相應(yīng)的測試項的執(zhí)行細(xì)節(jié)。軟件測試報告是軟件測試過程中最重要的文檔，記錄問題發(fā)生的環(huán)境，如各種資源的配置情況，問題的再現(xiàn)步驟以及問題性質(zhì)的說明。測試報告更重要的是還記錄了問題的處理進程，而問題的處理進程從一定角度上反映了測試的進程和被測軟件的質(zhì)量狀況以及改善過程。 計算機軟件測試文檔編制規(guī)范國家標(biāo)準(zhǔn)給出了更具體的測試文檔編制建議，其中包括以下幾個內(nèi)容。,測試計劃 描述測試活動的范圍、方法、資源和進度，其中規(guī)定了被測試的對象，被測試的特性、應(yīng)完成的測試任務(wù)、人員

15、職責(zé)及風(fēng)險等。 測試設(shè)計規(guī)格說明 詳細(xì)描述測試方法，測試用例設(shè)計以及測試通過的準(zhǔn)則等。 測試用例規(guī)格說明 測試用例文檔描述一個完整的測試用例所需要的必備因素，如輸入、預(yù)期結(jié)果、測試執(zhí)行條件以及對環(huán)境的要求、對測試規(guī)程的要求等。 測試步驟規(guī)格說明 測試規(guī)格文檔指明了測試所執(zhí)行活動的次序，規(guī)定了實施測試的具體步驟。它包括測試規(guī)程清單和測試規(guī)程列表兩部分。 測試日志 日志是測試小組對測試過程所作的記錄。 測試事件報告 報告說明測試中發(fā)生的一些重要事件。 測試總結(jié)報告 對測試活動所作的總結(jié)和結(jié)論。 上述測試文檔中，前4項屬于測試計劃類文檔，后3項屬于測試分析報告類文檔。,通常軟件生命周期可分為以下6個

16、階段：需求階段、功能設(shè)計階段、詳細(xì)設(shè)計階段、編碼階段、軟件測試階段以及運行/維護階段，相鄰兩個階段之間可能存在一定程度的重復(fù)以保證階段之間的順利銜接，但每個階段的結(jié)束是有一定的標(biāo)志，例如已經(jīng)提交可交付文檔等。 1需求階段 （1）測試輸入 需求計劃（來自開發(fā)）。 （2）測試任務(wù) 制定驗證和確認(rèn)測試計劃； 對需求進行分析和審核； 分析并設(shè)計基于需求的測試，構(gòu)造對應(yīng)的需求覆蓋或追蹤矩陣。,（3）可交付的文檔 驗收測試計劃（針對需求設(shè)計）； 驗收測試報告（針對需求設(shè)計）。 2功能設(shè)計階段 （1）測試輸入 功能設(shè)計規(guī)格說明（來自開發(fā)）。 （2）測試任務(wù) 功能設(shè)計驗證和確認(rèn)測試計劃； 分析和審核功能設(shè)計規(guī)

17、格說明； 可用性測試設(shè)計； 分析并設(shè)計基于功能的測試，構(gòu)造對應(yīng)的功能覆蓋矩陣； 實施基于需求和基于功能的測試。,（3）可交付的文檔 主確認(rèn)測試計劃； 驗收測試計劃（針對功能設(shè)計）； 驗收測試報告（針對功能設(shè)計）。 3詳細(xì)設(shè)計階段 （1）測試輸入 詳細(xì)設(shè)計規(guī)格說明（來自開發(fā)）。 （2）測試任務(wù) 詳細(xì)設(shè)計驗收測試計劃； 分析和審核詳細(xì)設(shè)計規(guī)格說明； 分析并設(shè)計基于內(nèi)部的測試。 （3）可交付的文檔 詳細(xì)確認(rèn)測試計劃； 驗收測試計劃（針對詳細(xì)設(shè)計）； 驗收測試報告（針對詳細(xì)設(shè)計）； 測試設(shè)計規(guī)格說明。,4編碼階段 （1）測試輸入 代碼（來自開發(fā)）。 （2）測試任務(wù) 代碼驗收測試計劃； 分析代碼； 驗證

18、代碼； 設(shè)計基于外部的測試； 設(shè)計基于內(nèi)部的測試。 （3）可交付的文檔 測試用例規(guī)格說明； 需求覆蓋或追蹤矩陣； 功能覆蓋矩陣； 測試步驟規(guī)格說明； 驗收測試計劃（針對代碼）； 驗收測試報告（針對代碼）。,5測試階段 （1）測試輸入 要測試的軟件； 用戶手冊。 （2）測試任務(wù) 制定測試計劃； 審查由開發(fā)部門進行的單元和集成測試； 進行功能測試； 進行系統(tǒng)測試； 審查用戶手冊。 （3）可交付的文檔 測試記錄； 測試事故報告； 測試總結(jié)報告。,6運行/維護階段 （1）測試輸入 已確認(rèn)的問題報告； 軟件生命周期。軟件生命周期是一個重復(fù)的過程。如果軟件被修改了，開發(fā)和測試活動都要回歸到與修改相對應(yīng)的生

19、命周期階段。 （2）測試任務(wù) 監(jiān)視驗收測試； 為確認(rèn)的問題開發(fā)新的測試用例； 對測試的有效性進行評估。 （3）可交付的文檔 可升級的測試用例庫。,1測試用例 測試用例（Test Case）是為了高效率地發(fā)現(xiàn)軟件缺陷而精心設(shè)計的少量測試數(shù)據(jù)。實際測試中，由于無法達(dá)到窮舉測試，所以要從大量輸入數(shù)據(jù)中精選有代表性或特殊性的數(shù)據(jù)來作為測試數(shù)據(jù)。好的測試用例應(yīng)該能發(fā)現(xiàn)尚未發(fā)現(xiàn)的軟件缺陷。 2測試用例文檔應(yīng)包含以下內(nèi)容： （1）測試用例表 測試用例表如表6-1所示。對其中一些項目做如下說明： 測試項目：指明并簡單描述本測試用例是用來測試哪些項目、子項目或軟件特性的。 用例編號：對該測試用例分配唯一的標(biāo)識號

20、。 用例級別：指明該用例的重要程度。測試用例的級別分為4級：級別1（基本）、級別2（重要）、級別3（詳細(xì)）、級別4（生僻）。 執(zhí)行操作：執(zhí)行本測試用例所需的每一步操作。 預(yù)期結(jié)果：描述被測項目或被測特性所希望或要求達(dá)到的輸出或指標(biāo)。 實測結(jié)果：列出實際測試時的測試輸出值，判斷該測試用例是否通過。 備注。如需要，則填寫“特殊環(huán)境需求（硬件、軟件、環(huán)境）”、“特殊測試步驟要求”、“相關(guān)測試用例”等信息。,測試用例清單 測試用例清單如表6-2所示。 表6-1 測試用例表,表6-2 測試用例清單,測試總結(jié)報告主要包括測試結(jié)果統(tǒng)計表、測試問題表和問題統(tǒng)計表、測試進度表、測試總結(jié)表等。 1測試結(jié)果統(tǒng)計表 測試結(jié)果統(tǒng)計表主要是對測試項目進行統(tǒng)計，統(tǒng)計計劃測試項和實際測試項的數(shù)量，以及測試項通過多少、失敗多少等。測試結(jié)果統(tǒng)計表如表6-3所示。,表6-3 測試結(jié)果統(tǒng)計表,其中，【Y】表示測試結(jié)果全部通過，【P】表示測試結(jié)果部分通過，【N】表示測試結(jié)果絕大多數(shù)沒通過，【N/A】表示無法測試或測試用例不適合