GB/T 30975-2014信息技術基于計算機的軟件系統(tǒng)的性能測量與評級

ICS35080

L77.

中華人民共和國國家標準

GB/T30975—2014/ISO/IEC147561999

:

信息技術基于計算機的

軟件系統(tǒng)的性能測量與評級

Informationtechnology—Measurementandratingof

performanceofcomputer-basedsoftwaresystems

(ISO/IEC14756:1999,IDT)

2014-09-03發(fā)布2015-02-01實施

中華人民共和國國家質量監(jiān)督檢驗檢疫總局發(fā)布

中國國家標準化管理委員會

GB/T30975—2014/ISO/IEC147561999

:

目次

前言

…………………………Ⅲ

引言

…………………………Ⅳ

范圍

1………………………1

符合性

2……………………2

規(guī)范性引用文件

3…………………………3

術語和定義

4………………3

縮略語和符號

5……………7

縮略語

5.1………………7

符號

5.2…………………7

測量

6………………………8

配置需求

6.1……………8

用戶模擬

6.2……………9

測量規(guī)程

6.3……………10

測量有效性的證明

6.4…………………11

性能值的計算

7SUT……………………12

平均執(zhí)行時間

7.1………………………12

吞吐量

7.2………………12

適時吞吐量

7.3…………………………12

用于評級的基礎數(shù)據(jù)

8……………………12

用戶需求

8.1……………12

用于軟件效率評級的基準環(huán)境

8.2……………………12

性能值評級

9………………13

計算性能參考值

9.1……………………13

計算性能評級值

9.2……………………13

總體性能評級

9.3SUT………………13

性能評估

9.4……………13

輸入需求

10………………14

描述

10.1SUT…………………………14

工作負載參數(shù)集

10.2…………………15

用于測量確認的輸入

10.3……………17

測量

11……………………18

測量規(guī)程

11.1…………………………18

單個評級區(qū)間

11.2……………………19

測量規(guī)程的輸出

12………………………20

測量日志文件

12.1……………………20

計算結果文件

12.2……………………20

Ⅰ

GB/T30975—2014/ISO/IEC147561999

:

測量確認

13………………20

計算正確性確認

13.1SUT……………21

準確度確認

13.2RTE…………………21

測得的平均執(zhí)行時間的統(tǒng)計顯著性確認

13.3………21

性能值計算

14SUT………………………22

平均執(zhí)行時間

14.1……………………22

吞吐量

14.2……………22

適時吞吐量

14.3………………………22

測得性能值的評級

15SUT………………23

評級級別規(guī)格說明

15.1………………23

計算性能參考值

15.2…………………23

計算評級值

15.3………………………23

評級

15.4………………24

附錄規(guī)范性附錄基本功能規(guī)格說明

A()RTE………26

附錄規(guī)范性附錄附加計算公式

B()……………………27

附錄規(guī)范性附錄工作負載描述格式

C()………………33

附錄規(guī)范性附錄日志文件格式

D()……………………36

附錄資料性附錄實用程序

E()…………37

附錄資料性附錄工作負載示例

F()……………………39

Ⅱ

GB/T30975—2014/ISO/IEC147561999

:

前言

本標準按照給出的規(guī)則起草

GB/T1.1—2009。

本標準使用翻譯法等同采用信息技術基于計算機的軟件系統(tǒng)的性能測量

ISO/IEC14756:1999《

與評級

》。

本標準由全國信息技術標準化技術委員會提出并歸口

(SAC/TC28)。

本標準起草單位北京郵電大學中國電子技術標準化研究院山東省計算中心山東省計算機網(wǎng)

:、、、

絡重點實驗室

。

本標準主要起草人史慧玲楊美紅李剛韓明軍鄒豐義周鳴樂韓慶良顧衛(wèi)東董火民

:、、、、、、、、、

韓紅強劉建毅胡宇高翊王樅

、、、、。

Ⅲ

GB/T30975—2014/ISO/IEC147561999

:

引言

在設計和使用數(shù)據(jù)處理系統(tǒng)時執(zhí)行速度是一個重要的性質該性質主要受系統(tǒng)中所使用軟件的

,。

效率影響測量軟件系統(tǒng)執(zhí)行速度以及軟件效率影響是最關心的問題

。,,。

為了測量軟件對一個數(shù)據(jù)處理系統(tǒng)在時變行為方面的影響有必要測量整個系統(tǒng)的時變行為基

,。

于本標準建議的測量規(guī)程可定義和計算軟件時間效率的數(shù)值

,。

時變行為可重復估算是非常重要的在實驗中使用真實用戶是不可能的一個原因是真實用戶不

。,

可能像計算機那樣在沒有偏差的前提下重復執(zhí)行操作另一個原因是當工作或任務流是來自很多用戶

,

時若由真實用戶來執(zhí)行這樣的實驗需要花費非常高的代價因此在測試中需要采用模擬器該模擬

,,。,,

器通過一個輔助數(shù)據(jù)處理系統(tǒng)來模擬多用戶操作

。

這意味著要根據(jù)本標準進行性能測量和評級需要借助工具該工具應是按照本標準規(guī)范要求來

,。

運行的模擬器應證明實際使用的模擬器滿足這些規(guī)范

。。

所有相關實驗細節(jié)都通過用戶模擬器記錄在日志文件中通過該日志文件可計算出描述時變行

。,

為的值如響應時間和吞吐量的值根據(jù)這些性能值可計算出軟件效率評級值

()。,。

并不是所有性能值都需要進行測量和評級例如對于一個具有簡單負載的軟件系統(tǒng)只有很少的

。,,

交互任務或者只有很小批量的執(zhí)行要求則只需要定義部分性能指標及其值該方法也適用于測量和

,,。

評級大的復雜的基于計算機的軟件系統(tǒng)可處理由一系列不同用戶產(chǎn)生的復雜工作流

、(CBSS),CBSS

或任務流定義中有必要包括一些數(shù)學術語目的是為了計算性能值和評級值校驗測量運行和評級步

。,、

驟的正確性以及為了確定性能值和評級結果的統(tǒng)計上的意義獲取精確的數(shù)學依據(jù)

,()。

測量結果由計算的性能值組成包括吞吐量和執(zhí)行時間的值性能評估的最終結果由評級

,。CBSS

值構成評級值可通過比較性能值與用戶需求獲得另外如果需要通過與一個可參考的如

。。,,CBSS(,

具有相同硬件配置但卻具有相同功能的應用程序的不同版本性能值相比較可對待測性能值

,),CBSS

進行評級

。

評級結果是一組值每個值或者大于或者小于或者等于分別表示性能好于壞于等于定

,1,1,1,、、

義的需求或者是另一個作為參考的待測系統(tǒng)特性最終的一組評級值評估工作負載中分別定義的各

()。

個任務類型

。

附錄和附錄包含軟件以及特殊的數(shù)據(jù)因為不能印刷故本標準未提供在這兩個附錄中都

EF,,。

提供了簡短的概述

。

Ⅳ

GB/T30975—2014/ISO/IEC147561999

:

信息技術基于計算機的

軟件系統(tǒng)的性能測量與評級

1范圍

本標準界定了對基于計算機的軟件系統(tǒng)面向用戶的性能如何測量和評級從用戶例如各

(CBSS)。(

種不同終端的用戶或者數(shù)據(jù)處理中心的操作用戶和商業(yè)用戶角度看就是一種數(shù)據(jù)處理系統(tǒng)

,),CBSS。

包括硬件及其所有軟件系統(tǒng)軟件和應用軟件這些是實施用戶所需的數(shù)據(jù)處理功能所要

CBSS(),

求的或可影響到的時變行為

,CBSS。

本標準適用于測試所有受時間約束的系統(tǒng)或系統(tǒng)的一部分同樣網(wǎng)絡可以是某個系統(tǒng)的組成部

。,

分或者可成為測試的主題本標準所界定的方法不限于像經(jīng)典的批處理或終端宿主系統(tǒng)等特例例

,。-,

如也包括客戶服務器系統(tǒng)或按廣義理解對任務界定的實時系統(tǒng)但是就測試大環(huán)境所需花費來

,-“”。

說測試的實用性會受到限制

,。

本標準規(guī)定了面向用戶的性能術語的關鍵指標以及測量和評級這些性能值的方法所規(guī)定的性

,。

能值描述了用戶命令任務的執(zhí)行速度的性能值即如下三位一體的

(),“”:

執(zhí)行時間

———;

吞吐量

———;

適時性

———。

用戶命令以下稱為任務在內部結構上可以很簡單也可以很復雜一項任務可能是一項作業(yè)事

,,,。、

務過程或更為復雜的結構但都根據(jù)評價者的需要界定一個啟動時間和結束時間進行性能評價時

、,,。,

除單個響應時間外還可參考商務事務處理完成時間使用本標準來測量系統(tǒng)的時變行為

,,。

評級可根據(jù)用戶需求來完成或者通過與兩個或更多的已測量系統(tǒng)類型或版本相比較來完成

,