關(guān)于v1.2.9核心性能指標(biāo)評(píng)測(cè)

1、關(guān)于 V1.2.9 系統(tǒng)性能評(píng)測(cè)指標(biāo)與方法建議2013 年 9 月 3 日目 錄評(píng)測(cè)目標(biāo)11.2.評(píng)測(cè)階段23.要求2評(píng)測(cè)3.1. 2第一階段測(cè)試3.2.第二階段測(cè)試. 34.評(píng)測(cè)指標(biāo)與計(jì)算方法44.1.單機(jī)建模速度44.2.單機(jī)比對(duì)速度44.3.單機(jī)查重速度54.4.單機(jī)多實(shí)例比對(duì)速度55.評(píng)測(cè)數(shù)據(jù)66.評(píng)測(cè)步驟71. 評(píng)測(cè)目標(biāo)（一）確定升級(jí)后的人像比對(duì)系統(tǒng)在雙路“E5-2620、E5-2650”上的性能指標(biāo)（比對(duì)、查重、建模）的最值；（二）確定升級(jí)后的人像比對(duì)系統(tǒng)在雙路“E5-2620、E5-2650”上比對(duì)速度最值下的 CPU 最高利用率情況；（三）若在比對(duì)速度最值下，CPU 未充分利用

2、時(shí)，通過測(cè)試排除是否是內(nèi)存瓶頸所致，還是比對(duì)應(yīng)用所致。（四）評(píng)測(cè)在某一 4 路 CPU 下的最值、最高利用率。性能指標(biāo)（比對(duì)、查重、建模），確定（五）若在 4 路比對(duì)速度最值下，CPU 未充分利用時(shí)，通過測(cè)試排除是否是內(nèi)存瓶頸所致，還是比對(duì)應(yīng)用所致。2. 評(píng)測(cè)階段整個(gè)評(píng)測(cè)分兩個(gè)部分按兩個(gè)階段組成：第一階段：在公司測(cè)試雙路“E5-2620、E5-2650”的相關(guān)指標(biāo)，內(nèi)容涉及第1 部分中的（一）、（二）、（三）3 項(xiàng)。第二階段：尋求測(cè)試 4 路 CPU 的相關(guān)指標(biāo)，內(nèi)容涉及第 1 部分中的（四）、（五）2 項(xiàng)。3. 評(píng)測(cè)要求3.1. 第一階段測(cè)試軟硬件配置3.2. 第二階段測(cè)試軟硬件配置序號(hào)指標(biāo)

3、項(xiàng)技術(shù)指標(biāo)系統(tǒng)備注1數(shù)據(jù)庫(kù)服務(wù)器 1 臺(tái)CPU：顆el Xeon E5-2620；MEM：DDR3 16G；HD: 1000 GBOracle 10gCPU 差點(diǎn)只要不是瓶頸就行序號(hào)指標(biāo)項(xiàng)技術(shù)指標(biāo)系統(tǒng)備注1數(shù)據(jù)庫(kù)服務(wù)器 1 臺(tái)CPU：顆el Xeon E5-2620；MEM：DDR3 16G；HD: 1000 GBOracle 10gCPU 差點(diǎn)只要不是瓶頸就行2比對(duì)與建模服務(wù)器1 臺(tái)（可與比對(duì)服務(wù)器復(fù)用）CPU：顆el Xeon E5-2620、E5-2650； MEM：DDR3 48G；HD: 2 塊 147GBWindows 2008 x64企業(yè)版 sp2務(wù)必保障3應(yīng)用服務(wù)器（WEB、中

4、心應(yīng)用服務(wù)）1 臺(tái)CPU：顆el Xeon 5620；MEM：DDR3 16G；HD: 2 塊 147GBWindows 2008 x64企業(yè)版 sp2CPU 差點(diǎn)只要不是瓶頸就行4網(wǎng)絡(luò)環(huán)境網(wǎng)絡(luò)，千兆網(wǎng)4. 評(píng)測(cè)指標(biāo)與計(jì)算方法4.1. 單機(jī)建模速度：?jiǎn)螜C(jī)情況下，每秒完成的待建模的人臉檢測(cè)、特征提取、入庫(kù)保存的個(gè)數(shù)。總數(shù)/(建模開時(shí)時(shí)間-建模計(jì)算方法：在單機(jī)，單實(shí)例的情況下，未建模結(jié)束時(shí)間)。相關(guān)細(xì)化指標(biāo)：序號(hào)線程數(shù)雙 E2-5620雙 E2-5650CPU 利用率單機(jī)建模速度（個(gè)/秒）CPU 利用率單機(jī)建模速度（個(gè)/秒）112234485166322比對(duì)與建模服務(wù)器1 臺(tái)（可與比對(duì)服務(wù)器復(fù)用）

5、CPU：4 顆el Xeon CPU；MEM：DDR3 48G； HD: 2 塊 147GBWindows 2008 x64企業(yè)版 sp2可請(qǐng)協(xié)調(diào)3應(yīng)用服務(wù)器（WEB、中心應(yīng)用服務(wù)）1 臺(tái)CPU：顆el Xeon 5620；MEM：DDR3 32G；HD: 2 塊 147GBWindows 2008 x64企業(yè)版 sp2CPU 差點(diǎn)只要不是瓶頸就行4網(wǎng)絡(luò)環(huán)境網(wǎng)絡(luò)，千兆網(wǎng)注：1、根據(jù)評(píng)測(cè)時(shí)情況，可進(jìn)一步確定是否細(xì)化線程評(píng)測(cè)數(shù)內(nèi)容。2、針對(duì)4 路評(píng)測(cè)，可針對(duì)核數(shù)，按以上 2 的冪次線程數(shù)據(jù)進(jìn)試和。4.2. 單機(jī)比對(duì)速度：?jiǎn)螜C(jī)下，通比時(shí)的每秒比對(duì)次數(shù)。計(jì)算方法：在單機(jī)，單實(shí)例的情況下，提交任務(wù)數(shù)*數(shù)

6、據(jù)量/(比對(duì)開始時(shí)間-比對(duì)結(jié)束時(shí)間)。比對(duì)開始與結(jié)束時(shí)間可取數(shù)據(jù)庫(kù)值參考，另外比對(duì)服務(wù)應(yīng)獨(dú)立其每筆的相應(yīng)時(shí)間（以ms 記）。相關(guān)細(xì)化指標(biāo)：注：1、根據(jù)評(píng)測(cè)時(shí)情況，可進(jìn)一步確定是否細(xì)化線程評(píng)測(cè)數(shù)內(nèi)容。2、針對(duì)4 路評(píng)測(cè)，可針對(duì)核數(shù)，按以上 2 的冪次線程數(shù)據(jù)進(jìn)試和。4.3. 單機(jī)查重速度：在庫(kù)間比對(duì)模式，通比情況下的每秒運(yùn)算速度。計(jì)算方法：在單機(jī)，單實(shí)例的情況下，基礎(chǔ)庫(kù)數(shù)據(jù)量*比對(duì)庫(kù)數(shù)據(jù)量/(比對(duì)開始時(shí)間-比對(duì)結(jié)束時(shí)間)。比對(duì)開始時(shí)間與結(jié)束時(shí)間，應(yīng)由查重服務(wù)下來。相關(guān)細(xì)化指標(biāo)：序號(hào)線程數(shù)雙 E2-5620雙 E2-5650序號(hào)線程數(shù)雙 E2-5620雙 E2-5650CPU 利用率單機(jī)比對(duì)速度（

7、萬次/秒）CPU 利用率單機(jī)比對(duì)速度（萬次/秒）11223448516632注：1、根據(jù)評(píng)測(cè)時(shí)情況，可進(jìn)一步確定是否細(xì)化線程評(píng)測(cè)數(shù)內(nèi)容。2、針對(duì)4 路評(píng)測(cè)，可針對(duì)核數(shù)，按以上 2 的冪次線程數(shù)據(jù)進(jìn)試和。4.4. 單機(jī)多實(shí)例比對(duì)速度：在單實(shí)例比對(duì)情況下，無法提高CPU 利用率，因而部署 2 個(gè)甚至多個(gè)實(shí)例，進(jìn)行比對(duì)，求取其總體運(yùn)算能力之和。計(jì)算方法：在單機(jī)，多實(shí)例的情況下，SUM（實(shí)例 1 單機(jī)比對(duì)速度+實(shí)例 2單機(jī)比對(duì)速度+.)。比對(duì)開始與結(jié)束時(shí)間可取數(shù)據(jù)庫(kù)值參考，另外比對(duì)服務(wù)應(yīng)獨(dú)立其每筆的相應(yīng)時(shí)間（以ms 記）。相關(guān)細(xì)化指標(biāo)：注：1、根據(jù)評(píng)測(cè)時(shí)情況，可進(jìn)一步確定是否細(xì)化線程評(píng)測(cè)數(shù)內(nèi)容。2、針

8、對(duì) 4 路評(píng)測(cè)，可針對(duì)核數(shù)，按以上 2 的冪次線程數(shù)據(jù)進(jìn)試和。3、實(shí)例的配置以單機(jī)單實(shí)例下最值下的配置進(jìn)行，根據(jù)最值下的CPU 利用率，估計(jì)應(yīng)測(cè)試的實(shí)例數(shù)量：1/CPU 利用率+0.5，取整。序號(hào)實(shí)例數(shù)單機(jī)比對(duì)速度（個(gè)/秒）實(shí)例1實(shí)例2實(shí)例3.實(shí)例nCPU 利用率總和112233.CPU 利用率單機(jī)查重速度（萬次/秒）CPU 利用率單機(jī)查重速度（萬次/秒）1最大核數(shù)5. 評(píng)測(cè)數(shù)據(jù)6. 測(cè)試方法6.1. 建模速度測(cè)試方法針對(duì)每一細(xì)項(xiàng)指標(biāo)，對(duì) 10萬張進(jìn)行建模測(cè)試，按計(jì)算方法進(jìn)行。若超過最大核數(shù)，按 2 步長(zhǎng)遞增，直到發(fā)現(xiàn)速度不長(zhǎng)反降為止。（與內(nèi)存瓶頸無關(guān)，因此無須多實(shí)例評(píng)估）6.2. 查重速度測(cè)

9、試方法針對(duì)該指標(biāo)，直接利用經(jīng)驗(yàn)值最大核數(shù)設(shè)置并行運(yùn)算的線程數(shù)。對(duì)查重?cái)?shù)據(jù)A 與查重?cái)?shù)據(jù)B，進(jìn)行庫(kù)間測(cè)試。若，CPU 利用率不高，可進(jìn)一步商榷調(diào)高線程數(shù)進(jìn)度不長(zhǎng)反降為止。試。直到發(fā)現(xiàn)速若 CPU 利用率不高，可能需要進(jìn)一步排除內(nèi)存瓶頸，進(jìn)行多實(shí)例測(cè)試。6.3. 比對(duì)速度測(cè)試方法按該指標(biāo)細(xì)項(xiàng)，直接利用 1000 張?zhí)綔y(cè)樣本，與 2000 萬進(jìn)行通比。直到發(fā)現(xiàn)速度不長(zhǎng)反降為止，若達(dá)到最大線程數(shù)，按 2 步長(zhǎng)遞增。若 CPU 利用率不高，可能需要進(jìn)一步排除內(nèi)存瓶頸，進(jìn)行多實(shí)例測(cè)試。數(shù)據(jù)項(xiàng)數(shù)據(jù)量來 源說 明建模數(shù)據(jù)10 萬張二代證用來測(cè)試建模速度查重?cái)?shù)據(jù)A30 萬張二代證用來進(jìn)行查重比對(duì)，比對(duì)運(yùn)算量應(yīng)為A 數(shù)據(jù)量*B 數(shù)據(jù)量 100 億次查重?cái)?shù)據(jù) B30 萬張二代證比對(duì)數(shù)據(jù)2000 萬張二代證用來進(jìn)行比對(duì)速度測(cè)試探測(cè)樣本1000 張二代證用來提交比對(duì)