圖象質(zhì)量評價技術(shù)的研究進展

圖象質(zhì)量評價技術(shù)的研究進展

在圖像隱藏和數(shù)字水印技術(shù)中，嵌入信息和打印的圖像和原始圖像的視覺效果略有不同。在圖像壓縮、圖像重建和圖像通信過程中，通常需要處理、傳輸、處理、記錄和其他過程。處理的圖像和原始圖像是不同的。如何評估這些圖像的變化是圖像質(zhì)量的主要內(nèi)容。數(shù)字圖像的質(zhì)量主要包括兩個方面：圖像強迫的真實性和圖像的可理解性。如何合理評估圖像的質(zhì)量，不僅是圖像信息信息安全的中心問題之一，也是黑暗識別和信息安全等領(lǐng)域的一個不容忽視的重要問題。1峰信噪比和檢出限傳統(tǒng)的圖象質(zhì)量的評價方法一般可以分為兩種:主觀評價和客觀評價.主觀評價的方法是召集一批實驗觀察者,讓觀察者根據(jù)一些事先規(guī)定的評價尺度或者自己的經(jīng)驗,對測試圖象按視覺效果提出質(zhì)量判斷,并給出質(zhì)量分數(shù),按所有觀察者給出的分數(shù)進行加權(quán)平均,所得的結(jié)果即為圖象的主觀質(zhì)量評價.因為圖象的最終信宿是人,所以這種評價方法似乎更為可靠.但由于操作要求過于復雜,且存在不確定性,如受人的心情、疲勞程度的影響等,在實際應用中受到嚴重限制,甚至根本不適合于某些應用場合.客觀評價方法是用被測圖象偏離原始圖象的誤差來衡量被測圖象的質(zhì)量,其思想來源于數(shù)據(jù)傳輸過程中均方信噪比的思想.常用的作為客觀評價指標的參數(shù)有均方誤差(MSE)和峰值信噪比(PSNR)等.峰值信噪比PSNR(PeakSignaltoNoiseRatio),有些文獻中也稱為峰-峰信噪比的定義如下:給定一幅大小為M×N的數(shù)字化圖象f(x,y)和參考圖象f0(x,y),則圖象f的PSNR為PSNR=10lgf2max1MN∑x=0M?1∑y=0N?1[f(x,y)?f0(x,y)]fmax21ΜΝ∑x=0Μ-1∑y=0Ν-1[f(x,y)-f0(x,y)],(1)引入另一常用質(zhì)量評價指標均方誤差MSE,其中MSE的表達式為MSE=Σx=0M?1Σy=0N?1[f(x,y)?f0(x,y)]2MNΣx=0Μ-1Σy=0Ν-1[f(x,y)-f0(x,y)]2ΜΝ,(2)則PSNR=10lgf2maxMSE.(3)ΡSΝR=10lgfmax2ΜSE.(3)其中fmax是函數(shù)f(x,y)的最大灰度值,例如,常用的8bit的灰度圖象中,則fmax的最大值為255.而在彩色數(shù)字圖象中,由于圖象的顏色用RGB3基色的組合表示,每個顏色分量需用一個字節(jié)表示,于是相應的峰值信噪比可以表示為PSNR=10lg2552(MSE(R)+MSE(G)+MSE(B))/3ΡSΝR=10lg2552(ΜSE(R)+ΜSE(G)+ΜSE(B))/3,(4)3個變量MSE(R),MSE(G),MSE(B)分別為3個基色分量的均方差.也有人將式(4)稱為彩色圖象的平均峰值信噪比,因為上式等價于PSNRˉˉˉˉˉˉˉˉˉ=(PSNRR+PSNRΡSΝRˉ=(ΡSΝRR+ΡSΝRG+PSNRB)/3.(5)其中PSNRR、PSNRG、PSNRB分別為圖象的R、G、B幀的峰值信噪比.MSE與主觀評價的相關(guān)性較差,其結(jié)果常常與人的主觀感覺不一致,因此一般不直接作為圖象質(zhì)量評價指標,大多數(shù)情況下是采用PSNR做為圖象質(zhì)量評價指標,其優(yōu)點是便于計算和理解,能大致反映圖象質(zhì)量.一般情況下,PSNR的值高的圖象質(zhì)量相對較高,通常,當PSNR值在28以上時,圖象質(zhì)量差異不太顯著,當高于35～40時,則肉眼分辨不出差異.PSNR是目前用于圖象質(zhì)量評價的最常用的指標,被錯用的情形也不少.如文獻中,將256×256的8位灰度圖象的PSNR被定義為10lg256×256MSE10lg256×256ΜSE;文獻中對N×N的8位灰度圖象,取PSNR=-10lgN×N1NΣi=0N?1(xi?xˉi)2Ν×Ν1ΝΣi=0Ν-1(xi-xˉi)2均是錯誤的.前者混淆了圖象大小與像素點的灰度值,實際上8bit灰度圖象f(x,y)的灰度最大值只能為28-1=255;后者的公式則完全是錯誤的.PSNR的誤用大多數(shù)表現(xiàn)在對公式內(nèi)參數(shù)意義的理解上,特別是用在256×256的8位灰度圖象上.2新標準的測量方法PSNR目前仍是最常用的圖象質(zhì)量評價標準之一,但是,在實際應用過程中,PSNR有時反映圖象質(zhì)量與人眼觀察的圖象質(zhì)量情況并不完全相符.例如文獻的實驗表明,在同一幅圖象中分別在圖象高頻部分、中低頻部分、低頻部加入白噪聲干擾時,在高頻部分加入干擾時圖象質(zhì)量優(yōu)于其它兩種情況,但三者的峰值信噪比相同.這使得許多人有理由認為PSNR并不是一個很好的圖象質(zhì)量評價指標,由于PSNR的局限性,人們?nèi)栽诓粩嗟奶接?試圖找出更接近人視覺特征的評價指標.目前新的圖象質(zhì)量評價標準大多數(shù)為基于人眼視覺系統(tǒng)(HVS)的測量方法,以期更接近人眼的主觀視覺.新標準大致可以分為兩類:基于視覺感知的測量方法和基于視覺興趣的測量方法.基于視覺感知的圖象評價方法較早也較成功的有基于剛辨差(JND,JustNoticeDifference)的視覺感知方法.由于人眼分辨亮度差異的能力與背景亮度有關(guān),在寬闊的常用背景亮度變化范圍內(nèi),人眼的JND為常數(shù);當背景亮度較強或較弱時,人眼的分辨能力減弱,即JND增大.該方法基于此原理達到對圖象質(zhì)量定量測量的目的.基于視覺興趣的圖象質(zhì)量評價方法的思想是將圖象分為感興趣區(qū)(ROI,RegionofInterest)和不感興趣區(qū),并由感興趣程度對其設定加權(quán)值.整幅圖象的視覺質(zhì)量往往取決于感興趣區(qū)的質(zhì)量,不感興趣區(qū)質(zhì)量的降質(zhì)則影響較小.例如,假設測試圖象中只有一個感興趣區(qū)A1,其面積為S1,不感興趣區(qū)A2,面積為S2,圖象總面積為S=S1+S2.則由此可定義一個自己的均方誤差I(lǐng)MSE:IMSE=1S∣∣∣λ1Σ(x,y)∈S1(f(x,y)?f0(x,y))2+λ2Σ(x,y)∈S2(f(x,y)?f0(x,y))2∣∣∣.(6)ΙΜSE=1S|λ1Σ(x,y)∈S1(f(x,y)-f0(x,y))2+λ2Σ(x,y)∈S2(f(x,y)-f0(x,y))2|.(6)其中:λ1、λ2分別為A1和A2的加權(quán)值,并滿足λ1S1+λ2S2=S,加權(quán)值λ1越大,表示人眼對該區(qū)的興趣程度越大.可以看出,當S1=0,λ2=1或S2=0,λ1=1時,IMSE退化為MSE.該方法能較好的與人眼的主觀視覺相符合.但由于圖象感興趣區(qū)的確定,多個感興趣區(qū)權(quán)值的確定等問題還待研究,故該方法現(xiàn)在仍處于初級研究階段.3其他圖像質(zhì)量評價方法的示例3.1mpqm度量法VandenBranden等在人眼視覺系統(tǒng)的基礎上建立了一種用于評價視頻編碼質(zhì)量的視覺時空模型并提出了MPQM(MovingPictureQualityMetric)質(zhì)量量度.該模型的主要特點是用一個三維濾波器組來模擬HVS的多通道特性,如圖一所示.三維濾波器模擬的過程是先把原始圖象序列粗略地分割成均勻區(qū)域、輪廓和紋理,同時使用濾波器組按照5種空間頻率、4種取向、2種時間頻率將原始圖象序列和編碼誤差序列分解為感知成分,且每一通道中都要考慮對比度敏感度和掩蓋效應;然后將感知通道的輸出進行掩蓋,這一步驟可預測到初級視覺皮層細胞的響應;把所得數(shù)據(jù)收集起來用以解釋高層感知,此過程稱為組合.最后提出了MPQM度量法.考慮到注意力集中和觀看距離的影響,這種度量以三維序列塊為基礎進行計算,其從本質(zhì)上說,就是用Minkowski求和法把通道輸出的幅值結(jié)合在一起,按照失真的程度,予以相應的指數(shù)加權(quán).一個給定序列塊的實際失真E可按下式計算:E={1NE={1ΝΣc=1NΣc=1Ν{1NxNyNt{1ΝxΝyΝtΣt=1NtΣx=1NxΣy=1NyΣt=1ΝtΣx=1ΝxΣy=1Νy|e[x;y;t;c]|}β}1β.(7)|e[x;y;t;c]|}β}1β.(7)其中,e[x;y;t;c]是在位置(x,y)、當前塊的時間為t、通道c處經(jīng)掩蓋的誤差信號;,Nx,Ny和Nt分別表示塊的水平、垂直和時間維數(shù);N是通道數(shù);β是Minkowski求和法的指數(shù).這種MPQM質(zhì)量度量方法較全面地模擬了人眼的視覺特性,能夠在相當大的比特率范圍內(nèi)對視頻質(zhì)量做出較好的評價.但由于頻率分解而增加了算法的運算量,計算的時間較長.因此若想做到對視頻質(zhì)量進行實時評價,還需對此模型做進一步的簡化.3.2主觀評價實驗結(jié)果的相關(guān)性Okomoto等提出了客觀感知方法:三維信噪比(3D-SNR)方法,這種方法是在考慮了視覺時空頻率響應和視覺掩蓋效應的基礎上由普通的SNR形成的.時空頻率特性W(μ,v,f)是由空間頻率特性Ws(μ,v)和時間頻率特性WT(F)相乘而得Ws(μ,v)=2.46(0.1+0.25f)exp(-0.25f),(8)WT(F)=0.134×[1+(F/0.5)]/[1+(F/7.8)2]1.2.(9)式中f=(μ2+v2)1/2,μ是水平空間頻率,v是垂直空間頻率,單位均是c/d(周/度),F是時間頻率,單位是Hz.是由于Ws與WT都近似符合HVS,因此三維加權(quán)信噪比模型比起其他模型更易理解,算法也比較簡單.依據(jù)三維信噪比的模型進行計算機模擬實驗的結(jié)果表明,客觀測試指標與原有的物理信噪比相比,其與主觀評價結(jié)果的相關(guān)性有顯著提高.3.3估計損傷等級的確定Pessoa等經(jīng)過多年的研究,提出了基于圖像分割的客觀參數(shù)視頻質(zhì)量評價方法,該模型的最大特點是每個客觀參數(shù)在平坦區(qū),紋理區(qū)和邊緣區(qū)中分別計算.其主要思路如下:首先利用分割算法把圖像分為平坦區(qū),紋理區(qū)和邊緣區(qū),為每個區(qū)計算一套客觀參數(shù);然后通過確定客觀參數(shù)與一些已得到的主觀評價結(jié)果的關(guān)系,提出一個基于感知的模型;由該感知模型,就可以預測序列的主觀評分了.該感知模型分兩步定義:1)每個客觀參數(shù)和主觀損傷等級之間的關(guān)系近似為log曲線,這樣就為每個參數(shù)得到一個估計的損傷等級.設客觀參數(shù)為D,對應于D的歸一化損傷等級為dD,對dD的估計值為dD,因為dD和每個客觀參數(shù)D之間近似為對數(shù)關(guān)系:dD=1(1+(DM/D)G×100%dD=1(1+(DΜ/D)G×100%,(10)其中,DM和G的選擇應該最小化:e=E[{dD-dD}2].(11)由此,可以得到對應于每個D的dD.2)最終的評價結(jié)果由各分區(qū)的估計損傷級別經(jīng)三步線性組合逐步得到:先把每個區(qū)中由亮度信息和色度信息得到的估計損傷等級分別求出,即{dYP,dYT,dYE}和{dCD,dCT,dCE},P代表平坦區(qū),T代表紋理區(qū),E代表邊緣區(qū),Y代表亮度信息,C代表彩色信息;然后每個分區(qū)中把由亮度和色度得到的估計值線性組合形成每個分區(qū)的估計等級{dp,dT,dE};最后由這3個分區(qū)中的估計值線性預測得到該幅圖像的主觀質(zhì)量評價的估計值d.VQEG(VideoQualityExpertGroup)測試結(jié)果顯示,該模型在絕大部分測試范圍內(nèi)都表現(xiàn)了很好的性能.它不僅能被用于符合MPEG標準的視頻壓縮系統(tǒng)上,也能被應用于評價其它類型的系統(tǒng)(例如基于小波和預測濾波器的編解碼系統(tǒng))和復合信號編解碼系統(tǒng)上.目前在該模型中只對亮度分量進行了分區(qū),如果同時把彩色分量分區(qū),那么會對結(jié)果有一定的改善.4psnr評價標準圖象質(zhì)量的評價技術(shù)在圖象通信、多媒體技術(shù)、信息安全技術(shù)等領(lǐng)域都有重要的應用.隨著多媒體信息技術(shù)的高速發(fā)展,對圖象質(zhì)