第三章 流媒體編解碼技術(shù)

1、vMPEG-1 MPEG-1 和和 MPEG-2 MPEG-2 標準標準vMPEG-4 MPEG-4 視頻編碼標準視頻編碼標準vMPEG-7 MPEG-7 標準標準vH.263+ H.263+ 和和 H.263+ H.263+ 標準標準vMPEGMPEG：Moving Pictures Experts GroupMoving Pictures Experts Group（運動圖像專家組）（運動圖像專家組）v負責制訂適用于數(shù)字存儲媒介、電視廣播和負責制訂適用于數(shù)字存儲媒介、電視廣播和通信等應(yīng)用場合的視頻和音頻數(shù)據(jù)的壓縮編通信等應(yīng)用場合的視頻和音頻數(shù)據(jù)的壓縮編碼標準碼標準vMEPG-1MEPG-1

2、，MEPG-2MEPG-2，MEPG-4MEPG-4，MEPG-7 MEPG-7 和和 MEPG-21MEPG-213.2 MPEG-1 3.2 MPEG-1 和和 MPEG-2 MPEG-2 標準標準vMPEG-1 MPEG-1 標準全稱：標準全稱：Coding of Moving Pictures Coding of Moving Pictures and Associated Audio for Digital Storage and Associated Audio for Digital Storage Media at up to about 1.5Mbp/sMedia at up

3、 to about 1.5Mbp/sv第一部分說明了如何根據(jù)第二部分（視頻）以及第第一部分說明了如何根據(jù)第二部分（視頻）以及第三部分（音頻）的規(guī)定，對音頻和視頻進行復(fù)合編三部分（音頻）的規(guī)定，對音頻和視頻進行復(fù)合編碼。碼。v第四部分說明了檢驗解碼器或編碼器的輸出比特流第四部分說明了檢驗解碼器或編碼器的輸出比特流符合前三部分規(guī)定的過程。符合前三部分規(guī)定的過程。v第五部分是一個用完整的第五部分是一個用完整的C C語言實現(xiàn)的編碼和解碼語言實現(xiàn)的編碼和解碼器。器。vMPEG-2 MPEG-2 標準全稱：標準全稱：Generic Coding of Moving Generic Coding of Mo

4、ving Pictures and Associated Audio InformationPictures and Associated Audio Information3.2.1 MPEG-1/-2 3.2.1 MPEG-1/-2 標準中的三種編碼類型圖像標準中的三種編碼類型圖像vI I 幀幀 A I-frame is encoded using only information from within that frame(intra coded) - no temporal compression(inter coded)vP P 幀幀 P frame (predicted fram

5、e) use preceding frame as reference imagevB B 幀幀 B frame (bidirectional frame) use both preceding frame and following frame as reference imagesI P B B B P B B B P B B B1 5 2 3 4 9 6 7 8 13 10 11 12A typical group of pictures in coding orderI B B B P B B B P B B B PA typical group of pictures in disp

6、lay order3.2.2 3.2.2 視頻碼流的分層結(jié)構(gòu)視頻碼流的分層結(jié)構(gòu)v視頻數(shù)據(jù)經(jīng)過壓縮編碼后形成視頻基本碼流視頻數(shù)據(jù)經(jīng)過壓縮編碼后形成視頻基本碼流（ESES）vMPEG MPEG 用句法規(guī)定了一個分層結(jié)構(gòu)用句法規(guī)定了一個分層結(jié)構(gòu)v對分層要求：支持通用性、靈活性和有效性對分層要求：支持通用性、靈活性和有效性vMPEG MPEG 視頻基本碼流的分層結(jié)構(gòu)視頻基本碼流的分層結(jié)構(gòu)v從上至下依次為：視頻序列層從上至下依次為：視頻序列層(Sequence)(Sequence)，圖，圖像組層像組層(GOP(GOP：GroupofPictureGroupofPicture) )，圖像層，圖像層(Pic

7、ture)(Picture)，像條層，像條層(Slice)(Slice)或宏塊條（片）層，或宏塊條（片）層，宏塊層宏塊層(MacroBlock(MacroBlock) )和像塊層和像塊層(Block)(Block)。 v除宏塊層和像塊層外，上面四層中都有相應(yīng)除宏塊層和像塊層外，上面四層中都有相應(yīng)的起始碼，可用于因誤碼或其它原因收發(fā)兩的起始碼，可用于因誤碼或其它原因收發(fā)兩端失步時，解碼器重新捕捉同步。因此一次端失步時，解碼器重新捕捉同步。因此一次失步將至少丟失一個像條的數(shù)據(jù)失步將至少丟失一個像條的數(shù)據(jù) 。3.2.2 視頻碼流的分層結(jié)構(gòu)視頻碼流的分層結(jié)構(gòu)圖像序列頭圖像序列頭圖像組圖像組圖像組圖像組

8、.圖像組圖像組序列尾序列尾圖像頭圖像頭像條像條MBS像條像條MBS.圖像組頭圖像組頭圖像（圖像（I,P,B)圖像（圖像（I,P,B).像條頭像條頭宏塊宏塊MB宏塊宏塊MB. 1 88 2 88 3 88 4 88 5 88 6 88 88圖像序列層圖像序列層圖像組層圖像組層圖像層圖像層像條層（宏塊條層）像條層（宏塊條層）宏塊層宏塊層像塊層（塊層）像塊層（塊層）YCRCBv序列指構(gòu)成某路節(jié)目的圖像序列，序列起始序列指構(gòu)成某路節(jié)目的圖像序列，序列起始碼后的序列頭中包含了圖像尺寸，寬高比，碼后的序列頭中包含了圖像尺寸，寬高比，圖像速率等信息。序列擴展中包含了一些附圖像速率等信息。序列擴展中包含了一些

9、附加數(shù)據(jù)。為保證能隨時進入圖像序列，序列加數(shù)據(jù)。為保證能隨時進入圖像序列，序列頭是重復(fù)發(fā)送的頭是重復(fù)發(fā)送的 。3.2.2 3.2.2 視頻碼流的分層結(jié)構(gòu)視頻碼流的分層結(jié)構(gòu)序列層序列層3.2.2 3.2.2 視頻碼流的分層結(jié)構(gòu)視頻碼流的分層結(jié)構(gòu)GOPGOP層層v一個圖像組由相互間有預(yù)測和生成關(guān)系的一組一個圖像組由相互間有預(yù)測和生成關(guān)系的一組I I、P P、B B圖像構(gòu)成，但頭一幀圖像總是圖像構(gòu)成，但頭一幀圖像總是I I幀。幀。vGOPGOP頭中包含了時間信息。頭中包含了時間信息。v問題：在兩個參考幀之間插入幾個問題：在兩個參考幀之間插入幾個B B幀？幀？ （1 1）B B幀數(shù)目的增加會降低幀數(shù)目

10、的增加會降低B B幀和參考幀之間以及參幀和參考幀之間以及參考幀與參考幀之間的相關(guān)性；考幀與參考幀之間的相關(guān)性； （2 2）B B幀數(shù)目的增加要求增大參考幀中運動估計的幀數(shù)目的增加要求增大參考幀中運動估計的搜索范圍；搜索范圍；B B幀數(shù)目的增加會增加接收的延遲時間幀數(shù)目的增加會增加接收的延遲時間和要求增加接收機內(nèi)緩存器的容量；和要求增加接收機內(nèi)緩存器的容量；3.2.2 3.2.2 視頻碼流的分層結(jié)構(gòu)視頻碼流的分層結(jié)構(gòu)圖像層圖像層v包括不同編碼類型的圖像，即包括不同編碼類型的圖像，即I I、B B、P P幀；幀；vMPEG-1MPEG-1中，逐行掃描（幀格式）；中，逐行掃描（幀格式）；vMPEG-

11、2MPEG-2中，逐行或隔行（場格式）掃描；中，逐行或隔行（場格式）掃描；vPICPIC頭中包含了圖像編碼的類型和時間參考信息頭中包含了圖像編碼的類型和時間參考信息 。3.2.2 3.2.2 視頻碼流的分層結(jié)構(gòu)視頻碼流的分層結(jié)構(gòu)宏塊條層宏塊條層v包括若干個連續(xù)宏塊，其順序和行掃描順序包括若干個連續(xù)宏塊，其順序和行掃描順序一致一致v從一個宏塊行（從一個宏塊行（1616行寬）的任何一個宏塊開行寬）的任何一個宏塊開始始vMPEG-2 MPML MPEG-2 MPML 中，一個宏塊條必須在同中，一個宏塊條必須在同一宏塊行中起始和結(jié)束，且一個宏塊條至少一宏塊行中起始和結(jié)束，且一個宏塊條至少包括一個宏塊包

12、括一個宏塊v比特流重新同步的基本單元比特流重新同步的基本單元3.2.2 3.2.2 視頻碼流的分層結(jié)構(gòu)視頻碼流的分層結(jié)構(gòu)宏塊層宏塊層v運動補償預(yù)測的基本單元。運動補償預(yù)測的基本單元。vMPEG MPEG 算法在算法在 P P 幀和幀和 B B 幀中以宏塊為單位自幀中以宏塊為單位自適應(yīng)地選擇合適的運動補償預(yù)測模式（在適應(yīng)地選擇合適的運動補償預(yù)測模式（在 I I 幀中全部宏塊都采用幀內(nèi)編碼模式）。幀中全部宏塊都采用幀內(nèi)編碼模式）。vP P 幀中的宏塊采用前向運動補償預(yù)測模式；幀中的宏塊采用前向運動補償預(yù)測模式；當預(yù)測效果不佳時，切換到幀內(nèi)編碼模式。當預(yù)測效果不佳時，切換到幀內(nèi)編碼模式。vB B 幀

13、中的宏塊采用何種模式取決于哪一種模幀中的宏塊采用何種模式取決于哪一種模式下對該宏塊進行編碼時所需的比特數(shù)最少。式下對該宏塊進行編碼時所需的比特數(shù)最少。3.2.2 3.2.2 視頻碼流的分層結(jié)構(gòu)視頻碼流的分層結(jié)構(gòu)宏塊層宏塊層vMPEG-2MPEG-2中定義了三種宏塊結(jié)構(gòu)：中定義了三種宏塊結(jié)構(gòu)：4:2:04:2:0宏塊宏塊4:2:24:2:2宏塊和宏塊和4:4:44:4:4宏塊，分別代表構(gòu)成一個宏宏塊，分別代表構(gòu)成一個宏塊的亮度像塊和色差像塊的數(shù)量關(guān)系。塊的亮度像塊和色差像塊的數(shù)量關(guān)系。v4:2:04:2:0宏塊中包含四個亮度像塊，一個宏塊中包含四個亮度像塊，一個CbCb色差色差像塊和一個像塊和一

14、個CrCr色差像塊；色差像塊；4:2:24:2:2宏塊中包含四宏塊中包含四個亮度像塊，二個個亮度像塊，二個CbCb色差像塊和二個色差像塊和二個CrCr色差色差像塊；像塊；4:4:44:4:4宏塊中包含四個亮度像塊，四個宏塊中包含四個亮度像塊，四個CbCb色差像塊和四個色差像塊和四個CrCr色差像塊。這三種宏塊色差像塊。這三種宏塊結(jié)構(gòu)實際上對應(yīng)于三種亮度和色度的抽樣方結(jié)構(gòu)實際上對應(yīng)于三種亮度和色度的抽樣方式。式。 3.2.2 3.2.2 視頻碼流的分層結(jié)構(gòu)視頻碼流的分層結(jié)構(gòu)像塊層像塊層vMPEG MPEG 算法中最小的編碼單位算法中最小的編碼單位vDCTDCT變換的基本單元變換的基本單元vMPM

15、LMPML中一個像塊由中一個像塊由8x88x8個抽樣值構(gòu)成個抽樣值構(gòu)成v同一像塊內(nèi)的抽樣值必須全部是同一像塊內(nèi)的抽樣值必須全部是Y Y信號樣值，信號樣值，或全部是或全部是CbCb信號樣值，或全部是信號樣值，或全部是CrCr信號樣值。信號樣值。 3.2.3 MPEG-1/-2 3.2.3 MPEG-1/-2 視頻編碼關(guān)鍵技術(shù)視頻編碼關(guān)鍵技術(shù)vMPEG-1/-2 MPEG-1/-2 視頻壓縮的原理：利用序列圖像中視頻壓縮的原理：利用序列圖像中的空間相關(guān)性和時間相關(guān)性。的空間相關(guān)性和時間相關(guān)性。v空間相關(guān)性：一個像素與其周圍的某些像素在空間相關(guān)性：一個像素與其周圍的某些像素在亮度和色度上存在的關(guān)系亮

16、度和色度上存在的關(guān)系v時間相關(guān)性：一個視頻序列中前后幀圖像間存時間相關(guān)性：一個視頻序列中前后幀圖像間存在的關(guān)系在的關(guān)系v采用帶運動補償?shù)膸g預(yù)測編碼和幀內(nèi)采用帶運動補償?shù)膸g預(yù)測編碼和幀內(nèi) DCT DCT 編編碼相結(jié)合的方案碼相結(jié)合的方案v幀內(nèi)編碼與幀間編碼流程的區(qū)別幀內(nèi)編碼與幀間編碼流程的區(qū)別：是否經(jīng)過預(yù)：是否經(jīng)過預(yù)測環(huán)的處理測環(huán)的處理v1. 1. 離散余弦變換（離散余弦變換（DCTDCT）v2. 2. 量化器量化器v3. 3. “之之”字形掃描與游程編碼字形掃描與游程編碼v4. 4. 熵編碼熵編碼v5. 5.信道緩存信道緩存 v6. 6. 運動估計運動估計v7. 7. 運動補償運動補償3.

17、2.4 MPEG-2 3.2.4 MPEG-2 和和 MPEG-1 MPEG-1 的區(qū)別的區(qū)別1. MPEG-2 1. MPEG-2 定義了定義了“Profile”Profile”和和“Level”Level”的概念的概念v規(guī)定了規(guī)定了5 5個語法子集（個語法子集（ProfileProfile）：）：Simple Profile, Simple Profile, Main Profile, SNR Scalable Profile, Spatially Scalable Main Profile, SNR Scalable Profile, Spatially Scalable Profile

18、, High ProfileProfile, High Profilev按編碼圖像的分辨率分成按編碼圖像的分辨率分成4 4個個 LevelsLevels：High Level, High Level, High-1440 Level, Main Level, Low LevelHigh-1440 Level, Main Level, Low LevelvProfile Profile 規(guī)定了可以使用哪些語法因素，以及如何使規(guī)定了可以使用哪些語法因素，以及如何使用這些語法元素；用這些語法元素；Level Level 規(guī)定了這些語法元素的取值規(guī)定了這些語法元素的取值范圍范圍3.2.4 MPEG-2

19、 3.2.4 MPEG-2 和和 MPEG-1 MPEG-1 的區(qū)別（的區(qū)別（ContdContd）2. MPEG-2 2. MPEG-2 有有“按幀編碼按幀編碼”和和“按場編碼按場編碼”兩兩種模式種模式vMPEG-1 MPEG-1 只支持逐行掃描；只支持逐行掃描；vMPEG-2 MPEG-2 支持逐行掃描和隔行掃描，支持逐行掃描和隔行掃描，v針對隔行掃描的常規(guī)電視圖像專門設(shè)置了針對隔行掃描的常規(guī)電視圖像專門設(shè)置了“按幀編碼按幀編碼”和和“按場編碼按場編碼”兩種模式。兩種模式。vMPEG-1 MPEG-1 中，宏塊被逐行地分割成像塊；中，宏塊被逐行地分割成像塊；vMPEG-2 MPEG-2 中

20、，逐行掃描圖像采用逐行分割方中，逐行掃描圖像采用逐行分割方式；隔行掃描的幀圖像采用逐行分割與隔行式；隔行掃描的幀圖像采用逐行分割與隔行分割兩種方式。分割兩種方式。3.2.4 MPEG-2 3.2.4 MPEG-2 和和 MPEG-1 MPEG-1 的區(qū)別（的區(qū)別（ContdContd）3. MPEG-2 3. MPEG-2 增加了可分級性增加了可分級性v（1 1）空間可分級性）空間可分級性v（2 2）時間可分級性）時間可分級性v（3 3）信噪比可分級性）信噪比可分級性3.3 MPEG-4 3.3 MPEG-4 視頻編碼標準視頻編碼標準vMPEG-4MPEG-4標準主要應(yīng)用于視像電話標準主要應(yīng)用

21、于視像電話(videophone)(videophone)，視像電子，視像電子郵件郵件(VideoEmail(VideoEmail) )和電子新聞和電子新聞(Electronicnews(Electronicnews) )等，其傳輸速等，其傳輸速率要求較低，在率要求較低，在4800-64000bps4800-64000bps之間，分辨率之間，分辨率176176144144。vMPEG-4MPEG-4利用很窄的帶寬，通過幀重建技術(shù)，壓縮和傳輸數(shù)利用很窄的帶寬，通過幀重建技術(shù)，壓縮和傳輸數(shù)據(jù)，以求以最少的數(shù)據(jù)獲得最佳的圖象質(zhì)量。據(jù)，以求以最少的數(shù)據(jù)獲得最佳的圖象質(zhì)量。v與與MPEG-1MPEG-1

22、和和MPEG-2MPEG-2相比，相比，MPEG-4MPEG-4的特點是其更適于交互的特點是其更適于交互AVAV服務(wù)以及遠程監(jiān)控。服務(wù)以及遠程監(jiān)控。MPEG-4MPEG-4是第一個使你由被動變?yōu)橹魇堑谝粋€使你由被動變?yōu)橹鲃觿? (即有交互性即有交互性) )的動態(tài)圖象標準。的動態(tài)圖象標準。v從根源上說，從根源上說，MPEG-4MPEG-4試圖將自然物體與人造物體相溶合試圖將自然物體與人造物體相溶合( (視視覺效果意義上的覺效果意義上的) )。MPEG-4MPEG-4的設(shè)計目標還有更廣的適應(yīng)性和的設(shè)計目標還有更廣的適應(yīng)性和可擴展性。可擴展性。vMPEG-4MPEG-4編解碼的基本思想是基于圖像內(nèi)容

23、的第二代視頻編編解碼的基本思想是基于圖像內(nèi)容的第二代視頻編解碼方案，并將基于合成的編碼方案也結(jié)合在標準中。它根解碼方案，并將基于合成的編碼方案也結(jié)合在標準中。它根據(jù)圖像的內(nèi)容將圖像分割成不同的視頻對象據(jù)圖像的內(nèi)容將圖像分割成不同的視頻對象VOVO（Video Video ObjectObject），在編碼過程中對前景對象和后景對象采用不同的），在編碼過程中對前景對象和后景對象采用不同的編碼策略，對于人們所關(guān)心的前景對象，則盡可能的保持對編碼策略，對于人們所關(guān)心的前景對象，則盡可能的保持對象的細節(jié)及平滑，而對不大關(guān)心的后景對象采用大壓縮比的象的細節(jié)及平滑，而對不大關(guān)心的后景對象采用大壓縮比的編碼

24、策略。編碼策略。MPEG-4 VOPMPEG-1 2 4 MPEG-1 2 4 比較比較MPEG-1MPEG-1MPEG-2MPEG-2MPEG-4MPEG-4開始成為標準的年份開始成為標準的年份199219921995199519991999最大分辨率最大分辨率352 x 288352 x 2881920 x 11521920 x 1152720 x 576720 x 576預(yù)設(shè)分辨率預(yù)設(shè)分辨率(PAL)(PAL)352 x 288352 x 288720 x 576720 x 576720 x 576720 x 576預(yù)測分辨率預(yù)測分辨率(NTSC)(NTSC)352 x 288352 x

25、 288640 x 480640 x 480640 x 480640 x 480最大音頻范圍最大音頻范圍48 kHz48 kHz96 kHz96 kHz96 kHz96 kHz最多聲道數(shù)目最多聲道數(shù)目2 28 88 8最大傳輸速率最大傳輸速率3 3 MbitMbit/ /秒秒80 80 MbitMbit/ /秒秒5 5至至10 10 MbitMbit/ /秒秒常用的傳輸速率常用的傳輸速率1380 1380 kbitkbit/s (352 x /s (352 x 288)288)6500 6500 kbitkbit/s (720 x /s (720 x 576)576)880 880 kbitk

26、bit/s (720 x /s (720 x 576)576)幀率幀率(PAL)(PAL)252525252525幀率幀率(NTSC)(NTSC)303030303030主觀質(zhì)量主觀質(zhì)量滿意滿意很好很好好至很好好至很好編碼的硬件要求編碼的硬件要求低低高高很高很高解碼的硬件要求解碼的硬件要求很低很低中等中等高高MPEG-4 MPEG-4 應(yīng)用舉例應(yīng)用舉例DivXDivX & & XviDXviDu數(shù)年前，在數(shù)年前，在PCPC上能用的唯一上能用的唯一MPEG-4 MPEG-4 編碼編碼器是由器是由微軟開發(fā)微軟開發(fā)的，包括的，包括MS MPEG4 V1MS MPEG4 V1、MS M

27、PEG4 V2MS MPEG4 V2、MS MPEG4 V3MS MPEG4 V3系列系列編碼編碼u不不過過 V1 V1 和和 V2 V2 的的編碼質(zhì)量并編碼質(zhì)量并不太好，直到不太好，直到 MS MPEG4 V3 MS MPEG4 V3 開始開始，畫面質(zhì)量有了明顯的改善畫面質(zhì)量有了明顯的改善u不不過微軟卻決定僅將過微軟卻決定僅將MS MPEG4 V3MS MPEG4 V3的的視頻編碼核心算法封裝視頻編碼核心算法封裝在在 Windows Media Windows Media 流媒體技術(shù)中流媒體技術(shù)中，也就是我，也就是我們熟知的們熟知的ASFASF文件文件中中u電影駭客電影駭客很快便有小很快便有

28、小組組, , 修改了修改了微軟微軟的的 MS MPEG4 V3MS MPEG4 V3，解除了不，解除了不能用於能用於AVIAVI文件文件的限制，的限制，并開放并開放了其中一些了其中一些壓縮參數(shù)壓縮參數(shù)，也就，也就誕生誕生了了我們我們今天所熟悉的今天所熟悉的MPEG4MPEG4編碼編碼器器 DivXDivX 3.11 3.11DivXDivX 4, 4, DivXDivX 5 5u歷經(jīng)歷經(jīng)波折波折. .u發(fā)展發(fā)展出了出了 XviD XviD u現(xiàn)在現(xiàn)在的的 XviDXviD 更可以說超越了更可以說超越了 DivXDivX 5, 5, 以更好的以更好的質(zhì)量質(zhì)量, , 更更強的功強的功能挑戰(zhàn)新一代的

29、能挑戰(zhàn)新一代的 MPEG4 MPEG4 應(yīng)用應(yīng)用MPEG-4 MPEG-4 應(yīng)用舉例應(yīng)用舉例nMP4MP4：一種可包含大量多媒：一種可包含大量多媒體的體的文件文件容器格式容器格式nMP4MP4被被定義為定義為MPEG4 part 1MPEG4 part 1系統(tǒng)系統(tǒng)部份，其可部份，其可支持支持所有的多媒所有的多媒體內(nèi)容體內(nèi)容(video, audio, subtitle, pictures)(video, audio, subtitle, pictures) 、使用者、使用者互動互動nMP4 MP4 內(nèi)容可延伸至下列內(nèi)容可延伸至下列形式形式: : u.mp4.mp4u.mp4v, .m4v .m

30、p4v, .m4v 原始原始 mpeg-4 video streams mpeg-4 video streamsu.m4a .m4a 存儲存儲Apple Apple iTunesiTunes audio only audio onlyu.m4p - Apple for DRM protected files; .m4p - Apple for DRM protected files; u.3gp, .3g2 .3gp, .3g2 用於用於3G mobile phones3G mobile phonesnMP4 MP4 可包含的多媒可包含的多媒體文件體文件 u視頻視頻：MPEG-4 (MPEG-

31、4 (XviDXviD, DivX5, 3ivx, , DivX5, 3ivx, ffmpegffmpeg/ /ffvfwffvfw, , NeroDigitalNeroDigital, H.264/AVC), MPEG-2, MPEG-1, . , H.264/AVC), MPEG-2, MPEG-1, . 無法無法使用使用于于 MS MPEG-4, MPEG-4 DivX3, WM9 (Windows Media 9), RV9 (Real MS MPEG-4, MPEG-4 DivX3, WM9 (Windows Media 9), RV9 (Real Video 9). Video 9

32、). u音頻：音頻：MP3, AAC, MP2, MP1, MP3, AAC, MP2, MP1, TwinVQTwinVQ, , 無法無法使用使用于于 OGG OGG VorbisVorbis, , VoxwareVoxware MetasoundMetasound, . , . u圖像：圖像： JPEG, PNG JPEG, PNG常見的常見的MPEG-4 MPEG-4 應(yīng)用設(shè)備應(yīng)用設(shè)備nVideo Video iPod iPod u音頻音頻：AACAAC、Protected AACProtected AAC（iTunesiTunes ）、）、MP3MP3、MP3 VBRMP3 VBR、A

33、udibleAudible、Apple LosslessApple Lossless、WAVWAV、AIFFAIFFu照片：照片：JPEGJPEG、BMPBMP、GIFGIF、TIFFTIFF、PSDPSD（僅限僅限 MacMac）和和 PNGPNG格式格式 u視頻支持格式視頻支持格式：H.264(768 KbpsH.264(768 Kbps，320 x 240, 320 x 240, 30fps)30fps)u音頻音頻格式：格式：.m4v, .mp4 .m4v, .mp4 與與 . .movmovuMPEG-4 MPEG-4 視頻視頻影片：最高可影片：最高可達達 2.5 Mbps2.5 Mb

34、ps，480 x 480 x 480480，每秒，每秒 30 30 影格影格nMP4MP4影音播放器影音播放器u音頻格式：音頻格式：MP3, WMA, OGG, AC3 MP3, WMA, OGG, AC3 u視頻視頻格式：格式：AVI, MPEG1, MPEG2, MPEG4, AVI, MPEG1, MPEG2, MPEG4, VOB,DAT VOB,DAT 圖片圖片格式：格式：JPG,JPG,最大最大YUV 4800YUV 4800* *3600 pixels,3600 pixels,支支援援圖片瀏覽圖片瀏覽功能功能常見的常見的MPEG-4 MPEG-4 應(yīng)用設(shè)備應(yīng)用設(shè)備nDVDDVD播

35、放器播放器u支持支持播放播放文件文件格式：格式：u影片影片：MPEG 4MPEG 4、DivXDivX、Mpeg-2Mpeg-2、Mpeg-1Mpeg-1u照片照片：JPEGJPEG、可達可達相片光碟相片光碟u音音樂樂: : CDCD、MP3MP3文件文件nDVDV攝像機攝像機u影像影像文件文件格式：格式：ASF(MPEG-4ASF(MPEG-4相容相容) )常見的常見的MPEG-4 MPEG-4 應(yīng)用設(shè)備應(yīng)用設(shè)備n3G3G手機手機u音樂音樂播放器：播放器：MP3, AACMP3, AACu鈴聲種類鈴聲種類：MIDI, AAC, MP3 MIDI, AAC, MP3 u圖片支持圖片支持格式：格

36、式：JPEG JPEG u影片播放格式：影片播放格式：3GP3GPu錄像錄像格式：格式：3GP3GP3.4 MPEG-7 3.4 MPEG-7 標準標準vISO/IEC 15938ISO/IEC 15938 v正式名稱：多媒體內(nèi)容描述接口（正式名稱：多媒體內(nèi)容描述接口（Multimedia Multimedia Content Description InterfaceContent Description Interface）v是一種多媒體內(nèi)容描述的標準，而非信息壓縮是一種多媒體內(nèi)容描述的標準，而非信息壓縮編碼標準編碼標準v定義了描述符、描述語言和描述方案，以便于定義了描述符、描述語言和描述

37、方案，以便于處理多媒體內(nèi)容處理多媒體內(nèi)容v主要目標是對多媒體信息內(nèi)容進行各種標準化主要目標是對多媒體信息內(nèi)容進行各種標準化的描述和有效的檢索的描述和有效的檢索3.4 MPEG-7 3.4 MPEG-7 標準標準應(yīng)用應(yīng)用v1. “1. “拉拉”應(yīng)用應(yīng)用v（1 1）視頻數(shù)據(jù)庫的存儲和檢索）視頻數(shù)據(jù)庫的存儲和檢索v（2 2）專業(yè)媒體制作方面的圖片和視頻提交）專業(yè)媒體制作方面的圖片和視頻提交v（3 3）商業(yè)音樂應(yīng)用（卡拉）商業(yè)音樂應(yīng)用（卡拉OKOK和音樂銷售）和音樂銷售）v（4 4）聲音效果庫）聲音效果庫v（5 5）歷史語言數(shù)據(jù)庫）歷史語言數(shù)據(jù)庫v（6 6）通過聽覺事件進行電影場景檢索）通過聽覺事件進

38、行電影場景檢索v（7 7）商標庫的注冊和檢索）商標庫的注冊和檢索3.4 MPEG-7 3.4 MPEG-7 標準標準應(yīng)用應(yīng)用v2. “2. “推推”應(yīng)用應(yīng)用v（1 1）用戶代理驅(qū)動的媒體選擇和過濾）用戶代理驅(qū)動的媒體選擇和過濾v（2 2）個性化電視服務(wù)）個性化電視服務(wù)v（3 3）智能多媒體表現(xiàn)）智能多媒體表現(xiàn)v（4 4）個性化瀏覽、過濾和搜索）個性化瀏覽、過濾和搜索v（5 5）特殊的信息存取）特殊的信息存取3.4 MPEG-7 3.4 MPEG-7 標準標準應(yīng)用應(yīng)用v3. 3. 特殊的專業(yè)應(yīng)用和控制應(yīng)用特殊的專業(yè)應(yīng)用和控制應(yīng)用v（1 1）遠程購物）遠程購物v（2 2）醫(yī)學應(yīng)用）醫(yī)學應(yīng)用v（3

39、3）遙感應(yīng)用）遙感應(yīng)用v（4 4）教育應(yīng)用）教育應(yīng)用v（5 5）監(jiān)測應(yīng)用）監(jiān)測應(yīng)用v（6 6）基于視覺的控制）基于視覺的控制vISO/IEC 21000ISO/IEC 21000v正式名稱：多媒體框架（正式名稱：多媒體框架（Multimedia FrameworkMultimedia Framework）。）。其制訂工作于其制訂工作于20002000年年6 6月開始。月開始。v創(chuàng)建一個開放的多媒體傳輸和消費的框架，通過將創(chuàng)建一個開放的多媒體傳輸和消費的框架，通過將不同的協(xié)議、標準和技術(shù)結(jié)合在一起，使用戶可以不同的協(xié)議、標準和技術(shù)結(jié)合在一起，使用戶可以通過現(xiàn)有的各種網(wǎng)絡(luò)和設(shè)備透明地使用網(wǎng)絡(luò)上的多

40、通過現(xiàn)有的各種網(wǎng)絡(luò)和設(shè)備透明地使用網(wǎng)絡(luò)上的多媒體資源。媒體資源。vMPEG-21 MPEG-21 中的用戶可以是任何個人、團體、組織、中的用戶可以是任何個人、團體、組織、公司、政府和其它主體，在公司、政府和其它主體，在 MPEG-21 MPEG-21 中，用戶在中，用戶在數(shù)字項的使用上擁有自己的權(quán)力，包括用戶出版數(shù)字項的使用上擁有自己的權(quán)力，包括用戶出版/ /發(fā)發(fā)行內(nèi)容的保護、用戶的使用權(quán)和用戶隱私權(quán)等。行內(nèi)容的保護、用戶的使用權(quán)和用戶隱私權(quán)等。v包括包括7 7個基本要素：數(shù)字項聲明（個基本要素：數(shù)字項聲明（Digital Item Digital Item DeclarationDeclar

41、ation），數(shù)字項識別和描述，內(nèi)容處理和使），數(shù)字項識別和描述，內(nèi)容處理和使用，知識產(chǎn)權(quán)管理和保護，終端和網(wǎng)絡(luò)，內(nèi)容表示，用，知識產(chǎn)權(quán)管理和保護，終端和網(wǎng)絡(luò)，內(nèi)容表示，事件報告。事件報告。v數(shù)字項是數(shù)字項是 MPEG-21 MPEG-21 框架中的基本單元，它由資源、框架中的基本單元，它由資源、原數(shù)據(jù)（原數(shù)據(jù)（metadatametadata）和結(jié)構(gòu)共同組成，是一個帶有）和結(jié)構(gòu)共同組成，是一個帶有標準化的結(jié)構(gòu)化數(shù)字對象。標準化的結(jié)構(gòu)化數(shù)字對象。v要素中的資源包括采用要素中的資源包括采用 MPEG-1MPEG-1、MPEG-2MPEG-2、MPEG-MPEG-4 4 標準的多媒體信息。標準的多

42、媒體信息。v通過數(shù)字項的定義，通過數(shù)字項的定義，MPEG-21 MPEG-21 集成了集成了 MPEG MPEG 系列系列的其它標準，因此的其它標準，因此 MPEG-21 MPEG-21 是建立在其它標準的是建立在其它標準的基礎(chǔ)之上的?；A(chǔ)之上的。v支持以下功能：內(nèi)容創(chuàng)建，內(nèi)容生產(chǎn)，內(nèi)容分配，支持以下功能：內(nèi)容創(chuàng)建，內(nèi)容生產(chǎn)，內(nèi)容分配，內(nèi)容的消費和使用，內(nèi)容的分組，知識產(chǎn)權(quán)管理和內(nèi)容的消費和使用，內(nèi)容的分組，知識產(chǎn)權(quán)管理和保護，內(nèi)容識別和描述，用戶權(quán)限，終端和網(wǎng)絡(luò)資保護，內(nèi)容識別和描述，用戶權(quán)限，終端和網(wǎng)絡(luò)資源提取，內(nèi)容表示和事件報告等。源提取，內(nèi)容表示和事件報告等。v從商業(yè)內(nèi)容和與內(nèi)容相關(guān)服

43、務(wù)的前景等角度開發(fā)從商業(yè)內(nèi)容和與內(nèi)容相關(guān)服務(wù)的前景等角度開發(fā)v同已有的其它同已有的其它 MPEG MPEG 系列標準等進行適當結(jié)合，從系列標準等進行適當結(jié)合，從而使用戶對視頻、音頻的處理更加方便和有效，最而使用戶對視頻、音頻的處理更加方便和有效，最終為多媒體信息的用戶在全球范圍內(nèi)提供透明而有終為多媒體信息的用戶在全球范圍內(nèi)提供透明而有效的視頻通信應(yīng)用環(huán)境。效的視頻通信應(yīng)用環(huán)境。vMPEG-21 MPEG-21 的出臺可以將現(xiàn)有的標準統(tǒng)一起來，消費的出臺可以將現(xiàn)有的標準統(tǒng)一起來，消費者將可以自由使用音視頻內(nèi)容而不被不兼容的格式、者將可以自由使用音視頻內(nèi)容而不被不兼容的格式、編解碼器、媒體數(shù)據(jù)類型

44、及諸如此類的東西所干擾。編解碼器、媒體數(shù)據(jù)類型及諸如此類的東西所干擾。v正式名稱：正式名稱：P P64Kb/s64Kb/s（P=130P=130）視聽業(yè)務(wù)的視頻）視聽業(yè)務(wù)的視頻編解碼器編解碼器; ;vP P1 1或或2 2時，僅支持時，僅支持 QCIF QCIF 的輸入圖像格式，用于幀的輸入圖像格式，用于幀頻低的可視電話；頻低的可視電話；vP P6 6時，支持時，支持 CIF(CommonCIF(Common Intermediate Format ) Intermediate Format )的輸入圖像格式的會議電視的輸入圖像格式的會議電視; ;v利用利用 CIF CIF 格式，可使各國使用

45、的不同制式的電視信格式，可使各國使用的不同制式的電視信號變換為通用中間格式，然后輸入給編碼器，從而號變換為通用中間格式，然后輸入給編碼器，從而使編碼器本身考慮信號是來自哪種制式的。使編碼器本身考慮信號是來自哪種制式的。v核心：采用帶有運動補償?shù)念A(yù)測編碼以及基于核心：采用帶有運動補償?shù)念A(yù)測編碼以及基于 DCT DCT 的變換編碼相結(jié)合的混合編碼方法的變換編碼相結(jié)合的混合編碼方法v基本判決準則：哪一種模式給出較小的編碼基本判決準則：哪一種模式給出較小的編碼比特，就采用這種模式。比特，就采用這種模式。v運動估計以運動估計以16161616像素的宏塊為單位進行，像素的宏塊為單位進行，搜索范圍為搜索范圍

46、為1515。v采用全搜索的塊匹配算法計算運動矢量。采用全搜索的塊匹配算法計算運動矢量。v使用二維空域濾波器對使用二維空域濾波器對8 88 8預(yù)測塊內(nèi)的像素預(yù)測塊內(nèi)的像素進行操作，可以改進預(yù)測過程。進行操作，可以改進預(yù)測過程。3.6.4 3.6.4 量化編碼量化編碼v3232個線性量化器個線性量化器v一個用于幀內(nèi)一個用于幀內(nèi) DCT DCT 變化的直流分量；其余變化的直流分量；其余3131個用個用于交流分量。于交流分量。v除幀內(nèi)除幀內(nèi) DCT DCT 的直流分量，一個宏塊內(nèi)使用同一個量的直流分量，一個宏塊內(nèi)使用同一個量化器?；?。v幀內(nèi)直流分量是一個量化步長為幀內(nèi)直流分量是一個量化步長為8 8的

47、線性量化器，的線性量化器，其余其余3131個量化器的量化步長為個量化器的量化步長為2 2，4 4，6262。v量化器的選擇由編碼控制器決定。量化器的選擇由編碼控制器決定。vDCT DCT 變換后的變換后的8 88 8系數(shù)塊中的各個系數(shù)按系數(shù)塊中的各個系數(shù)按“之之”字字型掃描，便于量化后編碼。型掃描，便于量化后編碼。v與與H.261H.261相比，增加的壓縮編碼模式：相比，增加的壓縮編碼模式：v（1 1）無限制的運動矢量模式）無限制的運動矢量模式v（2 2）基于句法的算術(shù)編碼模式）基于句法的算術(shù)編碼模式v（3 3）先進的預(yù)測模式）先進的預(yù)測模式v（4 4）PB-PB-幀模式幀模式3.8 H.26

48、3+ 3.8 H.263+ 和和 H.263+ H.263+ 標準標準vH.263+ H.263+ 允許更大范圍的圖像輸入格式，自定義了允許更大范圍的圖像輸入格式，自定義了圖像的尺寸，從而拓寬了標準使用的范圍，使之可圖像的尺寸，從而拓寬了標準使用的范圍，使之可以處理基于視窗的計算機圖像、更高幀頻的圖像序以處理基于視窗的計算機圖像、更高幀頻的圖像序列及寬屏圖像。列及寬屏圖像。v為提高壓縮效率：采用先進的幀內(nèi)編碼模式；增強為提高壓縮效率：采用先進的幀內(nèi)編碼模式；增強的的PB-PB-幀模式改進了幀模式改進了 H.263 H.263 的不足，增強了幀間預(yù)的不足，增強了幀間預(yù)測的效果；去塊效應(yīng)濾波器不僅

49、提高了壓縮效率，測的效果；去塊效應(yīng)濾波器不僅提高了壓縮效率，且提供重建圖像的主觀質(zhì)量。且提供重建圖像的主觀質(zhì)量。v為適應(yīng)網(wǎng)絡(luò)傳輸：增加了時間分級、信噪比和空間為適應(yīng)網(wǎng)絡(luò)傳輸：增加了時間分級、信噪比和空間分級，對在噪聲信道和存在大量包丟失的網(wǎng)絡(luò)中傳分級，對在噪聲信道和存在大量包丟失的網(wǎng)絡(luò)中傳送視頻信號很有意義。另外，片結(jié)構(gòu)模式、參考幀送視頻信號很有意義。另外，片結(jié)構(gòu)模式、參考幀選擇模式增強了視頻傳輸?shù)目拐`碼能力。選擇模式增強了視頻傳輸?shù)目拐`碼能力。3.8 H.263+ 3.8 H.263+ 和和 H.263+ H.263+ 標準（標準（ContdContd）vH.263+ H.263+ 在在 H

50、.263+ H.263+ 基礎(chǔ)上增加了基礎(chǔ)上增加了3 3個選項，主要個選項，主要是為了增強碼流在惡劣信道上的抗誤碼性能，同時是為了增強碼流在惡劣信道上的抗誤碼性能，同時也為了提高編碼效率。也為了提高編碼效率。 v選項選項U U：增強型參考幀選擇；能夠提供增強的編碼：增強型參考幀選擇；能夠提供增強的編碼效率和信道錯誤再生能力（特別是在包丟失的情形效率和信道錯誤再生能力（特別是在包丟失的情形下），需要設(shè)計多緩沖區(qū)用于存儲多參考幀圖像。下），需要設(shè)計多緩沖區(qū)用于存儲多參考幀圖像。v選項選項V V：數(shù)據(jù)分片；能夠提供增強型的抗誤碼能力：數(shù)據(jù)分片；能夠提供增強型的抗誤碼能力（特別是在傳輸過程中本地數(shù)據(jù)被

51、破壞的情況下），（特別是在傳輸過程中本地數(shù)據(jù)被破壞的情況下），通過分流視頻碼流中通過分流視頻碼流中DCTDCT的系數(shù)頭和運動矢量數(shù)據(jù)，的系數(shù)頭和運動矢量數(shù)據(jù)，采用可逆編碼方式保護運動矢量。采用可逆編碼方式保護運動矢量。v選項選項WW：在：在 H.263+ H.263+ 的碼流中增加補充信息，保證的碼流中增加補充信息，保證增強型的反向兼容性。增強型的反向兼容性。v由由ITU-T的視頻編碼專家組（的視頻編碼專家組（VCEG）與）與ISO/IEC的的MPEG組成的聯(lián)合視頻工作組組成的聯(lián)合視頻工作組（JVT）共同制定的新一代視頻壓縮編碼標）共同制定的新一代視頻壓縮編碼標準。準。v設(shè)計方案包含：視頻編碼

52、層（設(shè)計方案包含：視頻編碼層（VCL）和網(wǎng)絡(luò)）和網(wǎng)絡(luò)抽象層（抽象層（NAL）。）。v編碼效率高編碼效率高v對信道時延的適應(yīng)性較強對信道時延的適應(yīng)性較強v在編在編/解碼器中采用復(fù)雜度可分級設(shè)計，支持解碼器中采用復(fù)雜度可分級設(shè)計，支持不同網(wǎng)絡(luò)資源下的分級編碼傳輸不同網(wǎng)絡(luò)資源下的分級編碼傳輸v容錯能力強容錯能力強v網(wǎng)絡(luò)的適應(yīng)性強網(wǎng)絡(luò)的適應(yīng)性強v1. 1. 運動補償預(yù)測運動補償預(yù)測v（1 1）不同大小和形狀的宏塊分割）不同大小和形狀的宏塊分割v（2 2）高精度的亞像素運動預(yù)測）高精度的亞像素運動預(yù)測v（3 3）多參考幀的運動補償）多參考幀的運動補償v（4 4）自適應(yīng)去方塊效應(yīng)濾波器）自適應(yīng)去方塊效應(yīng)濾

53、波器v（5 5）運動補償預(yù)測的其他特性）運動補償預(yù)測的其他特性v2. 42. 44 4 整數(shù)變換整數(shù)變換v3. 3. 基于空域預(yù)測的幀內(nèi)編碼基于空域預(yù)測的幀內(nèi)編碼v4. 4. 量化量化v5. 5. 基于上下文的熵編碼基于上下文的熵編碼v1. 1. 參數(shù)集結(jié)構(gòu)參數(shù)集結(jié)構(gòu)v2. NAL 2. NAL 單元語法結(jié)構(gòu)單元語法結(jié)構(gòu)v3. 3. 靈活的像條大小靈活的像條大小v4. 4. 靈活的宏塊排序（靈活的宏塊排序（FMOFMO）v5. 5. 任意像條排序任意像條排序v6. 6. 冗余圖像冗余圖像v7. 7. 數(shù)據(jù)分割數(shù)據(jù)分割Frame partitionsMacroblock partitions16

54、x16 blocks8x8 blocks4x4 blocks1. 1. 高效的編碼技術(shù)高效的編碼技術(shù)v媒體系統(tǒng)中的多媒體數(shù)據(jù)要通過網(wǎng)絡(luò)來傳輸給用戶，媒體系統(tǒng)中的多媒體數(shù)據(jù)要通過網(wǎng)絡(luò)來傳輸給用戶，高效的編碼技術(shù)可以降低流媒體系統(tǒng)對網(wǎng)絡(luò)帶寬的高效的編碼技術(shù)可以降低流媒體系統(tǒng)對網(wǎng)絡(luò)帶寬的要求。要求。v目前標準化和商業(yè)化的視頻編碼技術(shù)都是基于運動目前標準化和商業(yè)化的視頻編碼技術(shù)都是基于運動補償和補償和 DCT DCT 變換的。變換的。v運動估計和補償模塊用來消除相鄰圖像間的冗余信運動估計和補償模塊用來消除相鄰圖像間的冗余信息，息，v熵編碼模塊用來消除編碼信號的冗余性，熵編碼模塊用來消除編碼信號的冗余性

55、，v變換量化模塊根據(jù)人的視覺系統(tǒng)對視頻信號的細微變換量化模塊根據(jù)人的視覺系統(tǒng)對視頻信號的細微變化的不敏感性丟失部分信息，變化的不敏感性丟失部分信息，v從而提高壓縮比。從而提高壓縮比。2. 2. 可伸縮性編碼技術(shù)可伸縮性編碼技術(shù)v在流媒體應(yīng)用中需要解決的一個基本問題是網(wǎng)絡(luò)帶在流媒體應(yīng)用中需要解決的一個基本問題是網(wǎng)絡(luò)帶寬的波動。寬的波動。v有效方法是采用可伸縮性的視頻編碼，以提供移動有效方法是采用可伸縮性的視頻編碼，以提供移動的使用網(wǎng)絡(luò)帶寬變化的能力。的使用網(wǎng)絡(luò)帶寬變化的能力。3. 3. 多媒體標準技術(shù)多媒體標準技術(shù)v標準的制定和執(zhí)行確保不同廠家和服務(wù)商之間可以標準的制定和執(zhí)行確保不同廠家和服務(wù)商

56、之間可以互通互聯(lián)；互通互聯(lián)；v標準里的知識產(chǎn)權(quán)是商家必爭之處。標準里的知識產(chǎn)權(quán)是商家必爭之處。4. 4. 對等網(wǎng)絡(luò)技術(shù)（對等網(wǎng)絡(luò)技術(shù)（P2PP2P）v通過通過 P2P P2P 技術(shù)，除了和服務(wù)器外，每個用戶可以共技術(shù)，除了和服務(wù)器外，每個用戶可以共享他的文件或信息給其他用戶。享他的文件或信息給其他用戶。The Endv如果塊邊沿的絕對差值相對比較大，出現(xiàn)塊如果塊邊沿的絕對差值相對比較大，出現(xiàn)塊人工瑕疵的可能性就很大，因此需要進行相人工瑕疵的可能性就很大，因此需要進行相應(yīng)處理。應(yīng)處理。v然而，如果差值幅度很大，編碼量化過程的然而，如果差值幅度很大，編碼量化過程的誤差不能解釋，邊沿很可能反映了源圖

57、像的誤差不能解釋，邊沿很可能反映了源圖像的實際樣值，不需處理。實際樣值，不需處理。環(huán)濾波對塊效應(yīng)的消除4489 Bytes,33.77 dB 4489 Bytes,34.18 dB補：幀內(nèi)編碼與幀間編碼流程的區(qū)別 v在幀內(nèi)編碼的情況下，編碼圖像僅經(jīng)過在幀內(nèi)編碼的情況下，編碼圖像僅經(jīng)過DCTDCT，量化，量化器和比特流編碼器即生成編碼比特流，而不經(jīng)過預(yù)器和比特流編碼器即生成編碼比特流，而不經(jīng)過預(yù)測環(huán)處理。測環(huán)處理。DCTDCT直接應(yīng)用于原始的圖像數(shù)據(jù)。直接應(yīng)用于原始的圖像數(shù)據(jù)。 v 在幀間編碼的情況下，原始圖像首先與幀存儲器中在幀間編碼的情況下，原始圖像首先與幀存儲器中的預(yù)測圖像進行比較，計算出

58、運動矢量，由此運動的預(yù)測圖像進行比較，計算出運動矢量，由此運動矢量和參考幀生成原始圖像的預(yù)測圖像。而后，將矢量和參考幀生成原始圖像的預(yù)測圖像。而后，將原始圖像與預(yù)測像素差值所生成的差分圖像數(shù)據(jù)進原始圖像與預(yù)測像素差值所生成的差分圖像數(shù)據(jù)進行行DCTDCT變換，再經(jīng)過量化器和比特流編碼器生成輸變換，再經(jīng)過量化器和比特流編碼器生成輸出的編碼比特流。出的編碼比特流。 1、離散余弦變換DCTv DCTDCT是一種空間變換，在是一種空間變換，在MPEG-2MPEG-2中中DCTDCT以以8x88x8的像塊為單位進行，生成的是的像塊為單位進行，生成的是8x88x8的的DCTDCT系數(shù)系數(shù)數(shù)據(jù)塊。數(shù)據(jù)塊。D

59、CTDCT變換的最大特點是對于一般的變換的最大特點是對于一般的圖像都能夠?qū)⑾駢K的能量集中于少數(shù)低頻圖像都能夠?qū)⑾駢K的能量集中于少數(shù)低頻DCTDCT系數(shù)上，即生成系數(shù)上，即生成8x8DCT8x8DCT系數(shù)塊中，僅左系數(shù)塊中，僅左上角的少量低頻系數(shù)數(shù)值較大，其余系數(shù)的上角的少量低頻系數(shù)數(shù)值較大，其余系數(shù)的數(shù)值很小，這樣就可能只編碼和傳輸少數(shù)系數(shù)值很小，這樣就可能只編碼和傳輸少數(shù)系數(shù)而不嚴重影響圖像質(zhì)量。數(shù)而不嚴重影響圖像質(zhì)量。 v DCT DCT不能直接對圖像產(chǎn)生壓縮作用，但對圖不能直接對圖像產(chǎn)生壓縮作用，但對圖像的能量具有很好的集中效果，為壓縮打下像的能量具有很好的集中效果，為壓縮打下了基礎(chǔ)。了

60、基礎(chǔ)。 2、量化器 v 量化是針對量化是針對DCTDCT變換系數(shù)進行的，量化過程就是以變換系數(shù)進行的，量化過程就是以某個量化步長去除某個量化步長去除DCTDCT系數(shù)。量化步長的大小稱為系數(shù)。量化步長的大小稱為量化精度，量化步長越小，量化精度就越細，包含量化精度，量化步長越小，量化精度就越細，包含的信息越多，但所需的傳輸頻帶越高。不同的的信息越多，但所需的傳輸頻帶越高。不同的DCTDCT變換系數(shù)對人類視覺感應(yīng)的重要性是不同的，因此變換系數(shù)對人類視覺感應(yīng)的重要性是不同的，因此編碼器根據(jù)視覺感應(yīng)準則，對一個編碼器根據(jù)視覺感應(yīng)準則，對一個8x88x8的的DCTDCT變換塊變換塊中的中的6464個個DCTDCT變換系數(shù)