融合算法天津大學研究生eLearning平臺課件

1、多視點分布式視頻編碼融合算法許穎2014.4.22內(nèi)容簡介三、融合算法二、邊信息一、MDVC多視點分布式視頻編碼（MDVC） 對于編碼端資源受限系統(tǒng)，要求編碼端的復雜度低，普通編解碼系統(tǒng)的編碼端復雜度是解碼端的5-10倍，而分布式視頻編碼是對于相關信源進行獨立編碼和聯(lián)合解碼，將計算復雜度由編碼端轉移到解碼端，從而降低編碼端復雜度。 多視點視頻系統(tǒng)比單視點視頻系統(tǒng)有很多優(yōu)點，它可以提供更多的視頻場景信息，但是它具有更加復雜的預測編碼結構，相應的對視頻系統(tǒng)的數(shù)據(jù)處理能力和傳輸帶寬提出了更高的要求。多視點分布式視頻編解碼可以利用視點間的相關性大大降低編碼端的復雜度。圖1 多視點分布式視頻編碼框圖 邊

2、信息MDVC中包括兩種邊信息： 時間邊信息：考慮到視點內(nèi)部時間相關性視點間邊信息：考慮到視點內(nèi)部空間相關性融合算法時間邊信息、視點間邊信息判決時間邊信息、視點間邊信息補償基于線性組合模型的融合算法基于運動目標檢測的融合算法圖2 實驗工藝流程圖時間邊信息、視點間邊信息判決MAD表示的是邊信息與已解碼關鍵幀的平均絕對誤差，MADv，MADt分別表示視點間邊信息、時間邊信息與已解碼幀的平均絕對誤差時間邊信息、視點間邊信息補償 基于塊的思想，比較每個分塊與已解碼幀對應塊的MAD，選擇MAD小的塊作為融合邊信息對應塊的像素值基于線性組合融合的模型定義基于運動目標檢測的邊信息融合算法 經(jīng)過對一些視頻的邊信

3、息提取，發(fā)現(xiàn)了一個規(guī)律，可以用來參考選擇邊信息的融合算法： 時間邊信息是針對同一個視點中，不同幀間的邊信息提取，它的重構對于運動不太劇烈的物體質(zhì)量比較高。而視點間邊信息是針對不同視點在同一時刻的邊信息提取，它的重構對于運動劇烈的物體質(zhì)量比較高。我們可以充分利用時間邊信息與視點間邊信息的重構質(zhì)量進行邊信息融合。 由此，想到基于運動目標檢測的邊信息融合算法。基于運動目標檢測的邊信息融合算法參考文獻1 王寶亮，侯春萍，陳艷芳等. 基于光柵立體手機的多視點自適應顯示方法J. 天津大學學報，2011，44(12):1037-1042. 2 Han Bing，Wu Feng，Wu Dapeng. Imag

4、e representation by compressive sensing for visual sensor networksJ. Visual Communication and Image Representation，2010, 21(4):325-333. 3 Xiaoyu Xiu, Gene Cheung, Jie Liang. Delay-Cognizant Interactive Streaming of Multiview Video With Free Viewpoint SysthesisJ, IEEE Transactions on Multimedia, 2012

5、,14(4): 1109-1126.4 Feng Shao, Gangyi Jiang, Mei Yu, Ken Chen, Yo-sung Ho. Asymmetric Coding of Multi-View Video Plus Depth Based 3-D Video for View RenderingJ, IEEE Transactions on Multimedia, 2012,14(1): 157-167.5 Jin Young Lee, Ho-Cheon Wey, Du-Sik Park. A Fast and Efficient Multi-View Depth Imag

6、e Coding Method Based on Temporal and Inter-View Correlations of Texture ImagesJ, IEEE Transactions on Circuits and Systems for Video Technology, 2011,21(12): 1859-1868.6 Dan Jiang, Jichang Guo, Xiaojia Wu. Low-complexity distributed multi-view video coding for wireless video sensor networks based o

7、n compressive sensing theoryJ,Neurocomputing, 2012,07(54): 1-7.7 武曉嘉, 郭繼昌, 姜丹, 等. 一種多視點立體視頻分布式壓縮感知編解碼模型J. 天津大學學報, 2012, 45(10): 895-902.8 Puri R, Majumdar A, Ramchandran K. PRISM: a video coding paradigm with motion estimation at the decoderJ.IEEE Transactions on Image Processing, 2007, 16(10): 2436

8、-2448.參考文獻9 Aaron A, Zhang R, Girod B. Wyner-Ziv coding of motion videoC/Conference Record of the Thirty-Sixth Asilomar Conference on Signals, Systems and Computers. IEEE, 2002, 1: 240-244.10 Artigas X, Ascenso J, Dalai M, et al. The DISCOVER codec: architecture, techniques and evaluationC/Picture C

9、oding Symposium. Lisbon, Portugal, 2007, 17(9): 1103-1120.11 林昕, 劉海濤, 王嘉男. 多視點分布式視頻編碼的研究J. 哈爾濱工程大學學報, 2010, 31(008): 1093-1099.12 Xiao F, Liu J, Guo J, et al. Novel Side Information Generation Algorithm of Multiview Distributed Video Coding for Multimedia Sensor NetworksJ. International Journal of Distributed