VR虛擬現(xiàn)實新聞直播平臺建設(shè)方案

1、VR虛擬現(xiàn)實新聞直播平臺建設(shè)方案目錄一、 項目背景.1二、 建設(shè)目標.2三、 平臺架構(gòu)及模式.33.1平臺架構(gòu).33.2“云存儲+智能終端”平臺模式 .43.2.1視頻云儲存+智能終端.43.2.3“云存儲+智能終端”模式的優(yōu)勢 .4四、 關(guān)鍵技術(shù).54.1 VR . 54.2實時縫合.54.3大數(shù)據(jù).64.4云計算.6五、 功能設(shè)計.75.1 VR視頻制作.75.1.1錄制功能.75.1.2預(yù)覽功能.75.1.3設(shè)置功能.85.2直播平臺管理.85.3直播統(tǒng)計.85.4安全管理.9一、項目背景隨著計算機網(wǎng)絡(luò)和三維圖形軟件等先進信息技術(shù)的發(fā)展，電視節(jié)目制作方式發(fā)生了很大的變化。視覺和聽覺效果以

2、及人類的思維都可以靠虛擬現(xiàn)實技術(shù)來實 現(xiàn)。虛擬演播室則是虛擬現(xiàn)實技術(shù)與人類思維相結(jié)合在電視節(jié)目制作中的具體體 現(xiàn)。虛擬演播系統(tǒng)顛覆了傳統(tǒng)電視內(nèi)容的制作、傳輸和觀看方式，能夠更有效地 表達新聞信息，增強信息的感染力和交互性，帶給用戶的是一種身臨其境的感覺， 讓人們沉浸其中，給電視行業(yè)帶來了全新的發(fā)展機遇。(1)國家政策支持。2015年十二屆全國人大三次會議上，李克強總理在政府工作報告中首次提出“互聯(lián)網(wǎng)+”創(chuàng)新、大眾創(chuàng)業(yè)，2016年4月，工信部電子技術(shù)標準化研究院發(fā)布了 虛擬現(xiàn)實產(chǎn)業(yè)發(fā)展白皮書5.0，科技創(chuàng)新引用更加廣泛多元，為VR產(chǎn)業(yè)發(fā)展創(chuàng)造余圍。(2)消費需求升級。近年來，中國居民收入保持較快

3、增長，居民購買力提升，享受型消費占比提高。85后消費者伴隨著互聯(lián)網(wǎng)發(fā)展成長起來，對VR相 關(guān)的行業(yè)付費意愿較強；加之，VR行業(yè)宣傳越來越廣泛，市場熱度提升，消費者 對VR的認知程度越來越高，促進了VR消費。根據(jù)中國VR行為用戶行為研 究報告顯示，中國VR的潛在用戶規(guī)模已經(jīng)達2.86億，而在過去一年接觸過 或體驗過虛擬現(xiàn)實設(shè)備的VR淺度用戶約為1700萬人，購買過各種VR虛擬現(xiàn) 實設(shè)備的用戶約為96萬人。盡管目前VR行業(yè)仍處丁起步階段，但是未來市場 的潛力巨大，前景誘人。(3)市場環(huán)境變化。不可否認的是，視頻網(wǎng)站的崛起和互聯(lián)網(wǎng)電視的沖擊， 傳統(tǒng)電視用戶已經(jīng)被逐步蠶食，尤其是80、90后年輕人，越

4、來越不愿意守在電 電視面臨的最大問題，面對這種分流，“虛擬現(xiàn)實 +廣播電視”是留住用戶嘗試 的一種新模式。(4)自身發(fā)展需要。電視媒體，作為最傳統(tǒng)的重要媒體，一直與科技發(fā)展 有著深刻的聯(lián)系。然而，這些年，伴隨著新技術(shù)的不斷沖擊，那些基丁互聯(lián)網(wǎng)技 術(shù)的新興媒體紛紛在第一時間采用并逐漸吸引了眼球， 而作為老大哥的電視人卻 成了被動的旁觀者和跟隨者。電視人迫切需要一種新的技法來改變和提升自己的 創(chuàng)新力以吸引更多的觀眾。二、建設(shè)目標實現(xiàn)新聞類全景視頻直播。 通過3600全景攝像機采用實時無縫拼接技術(shù)實 現(xiàn)演播室新聞、娛樂類節(jié)目全景播出，并且在全景直播的基礎(chǔ)上增加虛擬植入、 在線包裝效果，觀眾通過頭顯設(shè)

5、備在任何地方觀看都有身臨其境的感受，增加收視點擊粘性。實現(xiàn)娛樂類和體育類節(jié)目實時全景直播。帶給未到現(xiàn)場觀眾身臨其境的現(xiàn)場 感和沉浸感。另外，可以在深度沉浸觀看全景同時交互小視窗觀看特寫畫面，增加觀眾的互動性和娛樂性。實現(xiàn)及時更換場景。虛擬演播系統(tǒng)制作的布景是合乎比例的立體設(shè)計，當攝像機移動時，虛擬的布景與前景畫面都會出現(xiàn)相應(yīng)的變化， 從而增加了節(jié)目的真 實感。具有及時更換場景的能力，在演播室布景制作中節(jié)約經(jīng)費。 不必移動和保 留景物，因此可減輕對雇員的需求壓力。全景虛擬植入還可以將演播室頂部燈光、 攝影機位利用制景全部隱藏掉，還可以增加演播室的第二現(xiàn)場。實現(xiàn)制作成本優(yōu)勢。當考慮節(jié)目格局時，制作

6、人員的選擇余地大，他們不必 過丁受場景限制。對丁同一節(jié)目可以不用同一演播室，因為背景可以存入磁盤。它可以充分發(fā)揮創(chuàng)作人員的藝術(shù)創(chuàng)造力與想象力，利用現(xiàn)有的多種三維動畫軟 件，創(chuàng)作出高質(zhì)量的背景。視機前，而是喜歡直接通過互聯(lián)網(wǎng)獲得更多的視頻內(nèi)容用戶被分流是目前傳統(tǒng)創(chuàng)意廣告植入?？稍谛侣劇蕵?、體育類節(jié)目中利用AR+VR虛擬植入豐富 比賽信息和創(chuàng)意廣告，全景虛擬植入可以在立體空間如天空、地面、左右側(cè)面增 加更多的廣告投入位，為廣告營收添加新增長點。三、平臺架構(gòu)及模式3.1平臺架構(gòu)全景直播架構(gòu)及流程：全景直播拍攝流程沉凌體轆L、UCJg %aEED些全宙弄:集全琴建合W 漏砰云分理Qa率屏收有全景拍攝

7、直播與虛擬植入架構(gòu)及流程：OO34 =浦同全垣某寶全是縫臺& A莊擬置入 云4S瑪云分農(nóng)瑚口口挈磷收茶平臺架構(gòu)圖3.2“云存儲+智能終端”平臺模式3.2.1視頻云儲存+智能終端通過建設(shè)一個視頻系統(tǒng)的私有云，各個數(shù)據(jù)中心的數(shù)據(jù)即是本地數(shù)據(jù)乂是云 端數(shù)據(jù)，彼此之間形成備份，進一步加強了信息的安全性。同時，通過這樣的形 式，這樣可以降低存儲設(shè)備以及維護等的相關(guān)投資，只需要進行客戶端設(shè)備和網(wǎng)絡(luò)的投資，大大節(jié)約了成本。更重要的是，系統(tǒng)的私有云整合了所有信息，為視 頻信息隨時隨地的利用提供了前提條件。“云存儲+智能終端”模式的核心思想就是使用移動網(wǎng)絡(luò)和Wi-Fi網(wǎng)絡(luò)在智 能終端上訪問系統(tǒng)私有云中的

8、信息。 通過合法的身份認證和權(quán)限辨識，用戶可以 檢索需要的信息，從而提高視頻信息的利用率。3.2.3“云存儲+智能終端”模式的優(yōu)勢1）存儲容量大云存儲通過聯(lián)合多個服務(wù)器為用戶提供幾近無限的存儲空間,無需再為數(shù)據(jù)增長帶來的支出擔(dān)心。2）安全性高云存儲服務(wù)商對云存儲的數(shù)據(jù)有嚴格的權(quán)限管理以及加密技術(shù)、防攻擊技術(shù)等，同時，在本地可能需要多臺服務(wù)器存儲管理的海量數(shù)據(jù)一旦遷移到云存儲中， 只需要管理相當于一臺服務(wù)器，并且有專業(yè)人員統(tǒng)一監(jiān)測管理，將數(shù)據(jù)丟失和損 壞的概率降到最低，避免了數(shù)據(jù)因本地服務(wù)器中病蠹或其他災(zāi)禍造成的數(shù)據(jù)丟 失。3）節(jié)約成本利用云存儲存放數(shù)據(jù)，相對傳統(tǒng)數(shù)據(jù)儲存而言，無需支付昂貴的存儲

9、設(shè)施和 維護費用，只需支付服務(wù)費，大大降低了成本，有效地提升了資源的利用率。4）提高利用率“云存儲+智能終端”的管理模式中，用戶利用視頻信息的途徑有了更多選 擇，可在智能終端查看。將數(shù)據(jù)集中起來，用戶可以在任何地點，依靠電腦或是 移動設(shè)備隨時訪問數(shù)據(jù)，減少了傳統(tǒng)的資源交換，提高資源的利用率。四、關(guān)鍵技術(shù)4.1 VRVR （Virtual Reality的簡稱）虛擬現(xiàn)實技術(shù)是一種可以創(chuàng)建和體驗虛擬世 界的計算機仿真系統(tǒng)。它利用計算機生成一種模擬環(huán)境，一種多源信息融合的交 互式的三維動態(tài)視景和實體行為的系統(tǒng)仿真，使用戶沉浸到該環(huán)境中。虛擬現(xiàn)實是多種技術(shù)的綜合，包括實時三維計算機圖形技術(shù)，廣角（寬視

10、野）立體顯示技 術(shù)，對觀察者頭、眼和手的跟蹤技術(shù)，以及觸覺/力覺反饋、立體聲、網(wǎng)絡(luò)傳輸、 語音輸入輸出技術(shù)等。4.2實時縫合實時縫合軟件系統(tǒng)是目前國際最先進的多目實時全景縫合系統(tǒng)，采用4K實時全景視頻縫合技術(shù)，支持2-10目多攝影機視頻信號傳入，同時進行實時縫合， 并處理鏡頭畸變帶來的畫面扭曲。通過算法合并的全景視頻會通過圖形處理運算 進行實時顯示，可以在5幀以內(nèi)完成合成與輸出。其獨有的軟硬件結(jié)合的運算算 法，實現(xiàn)高速縫合和高質(zhì)輸出，高密度并行編轉(zhuǎn)碼。通過超前的并行運算構(gòu)架， 合理有效地分配轉(zhuǎn)碼運算資源，在實時縫合的高度運算負載壓力下，可以實時推送4K RTMP流，并且還能夠?qū)崟r錄制高活全景視

11、頻。系統(tǒng)可以手動設(shè)定RTMP推流碼率，可以將低碼率還原出高質(zhì)量的畫面， 畫面質(zhì)量達到行業(yè)領(lǐng)先有效節(jié)省 帶寬。同時，系統(tǒng)可以在全景視頻實時輸出的同時疊加LOG。和簡單圖文包裝， 支持圖文包裝增值。支持4K高活全景視頻錄制，并且可以實時與采集的音頻混 合，實現(xiàn)真正的完美錄制并實現(xiàn)4K高活全景視頻實時與采集音頻合成的畫面可 以通過RTMP或HD-SDI實時輸出。1）、國內(nèi)唯一。目前該系統(tǒng)是國內(nèi)唯一可以做到視頻直播的VR實時拼接 實時渲染系統(tǒng)。2）、自主技術(shù)。該系統(tǒng)擁有自主的高級計算機視頻縫合技術(shù)以及實時虛擬 效果植入技術(shù)?？蔀?-10機位視頻圖像進行實時縫合，為用戶提供多種解決方 案，也可根據(jù)客戶特

12、殊需求提供個性化定制解決方案。3）、本土化服務(wù)。公司為國內(nèi)本土企業(yè)，在廣西設(shè)有售后服務(wù)商可隨時為 用戶提供所最及時、最有效的售后服務(wù)。4）、高性價比。擁有自己研發(fā)的技術(shù)，可為用戶節(jié)約50%-70%的費用。4.3大數(shù)據(jù)傳統(tǒng)的信息管理一直停留丁管理、分類、歸檔、存儲及簡單的統(tǒng)計查詢。通 過運用大數(shù)據(jù)技術(shù)數(shù)據(jù)量巨大、數(shù)據(jù)類型繁多、價值密度低、處理速度快的特點， 可以對傳統(tǒng)信息進行提取，并針對提取出的有效信息根據(jù)一定的規(guī)律進行挖掘， 滿足不同用戶的信息需求,使得在搜索時從大范圍變成從小范圍, 從而提高信息 利用的效率和準確度。通過針對各種數(shù)據(jù)的挖掘、梳理分析，智能的給不同的分 析決策者提供不同的預(yù)測結(jié)

13、果，讓存儲價值低的數(shù)據(jù)起到玉石脫胎丁原石效果。4.4云計算構(gòu)建的VR視頻云平臺，包含以上采集、拼接、編碼傳輸和播放等幾個環(huán)節(jié)。采用多個普通鏡頭進行多角度無死角的拍攝，使用特征提取、特征匹配、校準、融合和曝光補償?shù)燃夹g(shù)拼接成完整的全景圖像；再經(jīng)H264、H265等視頻壓縮技術(shù)進行編碼處理，之后通過RTMP傳輸協(xié)議進行傳輸，最后通過相應(yīng)解碼器 完成解碼播放工作，在不同終端上實現(xiàn)VR、全景等播出形式。使用云端編碼技 術(shù)，VR視頻云平臺可以同時支持TV、PC、iOS、Android、H5等各種終端的 播出。五、功能設(shè)計該系統(tǒng)可實現(xiàn)4K視頻實時縫合預(yù)覽；本地錄制多格式原尺寸多目縫合畫面； 標準HD SD

14、I信號輸出；RTMP數(shù)據(jù)推流及云直播。支持安全距離可調(diào)，曝光 參數(shù)可調(diào)，畸變可控，輸出4K錄制，HDMI、SDI、USB等視頻數(shù)據(jù)采集接口。 同時通過直播平臺，實現(xiàn)“內(nèi)容+平臺+終端+應(yīng)用”的VR直播生態(tài)鏈。5.1 VR視頻制作5.1.1錄制功能本地錄制4K全景視頻：使用2-10目全景采集攝像機拍攝，實時采集被拍 攝主體的視頻，通過系統(tǒng)強大的并行運算能力和優(yōu)化算法， 支持多目攝影機拍攝 視頻畫面拼接，多畫面視頻實時縫合，將現(xiàn)場4K全景視頻實時錄制在本地存儲 介質(zhì)。全景圖片拍攝：4K全景照片拍攝，利用相機將360度場景拍攝到的一組 照片拼合成為一幅包含全部場景的圖片，將多目攝像機成像效果最為接近

15、的區(qū)域 加以重合，以完成圖片的自動拼接。5.1.2預(yù)覽功能全景縫合視頻實時預(yù)覽：通過系統(tǒng)強大的計算功能，可實時預(yù)覽全景縫合視 頻拍攝的效果，實現(xiàn)所見即所得全景鋪開實時預(yù)覽：可實現(xiàn)未縫合前全景鋪開視頻畫面預(yù)覽多目攝像機分鏡頭預(yù)覽：可單獨預(yù)覽每個相機拍攝視頻畫面5.1.3設(shè)置功能分辨率及尺寸：可設(shè)置視頻或圖片的分辨率及尺寸大小。視頻碼率：可根據(jù)客戶需求設(shè)置調(diào)節(jié)視頻碼率大小。RTMP推流地址：可添加設(shè)置不同的RTMP推流地址，實現(xiàn)網(wǎng)絡(luò)直播。參數(shù)調(diào)節(jié)：可手動調(diào)節(jié)白平衡、曝光、色溫、色調(diào)等參數(shù)。輸出選擇：可選擇RTMP推流輸出或者SDI輸出。4K RTMP實時推流或者4K HD-SDI信號實時輸出。安全距離設(shè)定：為防止拍攝畫面畸變，可根據(jù)拍攝視角設(shè)置安全拍攝距離，拍攝安全距離可調(diào)整，利丁控制畫面畸變。5.2直播平臺管理將現(xiàn)場實時拍攝的音視頻數(shù)據(jù)使用RTMP傳輸協(xié)議進行封裝，變成流數(shù)據(jù)。通過一定的Qos算法將音視頻流數(shù)據(jù)推送到云端或流媒體服務(wù)器，通過web端 或App端