虛擬人行業(yè)深度報(bào)告：AI驅(qū)動(dòng)虛擬人產(chǎn)業(yè)升級應(yīng)用場景進(jìn)一步拓展

內(nèi)容目錄內(nèi)容目錄虛擬數(shù)字人受技術(shù)需驅(qū)動(dòng)，以擬人化為展向 4AI全方位賦能虛擬人，制作端降本增效多態(tài)交互能力提升 6AI推動(dòng)虛擬數(shù)字人產(chǎn)現(xiàn)降本增效 8AI推動(dòng)虛擬人多模態(tài)能力提升 虛擬人應(yīng)用端持續(xù)地商業(yè)化前景廣闊 13廣告營銷領(lǐng)域：虛人為品牌營銷重要工具 13直播電商領(lǐng)域：虛主帶貨有望替代真人播 14陪伴場景：海外發(fā)迅，國內(nèi)企業(yè)加快探索 16虛擬人形象泛娛樂景用，IP具備優(yōu)勢 17投資建議 19風(fēng)險(xiǎn)提示 20圖表目錄圖表目錄圖1.虛擬人發(fā)展歷程 4圖2.AI虛擬人產(chǎn)業(yè)鏈 5圖3.虛擬人可分為服務(wù)與身份型 6圖4.虛擬人市場規(guī)模 6圖5.構(gòu)建虛擬人的基本術(shù)架構(gòu) 7圖6.AI賦能虛擬人產(chǎn)業(yè) 7圖7.AI數(shù)字虛擬人三大本特征 8圖8.虛擬人按外型分類 10圖9.虛幻引擎旗下MetaHuman高保真虛擬人模意 10圖10.AI在虛擬人制作節(jié)的替代 10圖新華智云數(shù)字人 圖12.AI驅(qū)動(dòng)數(shù)字人未發(fā)展方向 12圖13.天娛數(shù)科旗下虛人直播帶貨 13圖14.世優(yōu)科技旗下虛人慕蘭 13圖15.魔琺科技為歐萊打造虛擬人形象代言 13圖16.魔琺科技自有虛人翎代言天貓和百羚 13圖17.萬興科技提供多種虛擬人形象生成 14圖18.騰訊智影提供AI虛擬人創(chuàng)作工具 14圖19.快手為蒙牛推出擬人主播 15圖20.遙望科技旗下主及孿生數(shù)字人 15圖21.海內(nèi)外已上線多陪伴類虛擬人應(yīng)用 16圖22.小冰公司旗下網(wǎng)虛擬分身 17圖23.數(shù)字人天妤參與泛娛樂活動(dòng) 18表1.虛擬人制作的主要節(jié)及工具 9表2.AI在虛擬人交互場中的應(yīng)用 12表3.2023年中國虛擬人強(qiáng)榜18虛擬數(shù)字人受技術(shù)與需求驅(qū)動(dòng)，以擬人化為發(fā)展方向虛擬數(shù)字人行業(yè)發(fā)展主要受技術(shù)驅(qū)動(dòng)和需求指引，核心是擬人化。虛擬人物在表現(xiàn)為對真人的替代能力。虛擬人發(fā)展不同階段應(yīng)用受制于技術(shù)水平，AI時(shí)代應(yīng)2080GeorgiaStoneMax21世紀(jì)初，建模、動(dòng)捕等技術(shù)的革新推動(dòng)虛擬人產(chǎn)業(yè)進(jìn)步，演員動(dòng)捕結(jié)合CG合成的虛擬人物應(yīng)用至影視行業(yè)。ZAGC進(jìn)入AI虛擬發(fā)歷程 數(shù)據(jù)來源：中國人工智能產(chǎn)業(yè)發(fā)展聯(lián)盟《2020年虛擬數(shù)字人發(fā)展白皮書》、AI虛擬人產(chǎn)業(yè)鏈包含基礎(chǔ)層、平臺層、價(jià)值層、交互層。AICGAIGC應(yīng)用層主要包括三大應(yīng)用方向：通過IP圖2.AI虛人業(yè)鏈 數(shù)據(jù)來源：商湯智能研究院、根據(jù)應(yīng)用與核心功能分類，虛擬人可分為身份型和功能型虛擬人。身份型虛擬虛擬可為務(wù)與份型 數(shù)據(jù)來源：量子位、AI賦能虛擬人行業(yè)，市場空間廣闊2022120.894.2%。2023AI望賦能虛擬人產(chǎn)業(yè)，實(shí)現(xiàn)多環(huán)節(jié)降本增效，大幅提升應(yīng)用端交互能力，到2025年虛擬人行業(yè)核心市場規(guī)模有望達(dá)到480.6億元。虛擬市規(guī)模 數(shù)據(jù)來源：艾媒咨詢、AI全方位賦能虛擬人產(chǎn)業(yè)，制作端降本增效，多模態(tài)交互能力提升根據(jù)頭豹研究院，構(gòu)建虛擬人的基本技術(shù)架構(gòu)包括虛擬人形象制作、驅(qū)動(dòng)與交互。形象制作主要分為手繪、CG建模、AI的方式；驅(qū)動(dòng)、交互環(huán)節(jié)分為CG+中之人技術(shù)、AI驅(qū)動(dòng)技術(shù)。AI驅(qū)動(dòng)數(shù)字人主要表現(xiàn)為通過AI建模和訓(xùn)練，基于性格特征和態(tài)度觀點(diǎn)的AI交互。構(gòu)建擬的本術(shù)構(gòu) 數(shù)據(jù)來源：頭豹研究院《2022年中國虛擬人產(chǎn)業(yè)發(fā)展白皮書》、IDCL1-L5階段L1依賴人工制作形象和動(dòng)畫，L2階段虛擬人依賴外部動(dòng)捕設(shè)備采集肢體、表情和口型信息，L3AIL4、L5圖6.AI賦虛人業(yè) 數(shù)據(jù)來源：IDC、根據(jù)商湯智能研究院，AI數(shù)字虛擬人三大特征包括：多模態(tài)交互、深度學(xué)習(xí)能力、AIGC生產(chǎn)力AIGCAI數(shù)AI圖7.AI數(shù)虛人大本征 數(shù)據(jù)來源：商湯智能產(chǎn)業(yè)研究院、AI推動(dòng)虛擬數(shù)字人產(chǎn)業(yè)實(shí)現(xiàn)降本增效虛擬人的構(gòu)建流程主要包括建模、驅(qū)動(dòng)和渲染等環(huán)節(jié)。建模作為基礎(chǔ)環(huán)節(jié)，是決定虛擬人整體形象的關(guān)鍵，驅(qū)動(dòng)實(shí)現(xiàn)虛擬人由靜到動(dòng)，渲染技術(shù)提升畫面質(zhì)感，增強(qiáng)虛擬人的真實(shí)感。驅(qū)動(dòng)環(huán)節(jié)分為面部和身體動(dòng)作的驅(qū)動(dòng)。面部以嘴型為主，主要通過算法訓(xùn)練建立文本到語音再到嘴型視頻的對應(yīng)關(guān)系，得到文本驅(qū)動(dòng)嘴型變化的模型。虛擬人的身體動(dòng)作主要通過動(dòng)作捕捉技術(shù)獲得真人演員的行為動(dòng)作，再將其移植到虛擬人上。動(dòng)捕技術(shù)包括光學(xué)、慣性和基于計(jì)算機(jī)視覺三種，光學(xué)動(dòng)捕精度較高，應(yīng)用也較為成熟，設(shè)備造價(jià)較高；慣性動(dòng)作捕捉成本較低，場地的限制較小，但精度較差。計(jì)算機(jī)視覺動(dòng)捕較為簡便，利用攝像頭拍攝的圖像進(jìn)行三維建模，成本也相對較低，而建模的計(jì)算量較大。渲染環(huán)節(jié)通過對3D虛擬人或虛擬場景加入幾何、視點(diǎn)、紋理、照明和陰影等信息，實(shí)現(xiàn)從模型到圖像的轉(zhuǎn)變，這一環(huán)節(jié)決定了數(shù)字人最終的呈現(xiàn)效果。根據(jù)虛擬人應(yīng)用場景的不同，渲染方式可以分為離線渲染和實(shí)時(shí)渲染，如制作影視作品不需要追求渲染速度，可以通過離線渲染實(shí)現(xiàn)更好的畫面質(zhì)量；實(shí)時(shí)渲染技術(shù)側(cè)重交互和及時(shí)性，適用于游戲、虛擬客服、虛擬主播等用戶頻繁交互的場景，目前最新的Unity和虛幻引擎已支持高畫質(zhì)實(shí)時(shí)渲染。表1.虛擬人制作的主要環(huán)節(jié)及工具環(huán)節(jié) 方式工具概述AI賦能建模傳統(tǒng)建模Autodeskmaya、傳統(tǒng)建模軟件廣泛應(yīng)用于影視制作領(lǐng)域，技術(shù)成熟，但3dsMax等軟件依賴建模師手工制作，較為耗時(shí)。掃描建模3D掃描儀及配套軟件通過掃描儀快速獲取物體高品質(zhì)彩色數(shù)據(jù)，滿足包括人體、藝術(shù)品及家具等不同尺寸實(shí)物的多種細(xì)節(jié)和精度要求的3D建模需求建模采集步驟簡化、專業(yè)設(shè)備需求降低，照片建模Photosynth、 根據(jù)不角拍的實(shí)物的態(tài)片將一方只需戶傳合標(biāo)3DSOMPro等軟向拍照的理射該方對模表位，從準(zhǔn)的頻圖和音件 而快立3D模型 頻素，可動(dòng)光場建模Mrstudio、Relightable系統(tǒng)、MagicBall智能光場等利用多角度攝像機(jī)、多角度光源模擬拍攝真人各種條件下的影像，解算人體表面形貌特性成建模驅(qū)動(dòng)光學(xué)動(dòng)捕配套軟件等通過專業(yè)攝像頭對演員服裝上特定光點(diǎn)進(jìn)行追蹤，實(shí)現(xiàn)動(dòng)作捕捉AI自動(dòng)生成動(dòng)作，對演員的需求降低，實(shí)慣性動(dòng)捕慣性傳感器模塊演員穿戴傳感器后，利用傳感器采集演員動(dòng)作數(shù)據(jù)，再及配軟件 通過法數(shù)進(jìn)處完成作捉現(xiàn)虛擬人“自驅(qū)動(dòng)”視覺動(dòng)捕LeapMotion、Kinect系統(tǒng)等通過深度攝像頭或普通攝像頭采集圖像數(shù)據(jù)，通過算法完成動(dòng)作捕捉渲染在線、離線渲染Unity虛等渲通過染對3D數(shù)或虛場加幾、視染引擎 點(diǎn)、理照和影信息而成模到像的轉(zhuǎn)變低數(shù)據(jù)來源：VR陀螺、maya官網(wǎng)、3dsMAX官網(wǎng)、3D、3D2DMidjourney、StableDiffusionAI2D圖像的生成。根據(jù)騰訊研究院，3D超寫實(shí)和高保真數(shù)字人。3D虛擬人制作涉及技術(shù)領(lǐng)域多、制作方法不統(tǒng)一，自動(dòng)AIMetaHuman虛擬按型類 數(shù)據(jù)來源：騰訊研究院、圖9.虛幻擎下MetaHuman高保虛人模意 數(shù)據(jù)來源：MetaHuman官網(wǎng)、AI能夠在虛擬人制作的多環(huán)節(jié)實(shí)現(xiàn)替代，2D數(shù)字人的視頻生成、3D數(shù)字人的建模、視頻驅(qū)動(dòng)、物理仿真等多個(gè)環(huán)節(jié)。根據(jù)騰訊研究院，AI在虛擬人制作中可以替代人工建模、實(shí)現(xiàn)算法模擬動(dòng)作，提高數(shù)據(jù)采集速度，在驅(qū)動(dòng)環(huán)節(jié)實(shí)現(xiàn)降本增效。圖10.AI在擬制環(huán)的代 數(shù)據(jù)來源：騰訊研究院、傳統(tǒng)的AI2-5分鐘的真人視頻，AI1部精細(xì)度更高，發(fā)音和口型更精準(zhǔn)，肢體動(dòng)作更自然，同時(shí)數(shù)據(jù)采集時(shí)間縮短75%新華智云通過將AI賦能虛擬人制作，縮短了制作時(shí)間，降低了數(shù)字人制作成本，實(shí)現(xiàn)了3D寫實(shí)數(shù)字人的價(jià)格大幅壓縮。新華云字人 數(shù)據(jù)來源：新華智云官網(wǎng)、AI推動(dòng)虛擬人多模態(tài)交互能力提升當(dāng)前數(shù)字人對語言理解仍以文本為主，接入大模型仍需進(jìn)行技術(shù)轉(zhuǎn)化。AI驅(qū)動(dòng)數(shù)字人是指數(shù)字人的語音表達(dá)、面部表情和動(dòng)作形態(tài)等通過深度學(xué)習(xí)模型進(jìn)行運(yùn)算，將其結(jié)果實(shí)時(shí)或者離線驅(qū)動(dòng)，并進(jìn)行渲染。目前虛擬人接入大模型以文本交互為主，本質(zhì)是通過ASR-NLP-TTS等AI技術(shù)進(jìn)行轉(zhuǎn)化，實(shí)現(xiàn)數(shù)字人感知、決策、表達(dá)等層面的交互，自然語言大模型與虛擬人的融合還需進(jìn)一步完善。AI在虛擬人動(dòng)作合成的應(yīng)用方向分為嘴型和其他動(dòng)作，目前計(jì)算機(jī)視覺AI表2.AI在擬交場中應(yīng)用 技術(shù)階段作用和目的發(fā)展趨勢語音理解ASR感知階段將人的語音轉(zhuǎn)化為文本相對成熟NLP決策階段處理并理解文本，以對話能力為核心，為數(shù)字人的大腦配合知識圖譜，應(yīng)用于特定場景，未來通用型模型還需要完善TTS表達(dá)階段將需要輸出的文本合為語音相對成熟，未來方向增加斷句、多音字的準(zhǔn)確度，增加情感，更加似人動(dòng)作合成AI驅(qū)動(dòng)嘴型動(dòng)作表達(dá)階段建立輸入文本到輸出音頻與輸出視覺信息的關(guān)聯(lián)映射，主要對采集到的文本到語音和嘴型視頻（2D）/嘴型動(dòng)畫（3D）的數(shù)據(jù)進(jìn)行模型訓(xùn)練，得到相關(guān)模型，并智能合成。隨著寫實(shí)度的提高，微表情更多，超寫實(shí)對精度要求更高，還需進(jìn)一步完善AI驅(qū)動(dòng)其他動(dòng)作表達(dá)階段動(dòng)作是采用隨機(jī)策略或者校本進(jìn)行預(yù)設(shè)，需要人工配制描述性的數(shù)據(jù)或標(biāo)簽尚未實(shí)現(xiàn)智能合成數(shù)據(jù)來源：騰訊研究院、AI大模型多模態(tài)生成能力對數(shù)字人發(fā)展推動(dòng)潛力巨大，驅(qū)動(dòng)數(shù)字人“思想”更像人（02AIAI圖12.AI驅(qū)數(shù)人來展向 數(shù)據(jù)來源：騰訊研究院、世優(yōu)科技AI地天娛數(shù)科旗下虛擬數(shù)字人“朏朏”接入ChatGPT模型，直播交互能力大幅提升。天娛數(shù)科子公司元境科技自研MetaSurfing-元享智能云平AIChatGPT加生動(dòng)逼真，同時(shí)具備了智能交互、智能決策以及多終端部署能力。在直播中，朏朏能夠介紹產(chǎn)品特征，并能與觀眾進(jìn)行流暢的問答互動(dòng)。圖13.天娛科下擬直帶貨 世優(yōu)技下擬慕蘭 數(shù)據(jù)來源：天娛數(shù)科官網(wǎng)、 數(shù)據(jù)來源：世優(yōu)科技官網(wǎng)、虛擬人應(yīng)用端持續(xù)落地，商業(yè)化前景廣闊廣告營銷領(lǐng)域：虛擬人成為品牌營銷重要工具IP絲基礎(chǔ)的身份型虛擬人KOL，與品牌方開展合作，實(shí)現(xiàn)代言推廣。魔琺科技2020M圖15.魔琺科技為歐萊雅打造虛擬人形象代言圖16.魔琺科技自有虛擬人翎代言天貓和百雀羚 數(shù)據(jù)來源：魔琺科技官網(wǎng)、 數(shù)據(jù)來源：魔琺科技官網(wǎng)、品牌方自有虛擬人為公司的品牌形象代言，與第三方虛擬人企業(yè)合作，整合形式落地較為常見，SaaS等標(biāo)準(zhǔn)化的解決方案是未來的發(fā)展方向。當(dāng)前虛擬人在品牌方廣告營銷中的應(yīng)用滲透率較低，品牌方打造虛擬人以定制化的需求為主，第三方虛擬人企業(yè)通常以整合形式提供解決方案。隨著品牌方虛擬人需求進(jìn)一步增長，虛擬人制作標(biāo)準(zhǔn)化程度提高，類似SaaS形式的標(biāo)準(zhǔn)化平臺解決方案有望獲得較大空間。AIGC格各異的仿真AI圖17.萬興技供語虛人形生成 圖18.騰訊影供AI虛人作工具 數(shù)據(jù)來源：萬興科技官網(wǎng)、 數(shù)據(jù)來源：騰訊智影官網(wǎng)、平臺提供標(biāo)準(zhǔn)化的虛擬人創(chuàng)作工具，降低創(chuàng)作門檻與成本，有望推動(dòng)虛擬人實(shí)現(xiàn)虛擬人應(yīng)用滲透率提升。騰訊智影同時(shí)提供付費(fèi)會(huì)員與定制服務(wù)，定制化需求不強(qiáng)的用戶通過開通會(huì)員即可在數(shù)字人模板庫中選擇形象；用戶選擇定制服務(wù)可通過上傳照片、視頻、音頻等素材，由平臺訓(xùn)練生成定制化的虛擬人，并添加到用戶數(shù)字人形象列表中以供使用。直播電商領(lǐng)域：虛擬主播帶貨有望替代真人主播虛擬人在直播帶貨場景中的應(yīng)用日趨廣泛，虛擬人直播替代人工直播優(yōu)勢包括節(jié)省用人成本，直播時(shí)長拓展到24小時(shí)，直播內(nèi)容統(tǒng)一、質(zhì)量穩(wěn)定等。目前虛擬人直播尚無法完全替代真人直播，但已經(jīng)廣泛應(yīng)用至企業(yè)店播場景。根據(jù)快手科SeaLakeD蒙IP圖圖19.快手為蒙牛推出虛擬人主播數(shù)據(jù)來源：快手、AI星助理等應(yīng)用。2023515圖圖20.遙望科技旗下主播及孿生數(shù)字人數(shù)據(jù)來源：新播場、我們認(rèn)為，電商場景下，虛擬人能夠全鏈賦能，推動(dòng)實(shí)現(xiàn)購買、售后、復(fù)購良性循環(huán)陪伴場景：海外發(fā)展迅速，國內(nèi)企業(yè)加快探索陪伴場景升級的關(guān)鍵在于虛擬人交互能力的提升，AI虛擬人能夠提供擬人化的情感陪伴服務(wù)。目前已出現(xiàn)較多陪伴型虛擬人應(yīng)用：Character.AIAICharacter.AI尚未進(jìn)行商業(yè)化，而典型的UGC+社區(qū)模式的UGCAIReplika給予用戶受限的初始形象，可通過付費(fèi)解鎖，平臺付費(fèi)屬性較強(qiáng)，Replika已GlowMiniMaxAIAI海內(nèi)已線款伴虛擬應(yīng)用 數(shù)據(jù)來源：Replika官網(wǎng)、Glow官網(wǎng)、海外獨(dú)角獸、國內(nèi)廠商加快AI與游戲社交場景探索。盛天網(wǎng)絡(luò)旗下游戲社交產(chǎn)品“帶帶電競”是一款滿足“Z世代”游戲社交需求的APP，提供游戲社交、陪練、技能分享以及跨屏互動(dòng)功能，目前“帶帶電競”位居華為、VIVO多個(gè)應(yīng)用市場垂類前列。根據(jù)公司公開信息，公司未來將圍繞社交業(yè)務(wù)做語音陪伴，優(yōu)化社交用戶體驗(yàn)。此AI中文在線：AI虛擬人陪伴場景延伸至游戲應(yīng)用、互動(dòng)閱讀平臺。中文在線旗下MyEscape行匹配、虛擬約會(huì)等活動(dòng)。根據(jù)公司公告，海外產(chǎn)品MyEscape已進(jìn)行接入ChatGPTAIAIChaptersChaptersAI虛擬人多年，推出“GPT克隆人計(jì)劃”強(qiáng)粉絲經(jīng)濟(jì)效應(yīng)。5月小冰公司宣布啟動(dòng)“GT3分鐘數(shù)據(jù)，即可生成擁有本人外貌、聲音、性格的“AI克隆人”。通過官方XEva，用戶可以與克隆人交流?？寺∪嘶谛”蚣艽竽Ｐ汀⑸窠?jīng)網(wǎng)絡(luò)渲染及AIGC能力。小冰司下紅擬身 數(shù)據(jù)來源：AI小冰官方公眾號、虛擬人形象泛娛樂場景應(yīng)用，IP具備優(yōu)勢虛擬偶像在泛娛樂場景的應(yīng)用廣泛，流量轉(zhuǎn)化是重要變現(xiàn)形式。AI的推廣并未改變虛擬偶像的商業(yè)模式，IP的孵化運(yùn)營仍依賴具備運(yùn)營經(jīng)驗(yàn)的團(tuán)隊(duì)，虛擬人通過直播、演唱會(huì)、短視頻等形式參與內(nèi)容制作，獲得粉絲流量，進(jìn)而商業(yè)化。虛擬偶像的受眾主要為年輕群體，品牌方多愿意通過虛擬人等二次元形象觸達(dá)青年群體。艾媒咨詢發(fā)布2023年中國虛擬人百強(qiáng)榜，其中洛天依、柳夜熙、伊拾七、A-SOUL、天妤排名靠前。虛擬偶像主要運(yùn)營平臺為B站、抖音等視頻內(nèi)容平臺，流量豐富、用戶群體較為年輕，IP孵化成功率較高，流量具備較高轉(zhuǎn)化價(jià)值。表3.2023年中國虛擬人百強(qiáng)榜Top10排名虛擬人IP所屬企業(yè)主要平臺粉絲數(shù)（萬）主要平臺1洛天依上海禾念326.3B站2柳夜熙創(chuàng)壹科技840.6抖音3伊拾七一幾文化1192抖音4A-SOUL抖音集團(tuán)、樂華娛樂213.6微博5天妤元圓科技353.9抖音6希加加百度98.2抖音7蘇小妹藍(lán)色光標(biāo)61抖音8多多poi嗶哩嗶哩282.9B站9星瞳騰訊互娛53.9B站10顏之初天娛數(shù)科106.4抖音數(shù)據(jù)來源：艾媒咨詢、天娛數(shù)科旗下元夢工作室成功孵化出頭部虛擬人“天妤”。元夢工作室將策劃方向鎖定在“國風(fēng)虛擬人”這一垂直賽道，由于B站等次世代平臺中，青年群體國風(fēng)愛好者較廣，以國風(fēng)形象打造的虛擬人“天妤”能夠較快得到目標(biāo)用戶群體認(rèn)同；工作室在內(nèi)容運(yùn)營中注重講好優(yōu)秀傳統(tǒng)文化的故事，以內(nèi)容質(zhì)量取勝；依托優(yōu)質(zhì)的古風(fēng)形象，推動(dòng)文化出海，塑造虛擬人文化和商業(yè)屬性，成功孵化出“天妤”這一頭部IP。數(shù)字“妤參泛樂活動(dòng) 數(shù)據(jù)來源：數(shù)字人天妤官方公眾號、具備IP儲(chǔ)備的公司優(yōu)勢明顯。IP孵化具有不確定性，已有IP具備較高認(rèn)知度，例如文學(xué)形象轉(zhuǎn)化、明星IP化身遷移等，IP孵化成功的可能性更高，因此具備IP儲(chǔ)備的公司具備資源優(yōu)勢。投資建議生成式AIAI對虛擬人產(chǎn)業(yè)全鏈路賦能，從基礎(chǔ)層、平臺層、應(yīng)用層全方位推動(dòng)虛擬人產(chǎn)業(yè)進(jìn)化，有望解決虛擬人成本