虛擬數(shù)字人的變遷：從小眾走向共生-零壹智庫(kù)

虛擬數(shù)字人的變遷：從小眾走向共生報(bào)告名稱報(bào)告名稱報(bào)告名稱虛擬數(shù)字人的變遷：從小眾走向共生報(bào)告名稱報(bào)告名稱報(bào)告名稱從小眾走向共生庫(kù)報(bào)告主編：柏亮于百程1元宇宙的熱潮，推動(dòng)著各種虛擬數(shù)字人頻繁出現(xiàn)在公眾視野，元宇宙的熱潮，推動(dòng)著各種虛擬數(shù)字人頻繁出現(xiàn)在公眾視野，在娛樂(lè)、社交、營(yíng)銷等領(lǐng)域發(fā)揮其價(jià)值。在理解虛擬數(shù)字人時(shí)，需要對(duì)其詞組進(jìn)行拆分。、視頻、直播等方式存在于電子屏中，如APP、小程序、軟硬一體顯示設(shè)備。元宇宙下，VR設(shè)備與全息投影也將成為重要存在方式?！皵?shù)字”強(qiáng)調(diào)技術(shù)。虛擬數(shù)字人依托多項(xiàng)技術(shù)存在，包括建模驅(qū)動(dòng)、視覺設(shè)計(jì)、語(yǔ)音識(shí)“人”指的是高度擬人化。外在上，虛擬數(shù)字人有著特定的五官、身高和體重，甚至能流和互動(dòng)。習(xí)、語(yǔ)音合成等計(jì)算機(jī)手段創(chuàng)造及使用，并具有多重人類特征(外貌特征、人類表演能力、人類交互能力等)的綜合產(chǎn)物。零壹智庫(kù)、01區(qū)塊鏈聯(lián)合《陸家嘴》雜志針對(duì)虛擬數(shù)字人發(fā)布了第一期“虛擬數(shù)字人TOP50TOPTOP20)，也歡迎關(guān)注。一、虛擬數(shù)字人的萌芽與初步發(fā)展早在20世紀(jì)80年代，將虛擬人引入到現(xiàn)實(shí)世界的想法已經(jīng)出現(xiàn)。像”的稱號(hào)。國(guó)家喻戶曉?！皵?shù)字化”在這個(gè)階段并不明顯。打造虛擬人的技術(shù)以手工繪制為主，人物形象以2D卡通虛擬數(shù)字人的變遷：虛擬數(shù)字人的變遷：從小眾走向共生1世紀(jì)，世紀(jì)，虛擬人的數(shù)字化特征逐漸明顯。等計(jì)算機(jī)技術(shù)。傳統(tǒng)CG技術(shù)脫胎于游戲行業(yè)，主要基于專業(yè)CG軟件進(jìn)行相應(yīng)的建模、動(dòng)畫制作和渲染等，可以從外形、表情到動(dòng)作方面還原真人的影視級(jí)效果。動(dòng)作捕捉技術(shù)來(lái)源于電影工業(yè)，即通過(guò)紅外線攝像機(jī)、動(dòng)作分析系統(tǒng)，透過(guò)由受試者身上反光球執(zhí)行反射回來(lái)的光線，將運(yùn)用攝像機(jī)拍攝到的2D影像轉(zhuǎn)換成3D資料。2007年，日本虛擬歌手“初音未來(lái)”的誕生與流行成為虛擬數(shù)字人在該階段最重要的里程碑。初音未來(lái)的虛擬形象采用CG和動(dòng)作捕捉技術(shù)。在動(dòng)作捕捉技術(shù)的助力下，初音未來(lái)可以直接采用人類的表情和動(dòng)作，借助CG技術(shù)，能夠?qū)?dòng)作捕捉生成的“人物骨骼”進(jìn)行“無(wú)痕”對(duì)接。初音未來(lái)的一顰一笑都與人類更加接近。作為虛擬歌姬，初音未來(lái)的歌喉基于VOCALOID(電子音樂(lè)制作語(yǔ)音合成軟件)。采樣于日本粉絲為初音未來(lái)創(chuàng)作了超10萬(wàn)首歌曲，包括紅遍大街小巷的《甩蔥歌》等。D接而成，并采用高流明的投影，配合三維動(dòng)畫內(nèi)容投射到全息投影膜上。該技術(shù)“復(fù)活”了初音的形式展現(xiàn)，展現(xiàn)方式以事先完成的音頻和視頻為主，并不具備實(shí)時(shí)交互功能。圖：初代虛擬歌姬“林明美”虛擬數(shù)字人的變遷：虛擬數(shù)字人的變遷：從小眾走向共生2從形象創(chuàng)建、演唱方式到互動(dòng)形式，初音未來(lái)在“數(shù)字”上垮了一大步。誕生僅五年，其已經(jīng)創(chuàng)下了超100億日元的經(jīng)濟(jì)效益，正式了掀起虛擬偶像熱潮。健康的小麥色膚色、長(zhǎng)著濃眉和雀斑、扎著標(biāo)志性的丸子頭和齊劉海，以及新銳潮流的穿搭、假辯論”。許多粉絲相信她是真實(shí)存在的人物，只是修圖“狠”了點(diǎn)。直到黑客們LilMiquela具有非常強(qiáng)烈的性格特征。她用自己的實(shí)名賬號(hào)，在網(wǎng)絡(luò)上聲援跨性別者平權(quán)，T，LilMiquela與特朗普、蕾哈娜等人一起被美國(guó)《時(shí)代》周刊列為“25位最有影響力的互聯(lián)網(wǎng)人物”。擬人形象對(duì)面捕和身體建模對(duì)建模提出了更高要求，需要使用三維建模技術(shù)生成形象，信息虛擬數(shù)字人的變遷：虛擬數(shù)字人的變遷：從小眾走向共生3平臺(tái)上發(fā)表自己的想法，逐漸具備社會(huì)影響力。D出現(xiàn)，恐怖谷效應(yīng)開始出現(xiàn)。所以人類會(huì)對(duì)機(jī)器人產(chǎn)生正面的情感。當(dāng)機(jī)器人與人類的相似程度達(dá)到一個(gè)特定程度的時(shí)候，一點(diǎn)點(diǎn)的差別都會(huì)顯得非常刺目，并帶來(lái)負(fù)面和反感情緒。而當(dāng)機(jī)器人與人類的相似度繼續(xù)上升，人類對(duì)其情感會(huì)再度回到正面。虛擬數(shù)字人的變遷：虛擬數(shù)字人的變遷：從小眾走向共生4虛擬人不僅需要以假亂真的建模技術(shù)，還需要在表情、動(dòng)作以及交互能力上提升。怖谷效應(yīng)下，不僅建模技術(shù)需要實(shí)現(xiàn)擬真，在渲染和交互上也提出了更高要求。渲染和交互能力是個(gè)“此消彼長(zhǎng)”的過(guò)程。游戲中的角色更加強(qiáng)調(diào)交互能力，渲染出來(lái)的角出來(lái)的角色能夠達(dá)到肉眼分不出真假的層次，但是不具備交互性。實(shí)性和交互性之間找到平衡，打造了具備實(shí)時(shí)交互能力的數(shù)字虛擬人。Siren的所有動(dòng)作表情都由實(shí)時(shí)捕捉以及實(shí)時(shí)渲染形成。操作者需要將一套特制的設(shè)備戴在頭上，這一設(shè)備會(huì)實(shí)時(shí)跟蹤200多個(gè)面部特征點(diǎn)，再把這些特征點(diǎn)實(shí)時(shí)反映到系統(tǒng)構(gòu)造的3D臉部模型上，最終呈現(xiàn)為以每秒60幀輸出的動(dòng)作表情。整個(gè)捕捉過(guò)程會(huì)在15毫秒內(nèi)完成，基本不會(huì)有什么延遲。虛擬數(shù)字人的變遷：虛擬數(shù)字人的變遷：從小眾走向共生5諍在不到3個(gè)月的時(shí)間被打造出來(lái)，相較Siren的制作周期縮短了一半。這依賴于一套高效人制作的流程。面部汗毛，這對(duì)機(jī)能的消耗是極其龐大。高昂的建設(shè)成本使得虛擬數(shù)字人難以在商業(yè)領(lǐng)域大規(guī)模落地。虛擬數(shù)字人的變遷：虛擬數(shù)字人的變遷：從小眾走向共生6圖：虛擬數(shù)字人“小諍”三圖：虛擬數(shù)字人“小諍”三、AI技術(shù)的引用帶來(lái)大規(guī)模商業(yè)化應(yīng)用隨著虛擬數(shù)字人技術(shù)的發(fā)展，AI技術(shù)成為制作和驅(qū)動(dòng)虛擬人重要的工具。AI技術(shù)的支持下，數(shù)字人制作過(guò)程得以簡(jiǎn)化，深度學(xué)習(xí)算法突破，提升虛擬人語(yǔ)音表達(dá)、語(yǔ)義理解以及對(duì)話等能力。面捕技術(shù)實(shí)現(xiàn)驅(qū)動(dòng)的虛擬人。成，并具備感知、表達(dá)等無(wú)需人工干預(yù)的自動(dòng)交互能力。近五年，AI在虛擬數(shù)字人生成和驅(qū)動(dòng)上展現(xiàn)了較高的效率。在《企業(yè)級(jí)AI數(shù)字人數(shù)字經(jīng)濟(jì)被分成五個(gè)等級(jí)。AI快速發(fā)展和融入行業(yè)的態(tài)勢(shì)使得虛擬數(shù)字人融入各個(gè)行業(yè)的發(fā)展成為可能。報(bào)告指出，L4和L5等級(jí)的數(shù)字人不僅具備高度的擬人化呈現(xiàn)，在形象、動(dòng)作和智力層面都虛擬數(shù)字人的變遷：虛擬數(shù)字人的變遷：從小眾走向共生7流程中也融合了大量的人工智能算法技術(shù)來(lái)提升數(shù)字人的生產(chǎn)效率，降低了數(shù)字人的制作成本。目前，融合AI打造數(shù)字虛擬人以融合行業(yè)應(yīng)用已經(jīng)成為重要趨勢(shì)。布虛擬生成、驅(qū)動(dòng)、交互技術(shù)，搭建了科大訊飛AI虛擬人交互平臺(tái)。該平臺(tái)可以提供虛擬人AIAPI案，實(shí)現(xiàn)一站式的虛擬形象打造服務(wù)。目前，虛擬數(shù)字人在各行業(yè)已經(jīng)得到了廣泛應(yīng)用。尤其是娛樂(lè)和傳媒行業(yè)，虛擬偶像和虛擬虛擬客服、虛擬老師、智醫(yī)助手、數(shù)字員工等也開始出現(xiàn)。四、元宇宙催生數(shù)字虛擬人新賽道中的化身將是“千人千面”的，代表用戶的個(gè)人形象。作為人類在元宇宙的通行證和身份標(biāo)識(shí)，元宇宙帶來(lái)了數(shù)字虛擬人新的形態(tài)——虛擬化身。至此，數(shù)字虛擬人能夠按照應(yīng)用場(chǎng)景區(qū)分為兩類，一類是身份型虛擬人，如虛擬化身和虛擬偶像，這類虛擬人擁有獨(dú)立身份，被賦予具有個(gè)性的人格特征。另一類是服務(wù)型(功能型)虛擬人，這類虛擬人能夠投入生產(chǎn)和服務(wù)，以虛擬化身的形象執(zhí)行偏標(biāo)準(zhǔn)化的工作。虛擬數(shù)字人的變遷：虛擬數(shù)字人的變遷：從小眾走向共生8隨著元宇宙的發(fā)展，打造虛擬化身的需求有待釋放，為虛擬數(shù)字人帶來(lái)了隨著元宇宙的發(fā)展，打造虛擬化身的需求有待釋放，為虛擬數(shù)字人帶來(lái)了C端市場(chǎng)的商業(yè)價(jià)值。隨著圖像識(shí)別技術(shù)，人體識(shí)別算法的進(jìn)步，昂貴的光學(xué)動(dòng)捕設(shè)備不再是建模和驅(qū)動(dòng)的必備工具。普通攝像頭、傳感器等設(shè)備也能夠支持“小白”創(chuàng)建人物形象以及進(jìn)行精準(zhǔn)的驅(qū)動(dòng)。目前，用于生成虛擬數(shù)字人的工具化平臺(tái)已經(jīng)出現(xiàn)。以線上社交服務(wù)公司Spatial為例，其推出的VR化身創(chuàng)建平臺(tái)支持任何人在幾分鐘內(nèi)完成虛擬化身創(chuàng)建。用戶能夠通過(guò)網(wǎng)絡(luò)攝像頭拍攝、或者從設(shè)備上上傳自己的照片，用于創(chuàng)建一個(gè)DVR像襯衫的顏色。除了頭像的仿真性，平臺(tái)還支持用戶展示與他人互動(dòng)時(shí)習(xí)慣的肢體動(dòng)作。用戶可以通過(guò)VR耳機(jī)中的手部追蹤功能，支持化身跟隨用戶的動(dòng)作，展現(xiàn)用戶的手勢(shì)和身體形態(tài)。對(duì)于沒(méi)有肢體上的風(fēng)格特色。此外，面捕、動(dòng)捕技術(shù)及設(shè)備的家用打開了創(chuàng)作者市場(chǎng)。動(dòng)態(tài)捕捉技術(shù)幫助人們實(shí)現(xiàn)了人的實(shí)在身體向虛擬化形象轉(zhuǎn)移的互動(dòng)過(guò)程，這種交互方式開啟了創(chuàng)作者的肉身與虛擬偶像身體的虛實(shí)觸達(dá)通道，也是人與機(jī)器之間的一種新的互動(dòng)形式。以FaceRig為例，一款應(yīng)用于手機(jī)和電腦上的虛擬主播軟件，支持用戶將自己的臉變成各種卡通形象，并提供面部表情追蹤，真實(shí)展現(xiàn)主播的表情和動(dòng)作實(shí)況。虛擬數(shù)字人的變遷：虛擬數(shù)字人的變遷：從小眾走向共生9回顧虛擬數(shù)字人的發(fā)展歷程，技術(shù)是核心要素，回顧虛擬數(shù)字人的發(fā)展歷程，技術(shù)是核心要素，而人們對(duì)虛擬數(shù)字人的想象和不懈追求更是戶端。元宇宙將人類帶向了一個(gè)新的虛擬交融時(shí)代，虛擬數(shù)字人也將成為新的人機(jī)交互形式，以及人類的重要存在方式。甚至在未來(lái)，人們的數(shù)字化身和原生虛擬人的區(qū)別將逐漸被弱化，元宇宙的參與者成為“碳基生命”和“硅基生命”混合體。正如科大訊飛對(duì)虛擬數(shù)字人的想象：智慧并善良，幫助人類是他們的初心；每個(gè)人都可以獲得，而不是遙不可及。有千萬(wàn)粉絲的“一條小團(tuán)團(tuán)”，借助面捕和動(dòng)態(tài)捕捉技