探討 AIGC 行業(yè)應(yīng)用與創(chuàng)新場(chǎng)景方向

探討AIGC行業(yè)應(yīng)用與創(chuàng)新場(chǎng)景方向AI技術(shù)熱潮的到來既帶來了機(jī)遇，也為業(yè)內(nèi)人士帶來了更多挑戰(zhàn)。在這樣的背景下，9月9日~10日，「人人都是產(chǎn)品經(jīng)理」聯(lián)合「騰訊大講堂」于北京舉辦了產(chǎn)品經(jīng)理大會(huì)，聚焦于“AI、數(shù)字化轉(zhuǎn)型、業(yè)務(wù)增長(zhǎng)”，共同探討AIGC的商業(yè)化可能與落地實(shí)踐。其中在9日晚上，「人人都是產(chǎn)品經(jīng)理」還聯(lián)合「聲網(wǎng)」聯(lián)合舉辦了一場(chǎng)閉門研討會(huì)，聲網(wǎng)AIGC產(chǎn)品負(fù)責(zé)人杜浦帶來了“AIGC加持下，APP體驗(yàn)場(chǎng)景創(chuàng)新哪些玩法值得期待？”的主題演講，并分享了聲網(wǎng)在實(shí)時(shí)互動(dòng)+AIGC探索上的最新成果?，F(xiàn)場(chǎng)回顧AI技術(shù)促進(jìn)了各行業(yè)內(nèi)容生產(chǎn)方式的革新，比如文字生成、代碼輔助開發(fā)、圖片繪制、視頻處理等。在閉門會(huì)上，聲網(wǎng)分享嘉賓杜浦主要圍繞AIGC與音視頻的結(jié)合應(yīng)用進(jìn)行探討。AIGC的音視頻應(yīng)用場(chǎng)景有許多，比如數(shù)字人虛擬主播、AI虛擬戀人等。而這個(gè)過程里，產(chǎn)品體驗(yàn)的需求GAP亟待滿足：文本互動(dòng)效果差：不擅長(zhǎng)語?處理，只能實(shí)現(xiàn)?本互動(dòng)，?法提供實(shí)時(shí)語?、視頻互動(dòng)；AI交互的響應(yīng)延遲較?，?戶體驗(yàn)差；場(chǎng)景開發(fā)上線難：缺少AIGC所需的開發(fā)經(jīng)驗(yàn)和能?儲(chǔ)備，期望能夠接?整體解決?案；?暇進(jìn)?場(chǎng)景調(diào)研和玩法設(shè)計(jì)，應(yīng)?可玩性不?，需要快速上線參考；語音合成效果差：?戶的語?識(shí)別（STT）不夠準(zhǔn)確，AI語?合成效果（TTS）過于機(jī)械不夠真實(shí)，?戶體驗(yàn)差；AI模型訓(xùn)練難：應(yīng)?設(shè)計(jì)的場(chǎng)景對(duì)AI模型的prompt調(diào)優(yōu)訓(xùn)練要求較?，整體場(chǎng)景流暢運(yùn)?的實(shí)現(xiàn)難度較?。面對(duì)這些問題，聲網(wǎng)提出了

AIGC一站式音視頻解決方案，這一方案擁有三大核心優(yōu)勢(shì)：音視頻互動(dòng)更具沉浸感：相比傳統(tǒng)的通過IM文字聊天與AI角色實(shí)現(xiàn)交互的方案，聲網(wǎng)提供的實(shí)時(shí)音視頻+實(shí)時(shí)消息+虛擬形象方案能夠帶來更真實(shí)自然的互動(dòng)體驗(yàn)，更好地表達(dá)情感和傳達(dá)用戶的個(gè)性化意圖。同時(shí)，實(shí)時(shí)音視頻互動(dòng)相比輸入文字，操作更加便捷，且能夠與其它多模態(tài)互動(dòng)方式結(jié)合，進(jìn)一步提升用戶體驗(yàn)。響應(yīng)延時(shí)低至1.9秒內(nèi)：聲網(wǎng)作為實(shí)時(shí)互動(dòng)云服務(wù)的開創(chuàng)者，在音視頻領(lǐng)域積累了深厚的技術(shù)優(yōu)勢(shì)，針對(duì)目前市面上大多數(shù)AI生成式對(duì)話響應(yīng)慢的問題，聲網(wǎng)的研發(fā)團(tuán)隊(duì)對(duì)AIGC場(chǎng)景下音視頻互動(dòng)的延時(shí)做了很多技術(shù)優(yōu)化，可以將對(duì)話響應(yīng)延時(shí)控制在1.9秒內(nèi)，也就意味著當(dāng)用戶對(duì)AI角色語音提問結(jié)束后，到AI開始說話的時(shí)間間隔，聲網(wǎng)可以做到1.9秒以內(nèi)，相比市場(chǎng)上絕大部分AI互動(dòng)延遲在6-7s的方案要低很多。易開發(fā)，3h快速上線場(chǎng)景：在場(chǎng)景開發(fā)層面，有些企業(yè)缺少AIGC所需的開發(fā)經(jīng)驗(yàn)和能力儲(chǔ)備，期望能夠接入整體解決方案，對(duì)此聲網(wǎng)提供封裝完整的SDK，包含實(shí)時(shí)音視頻、實(shí)時(shí)消息、語音轉(zhuǎn)文字（STT）/文字轉(zhuǎn)語音（TTS）、語音驅(qū)動(dòng)虛擬人嘴型等多種能力，并支持API快速調(diào)用，提供開箱即用的場(chǎng)景化Demo，最快3h即可實(shí)現(xiàn)方案快速驗(yàn)證。尤其對(duì)于想快速驗(yàn)證新場(chǎng)景的企業(yè)與開發(fā)者而言，可以節(jié)省很多開發(fā)時(shí)間。再進(jìn)一步拆解，聲網(wǎng)AIGC解決方案的一站式產(chǎn)品能力還包括這些能力：模型能力：大語言模型是整個(gè)AIGC解決方案最核心的部分，在大模型能力方面，聲網(wǎng)也跟很多熱門的國(guó)內(nèi)外大模型進(jìn)行了合作，根據(jù)業(yè)務(wù)場(chǎng)景集成測(cè)試了多個(gè)大模型的能力，以及支持開源大模型的私有化部署和模型Fine-tune，支持企業(yè)根據(jù)自身需求進(jìn)行靈活切換。聲網(wǎng)會(huì)根據(jù)客戶的場(chǎng)景選擇合適的大模型，根據(jù)不同的場(chǎng)景做特定的模型數(shù)據(jù)庫(kù)和Prompt，同時(shí)結(jié)合聲網(wǎng)RTC的低延時(shí)特性，讓用戶交互延遲達(dá)到最優(yōu)，模型輸出更符合真實(shí)場(chǎng)景。此外，聲網(wǎng)在開源大模型層面也有在嘗試做私有化部署，以滿足部分企業(yè)對(duì)數(shù)據(jù)安全及網(wǎng)絡(luò)的要求。語音能力：聲網(wǎng)憑借在音頻處理領(lǐng)域的經(jīng)驗(yàn)，對(duì)語言轉(zhuǎn)文字（STT）+文字轉(zhuǎn)語音（TTS)模型精細(xì)化調(diào)優(yōu)，實(shí)現(xiàn)人聲分離，斷句優(yōu)化，讓整個(gè)語言體驗(yàn)更加流暢。此外，聲網(wǎng)還支持AI實(shí)時(shí)變聲、定制化聲音克隆，讓聲音聽起來更具真實(shí)感。例如定制化聲音克隆可以復(fù)刻現(xiàn)實(shí)中學(xué)生老師的聲音，學(xué)生在下課后可以更加真實(shí)地與老師的虛擬形象進(jìn)行語音互動(dòng)。場(chǎng)景人設(shè)定制：聲網(wǎng)在1V1語音聊天等場(chǎng)景還對(duì)AI角色進(jìn)行了人設(shè)定制，通過Prompt的方式設(shè)置AI角色的名字、職業(yè)、性格等豐富的人設(shè)屬性并支持定制形象與聲音。在場(chǎng)景玩法層面，聲網(wǎng)也嘗試了多人語音場(chǎng)景的驗(yàn)證，例如在誰是臥底、狼人殺等多人游戲的場(chǎng)景中，AI可以作為一個(gè)玩家參與到游戲中，真正的與用戶一起玩游戲。交互體驗(yàn)升級(jí)：圍繞語音大模型的交互體驗(yàn)，聲網(wǎng)也做了一些嘗試，例如長(zhǎng)期對(duì)話記憶，在一些對(duì)話場(chǎng)景中，用戶在進(jìn)行多輪文字互動(dòng)后，有可能大模型記不住用戶之前說的內(nèi)容，影響對(duì)話體驗(yàn)。對(duì)此，聲網(wǎng)通過實(shí)現(xiàn)多輪對(duì)話記憶，可以更好的應(yīng)用在AI情感陪聊、智能辦公助手等場(chǎng)景。對(duì)于需要AI精準(zhǔn)回答特定行業(yè)知識(shí)、企業(yè)專業(yè)知識(shí)、多維度知識(shí)的客戶，聲網(wǎng)AIGC方案支持公域、私域VectorDB接入的能力，可以解決各種類型的數(shù)據(jù)分析和相關(guān)任務(wù)，特別是那些涉及到高維向量數(shù)據(jù)的應(yīng)用場(chǎng)景。比如近似搜索、推薦系統(tǒng)、圖像識(shí)別、語音識(shí)別、時(shí)許分析、社交網(wǎng)絡(luò)分析、圖像/視頻和文本的關(guān)聯(lián)等。在杜浦的分享結(jié)束后，參會(huì)者根據(jù)分享內(nèi)容和自身的業(yè)務(wù)背景進(jìn)行互動(dòng)問答，并隨后就“AIGC行業(yè)應(yīng)用分享與創(chuàng)新場(chǎng)景方向探討”這一話題開啟了分組研討與小組間的內(nèi)容分享。此外，部分與會(huì)者還在現(xiàn)場(chǎng)體驗(yàn)了聲網(wǎng)AIGC