中信建投證券在研究報告中指出，虛擬活動有較大商業(yè)化空間，伴隨后疫情時代及元宇宙概念發(fā)酵，大量企業(yè)商家有線上活動的需求。為了更好的賦能虛擬活動，幫助開發(fā)者、企業(yè)打造更多針對用戶的線上沉浸式體驗(yàn)，聲網(wǎng)給出了升級版的全新解決方案。
針對如何在聽覺方面打造沉浸式體驗(yàn)這一行業(yè)難點(diǎn)，聲網(wǎng) 3D 空間音頻通過純軟件算法方案，模擬頭部球面區(qū)域立體聲場，使用戶在音頻聽感上具有空間感。當(dāng)用戶操作虛擬人物在虛擬空間里移動時，可以實(shí)現(xiàn)根據(jù)虛擬人物的面部朝向、音源朝向、遠(yuǎn)近距離與上下高度，呈現(xiàn)不同的空間效果，完美模擬現(xiàn)實(shí)聽覺感受。目前，火遍拉美和北美地區(qū)的元宇宙社交平臺 Oasis 就正在通過聲網(wǎng)的3D空間音頻技術(shù)，為元宇宙“原住民們”搭建起溝通的橋梁。
此外，針對虛擬活動實(shí)時互動中可能出現(xiàn)的背景噪音問題，聲網(wǎng)AI降噪迄今已完成多次升級，可高精度抑制家庭噪聲、街道噪聲、機(jī)器噪聲、辦公室噪聲等在內(nèi)的100+噪聲類型，技術(shù)成熟度高。目前聲網(wǎng) Web SDK AI 降噪插件和 Native SDK AI 降噪動態(tài)庫已跟多個客戶進(jìn)行了集成，得到了客戶的高度認(rèn)可。
在虛擬會議、線上培訓(xùn)等場景中，經(jīng)常遇到參會人員使用虛擬背景加入會議的情況，這就對平臺方的背景分割、摳圖能力有較高要求，需要較完整地呈現(xiàn)出鏡頭前參會人的人像。
聲網(wǎng)采用自研的基于視頻連續(xù)幀推理的摳圖算法，在端上可以實(shí)現(xiàn)音視頻場景下的摳圖，并采用自研高性能計(jì)算框架，在 Native 和 Web 端都能實(shí)現(xiàn)流暢運(yùn)行。此外，聲網(wǎng)背景分割支持多人、站姿、手勢等多種模式，不論在簡單或復(fù)雜的場景下都具備人像完整度高、邊緣平滑融合度好、背景殘留低、人像邊緣穩(wěn)定性強(qiáng)的特點(diǎn)，實(shí)際效果業(yè)內(nèi)領(lǐng)先。
聲網(wǎng)除了在支持 3D 空間音頻、AI 降噪、背景分割等能力上面能夠?yàn)橛脩舫两降捏w驗(yàn)保駕護(hù)航之外，聲網(wǎng)還能提供128人超級互動頻道，單個頻道可支持多達(dá)128位用戶同時發(fā)送音視頻流，觀眾人數(shù)無限制，讓房間內(nèi)任何用戶都可以隨時開麥進(jìn)行發(fā)言交流，目前虛擬活動提供商Vland云現(xiàn)場已上線128人超級互動頻道功能。
在各種虛擬活動場景層出不窮的大趨勢下，如何科學(xué)借力，搭建玩法多樣的虛擬活動場景，探索更多可能性，將成為企業(yè)業(yè)務(wù)增長的下一個密鑰。
聲網(wǎng)的實(shí)時互動技術(shù)服務(wù)覆蓋全球200多個國家和地區(qū)，并在當(dāng)?shù)靥峁┘夹g(shù)和運(yùn)營支持，同時聲網(wǎng)遵循國際認(rèn)可的信息安全和隱私保護(hù)標(biāo)準(zhǔn)以及行業(yè)要求，致力于采用國際最佳實(shí)踐來建設(shè)隱私和安全管理體系。截止目前，使用聲網(wǎng)服務(wù)的企業(yè)包括小米、陌陌、斗魚、嗶哩嗶哩、新東方、小紅書、HTC VIVE 、The Meet Group、Bunch、Yalla等遍布全球的巨頭、獨(dú)角獸及創(chuàng)業(yè)企業(yè)。
