声网发布“凤鸣AI引擎”,含AI降噪、回声消除等功能
3月23日消息,聲網(wǎng)正式發(fā)布囊括AI降噪、AI回聲消除、空間音頻、最佳音效等功能在內(nèi)的“鳳鳴AI引擎”。這款新一代音頻技術(shù)智能引擎,可應(yīng)用于語聊社交、在線K歌、線上會(huì)議、游戲競(jìng)技、虛擬活動(dòng)等場(chǎng)景。
據(jù)介紹,相比于傳統(tǒng)的降噪算法,鳳鳴·AI降噪的效果有顯著提升,可以一次性解決100+種突發(fā)性噪聲,比如辦公場(chǎng)景經(jīng)常遇到的敲鍵盤、鼠標(biāo)點(diǎn)擊、電話鈴聲等。
鳳鳴·AI降噪在強(qiáng)降噪的同時(shí)還能兼顧高保真,即使在人聲密集場(chǎng)景下,也能實(shí)現(xiàn)純凈通話體驗(yàn),甚至還實(shí)現(xiàn)了在不增加額外運(yùn)算量的前提下,對(duì)遠(yuǎn)場(chǎng)語音具有明顯的混響抑制能力。
此外,聲網(wǎng)自研的AI推理引擎還可以使得AI降噪算法在Android、iOS、Mac、Windows、Web等主流平臺(tái)以低精度損傷、高性能、低功耗方式運(yùn)行,使用戶的設(shè)備不卡不燙。經(jīng)數(shù)據(jù)測(cè)算,僅開啟鳳鳴·AI降噪功能,相應(yīng)設(shè)備CPU消耗增幅平均值<1%。
回聲是影響音視頻通話質(zhì)量的主要因素之一,鳳鳴·AI回聲消除利用算法對(duì)環(huán)境中產(chǎn)生的回聲混響進(jìn)行有效抑制,智能適應(yīng)各類環(huán)境,實(shí)現(xiàn)精準(zhǔn)音源分離,從混合的近端信號(hào)中消除不必要的遠(yuǎn)端信號(hào),保留近端人聲發(fā)送到遠(yuǎn)端,全面消除回聲,實(shí)現(xiàn)高保真音頻體驗(yàn)。
鳳鳴·空間音頻通過純軟件算法方案,模擬頭部球面區(qū)域立體聲場(chǎng),利用范圍音頻、人聲模糊、空氣衰減模擬等能力,模擬現(xiàn)實(shí)聽覺感受。空間音頻在狼人殺、虛擬演唱會(huì)、虛擬活動(dòng)等場(chǎng)景,可以有效的增強(qiáng)用戶在線上的互動(dòng)、聽覺體驗(yàn),重構(gòu)用戶在虛擬世界的沉浸感與臨場(chǎng)感。
同時(shí),據(jù)數(shù)據(jù)測(cè)算,開啟鳳鳴·空間音頻功能后,相應(yīng)設(shè)備CPU消耗增幅平均值<0.7%,內(nèi)存消耗增幅平均值<2M。
據(jù)聲網(wǎng)音頻娛樂產(chǎn)品負(fù)責(zé)人楊帆介紹,鳳鳴AI引擎目前正在開發(fā)變聲這一功能,用戶將可以體驗(yàn)20+變聲風(fēng)格,多樣角色扮演花式玩轉(zhuǎn)語聊場(chǎng)景。
聲網(wǎng)算法專家許冉指出,鳳鳴AI引擎代表聲網(wǎng)在RTC音頻領(lǐng)域針對(duì)核心技術(shù)的長(zhǎng)期投入和產(chǎn)出,以及聲網(wǎng)基于音頻核心能力衍生出各種復(fù)雜功能和高端效果的決心,未來聲網(wǎng)將基于鳳鳴AI引擎形成新一代RTC音頻解決方案,比如探索更個(gè)性化的語音方案、語音超分、co-experiencing場(chǎng)景等。(一橙)
總結(jié)
以上是生活随笔為你收集整理的声网发布“凤鸣AI引擎”,含AI降噪、回声消除等功能的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 常用数据库建模工具(常用汉字有多少个)
- 下一篇: axure9的中继器在哪编辑_Axure