2021·MCtalk

5G 技術(shù)大帶寬、低延時、海量連接的特點，讓短視頻、直播購物、游戲、音視頻社交等變得更加簡單，同時，互聯(lián)網(wǎng)的發(fā)展帶來了泛娛樂領(lǐng)域的多樣化體驗，讓大眾對于 AI 以及音視頻的體驗、參與和互動有了更高的訴求。

B站、伏羲等玩家如何將 AI 以及音視頻技術(shù)應(yīng)用于泛娛樂產(chǎn)品？技術(shù)如何賦能業(yè)務(wù)以滿足用戶多樣化的需求？

4月10日，網(wǎng)易 MCtalk 和掘金 JTalk 聯(lián)合舉辦的娛樂社交技術(shù)沙龍——“泛娛樂領(lǐng)域音視頻技術(shù)探索與實踐”在上海成功舉辦。

本次活動邀請到網(wǎng)易伏羲人工智能實驗室資深視覺研究員袁燚、網(wǎng)易音視頻實驗室高級技術(shù)專家韓慶瑞、網(wǎng)易云音樂 Andiord 技術(shù)專家賀俊瑋以及嗶哩嗶哩移動端資深開發(fā)工程師臧至聰4位技術(shù)大咖，就泛娛樂應(yīng)用在 AI 以及音視頻上的技術(shù)實踐，與現(xiàn)場百名聽眾交流分享。

《游戲智能捏臉?biāo)惴ㄑ芯颗c應(yīng)用》

袁燚

網(wǎng)易伏羲人工智能實驗室資深視覺研究員

隨著 AI 技術(shù)的發(fā)展，AI 與游戲的結(jié)合形式不斷推陳出新。捏臉系統(tǒng)基本上是現(xiàn)代 RPG 游戲的標(biāo)配，它為玩家準(zhǔn)備了很多的控制條和選項，通過拖動控制條或者直接拖動角色面部，玩家就可以改變相應(yīng)部位的相貌從而創(chuàng)造出自己想要的角色了。網(wǎng)易伏羲人工智能實驗室資深視覺研究員袁燚分享了他們的智能捏臉?biāo)惴ㄒ约霸谀嫠⑻熘I手游等網(wǎng)易雷火的多款游戲中落地效果。

視覺計算 AI 技術(shù)能夠有效改進(jìn)當(dāng)前游戲中角色和場景模型的制作流程和效果，大大增強玩家的參與感和沉浸感。對很多普通玩家來說，想要利用復(fù)雜的游戲捏臉器去捏一個特定相貌的角色，往往需要花費非常非常多的時間。袁燚講述了如何利用人工智能技術(shù)賦能玩家捏臉，通過迭代優(yōu)化的深度神經(jīng)網(wǎng)絡(luò)模型，讓玩家實現(xiàn)只需要上傳單張照片，就能在半秒內(nèi)得到既像且美捏臉結(jié)果的效果。

《網(wǎng)易云信視頻 RTC 引擎關(guān)鍵技術(shù)分享》

韓慶瑞

網(wǎng)易音視頻實驗室高級技術(shù)專家

網(wǎng)易云信視頻團隊負(fù)責(zé)人

5G 與 AI 時代已來，音視頻技術(shù)持續(xù)迭代升級，網(wǎng)易云信也推出了全新一代音視頻技術(shù)架構(gòu)，對音視頻全流程都做了重大升級。視頻引擎作為網(wǎng)易云信新一代音視頻核心能力模塊，承擔(dān)了 RTC 場景中最為重要的視頻通信功能。

本次活動中，網(wǎng)易音視頻實驗室高級技術(shù)專家、網(wǎng)易云信視頻團隊負(fù)責(zé)人韓慶瑞分享了網(wǎng)易云信新一代視頻引擎架構(gòu)以及其各個模塊中的關(guān)鍵技術(shù)。他為參會者詳細(xì)介紹了從攝像頭采集視頻到視頻信息網(wǎng)絡(luò)傳輸再到視頻顯示整個完整過程中網(wǎng)易云信研發(fā)的一系列關(guān)鍵技術(shù)，包括網(wǎng)易云信高效的視頻處理算法、自研的 NE264 和 NEVC 視頻編碼器。同時也介紹了網(wǎng)易云信為保證在各種網(wǎng)絡(luò)狀況下，用戶都能有最佳的視頻體驗進(jìn)行的技術(shù)探索：智能視頻 QoE 技術(shù)和高性能的 AI 超分方案的技術(shù)解讀，以及以上技術(shù)的落地實踐。

《網(wǎng)易云音樂音視頻創(chuàng)新業(yè)務(wù)的探索和實踐》

賀俊瑋

網(wǎng)易云音樂 Android 技術(shù)專家

對于泛娛樂平臺，音視頻能力正變得越來越重要，依托這樣的基礎(chǔ)，網(wǎng)易云音樂一直致力于能夠提供全新的創(chuàng)新能力和場景，將之呈現(xiàn)給用戶。

本次分享中，來自網(wǎng)易云音樂 Andiord 技術(shù)專家賀俊瑋為我們介紹了網(wǎng)易云音樂在移動端音視頻創(chuàng)新業(yè)務(wù)方向的探索，從工程優(yōu)化、設(shè)計方法論、質(zhì)量體系打造、線上大型演出等方面的建設(shè)，實現(xiàn)構(gòu)建快速高效的音視頻業(yè)務(wù)。介紹了在各業(yè)務(wù)線創(chuàng)新業(yè)務(wù)全面鋪開中，網(wǎng)易云音樂基于三方SDK的原子能力構(gòu)建了適合自身狀態(tài)的中臺組件和腳手架，解決了多業(yè)務(wù)線的協(xié)調(diào)效率問題。此外，還構(gòu)建了音視頻質(zhì)量評估標(biāo)準(zhǔn)和質(zhì)量監(jiān)控體系，以便對業(yè)務(wù)的全鏈路進(jìn)行進(jìn)一步優(yōu)化。最后，整體介紹以上能力在線上大型演出實踐中的落地。

《Bilibili 互動彈幕引擎分享》

臧至聰

嗶哩嗶哩移動端資深開發(fā)工程師

在個人視頻內(nèi)容行業(yè)飛速發(fā)展的今天，用戶視頻體驗已不是單單取決于視頻內(nèi)容本身。彈幕作為連接 UP 主與用戶、用戶與用戶的媒介，已成為與視頻內(nèi)容不可分割的一部分。

作為 Bilibili 的“招牌”，彈幕也在 B 站不斷演化，直至互動彈幕誕生。本次分享，來自 Bilibili 的資深開發(fā)工程師臧至聰，介紹了 Bilibili 互動彈幕的誕生從可點的一鍵三連開始，后產(chǎn)生彈幕刷屏、彈幕投票等互動形式的產(chǎn)品能力化。活動中，臧至聰還詳細(xì)介紹了實現(xiàn)互動彈幕的自研引擎，其擁有跨平臺的繪制引擎、對上層業(yè)務(wù)封裝多端統(tǒng)一的 API、支持業(yè)務(wù)代碼的熱更新等特性，可以達(dá)到跨平臺統(tǒng)一、提升研發(fā)效率，以及快速上線產(chǎn)品功能的效果。

以上是每位嘉賓的分享概述，點擊閱讀原文即可獲取本場技術(shù)沙龍的嘉賓PPT。

本次上海音視頻技術(shù)沙龍圓滿舉辦，后續(xù)我們還將在杭州、北京等地舉辦技術(shù)活動。想?yún)⒓拥呐笥?#xff0c;可隨時關(guān)注公眾號發(fā)出的活動消息～

關(guān)于網(wǎng)易云信

網(wǎng)易云信是集網(wǎng)易21年IM以及音視頻技術(shù)打造的融合通信云服務(wù)專家，穩(wěn)定易用的通信與視頻 PaaS 平臺。

提供融合通信與視頻的核心能力與組件，包含 IM 即時通訊、5G 消息平臺、一鍵登錄、信令、短信與號碼隱私保護(hù)等通信服務(wù)，音視頻通話、直播、點播、互動直播與互動白板等音視頻服務(wù)，視頻會議等組件服務(wù)。

網(wǎng)易云信服務(wù)于網(wǎng)易云音樂、好未來、新東方、科大訊飛、南京銀行等各行各業(yè)客戶，已有100w+ 企業(yè)開發(fā)者接入云信服務(wù)。

總結(jié)

以上是生活随笔為你收集整理的嘉宾PPT分享｜泛娱乐领域音视频技术探索与实践的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。