对话七牛云技术总监陈辉:音视频行业中的新系统新规划和新增长
編者按: 從去年七牛云音視頻團隊發布音畫質量分析系統到現在已有半年多的時間,得到了很多業內玩家和客戶的認可。在即將召開的 LiveVideoStackCon 2022 音視頻技術大會上海站,七牛云將以專場的形式再次亮相。對此,我們有幸地采訪到了本次七牛云專場出品人,也是七牛云技術總監陳輝,聊一聊這半年來七牛云在以音畫質量為主線,結合自身 QRTC 產品進行的迭代和創新;以及七牛云未來在 RTC 方面的規劃等內容。
陳輝:七牛云技術總監,主要帶領七牛云的直播、RTC、SDK 等團隊升級產品能力和攻克技術難關。曾主導過大型服務化體系建設和業務中臺建設,有著豐富的性能調優和架構設計經驗。
文 / 陳輝
策劃、編輯 / Teresa
LiveVideoStack:陳老師,您好。自從去年參加完大會到現在,這段時間您主要從事哪些工作?有沒有什么新的進展,可以和大家分享一下。
陳輝: 在去年 10 月底的 LiveVideoStackCon 2021 北京站上,我們發布了結合行業特定屬性打造的「音畫質量分析系統 QoE」,通過對通用音視頻評價維度的打分和基于質量美學維度的評分相結合,客觀、綜合地對數據源進行評價。
公測至今,已有多家行業頭部客戶完成測試并上線,這一系統正在切實地助力客戶業務發展。圍繞著音畫質量評價和提升這個維度,我們走訪了大量不同行業的客戶,尋找合適的共創伙伴,一起來打磨、提升產品。
除了上述音畫質量相關的工作外,我的另一個工作重心在實時互動產品(QRTC)上,有幾點變化可以和大家分享:
這半年時間,我們升級了內部傳輸協議(QRTP,這次專場專門會有人分享),使之能夠更好地適配媒體傳輸環境;
同時,我們迭代了客戶端架構,發布了 4.X 的大版本升級,極大地提升了客戶端的易用性;
更重要的是,面向不同的行業和場景,七牛云深入分析并理解場景需求,QRTC 結合七牛云的其他產品,構建了極為豐富的解決方案生態。
三位一體——七牛云音畫質量分析系統QoE
LiveVideoStack:七牛云早在去年 10 月就發布了音畫質量分析系統 QoE ,這個系統的主要評測的標準和原理是什么?
陳輝: 七牛云音畫質量分析系統 QoE,是通過結合前沿的音視頻處理技術和深度學習模型打造,將通用音視頻評價維度的打分和基于質量美學維度的評分相結合,實現客觀、綜合地對數據源進行評價。
拿視頻評分舉例,從基礎視頻質量上,我們會分析視頻卡頓率、黑屏、馬賽克、音畫同步等現象;從視頻美學角度,納入平衡、顏色和諧、趣味、景深、光照、主體顏色豐富性等指標,最終獲取音視頻資源的主客觀質量分值。
基于不同的維度,客觀地為實時音視頻打分,用戶能借助明細分對視頻做進一步的分析和優化。
LiveVideoStack:市場上與 QoE 相關的產品層出不窮,七牛云的音畫質量分析系統 QoE 的特點是什么?
陳輝: 和傳統 QoE 不同的是,七牛云音畫質量分析系統從設計之初就有個明確的要求:貼近和理解客戶的業務。通過和行業頭部玩家共同探索合作、積累經驗,七牛云獨創了由基礎評分、美學評分和行業特定維度評分三位一體的評價體系。
所以,這一系統最大的特點就是如何緊貼行業,也是很重要的一項突破。
比如在電商領域,我們評價一個畫面的好壞,除了會關注它基礎的分辨率、色彩飽和度等,我們還會從美學維度關注畫面和諧、景深位置等。從行業屬性看,電商的大部分業務都會要求圖片或視頻盡可能“實拍”和“原創”,所以針對這類的音畫分析,我們還納入了主體突出、水印、九宮格、白底圖等電商維度的特有元素。
在實踐中,七牛云音畫質量分析系統 QoE 進行質量的評分,再通過七牛云的銳智轉碼、HDR、超分、降噪等工具,全面提升畫質,快速、高效地形成質量分析和優化的閉環,為更好的用戶體驗助力。
七牛云在RTC方面的未來規劃
LiveVideoStack:目前看來 RTC 市場還將會處在一個增量趨勢,七牛云在 RTC 方面的未來規劃是什么?
陳輝: 我們主要還是從兩方面來看未來的發展,一方面是用戶想要什么,另一方面是我們能創造什么。
從用戶最基礎的實時通信需求看,“眼見為實”是我們一貫的追求。所以在體驗端,我們主要會圍繞著音視頻質量的維度進行突破,結合七牛云的銳智轉碼、超分、3A 優化、空間音等能力,進一步提升 RTC 場景下的用戶視覺、聽覺體驗。
解決用戶實際場景下的問題,也是我們關注的一個重點。比如在 2021 年,QRTC 結合 AR 眼鏡打造的智能船舶檢修方案就是實實在在滿足了用戶對于效率提升的訴求。
七牛云 QRTC 不會做一味的需求追隨者,而是不斷要求自己去創新和突破。
七牛云在音視頻行業中的規劃
LiveVideoStack:七牛云在音視頻行業中的規劃是什么?可以給我們介紹一下嗎?
陳輝: 七牛云的業務以視頻云為主,視頻云主要包括媒體的采集和優化(推流 SDK\美顏、短視頻 SDK 等)、傳輸和分發(QRTC 和直播 Pili、低延時直播 Geek、視頻監控 QVS),智能多媒體服務 Dora(審核、優化等)和媒體的渲染(播放器)。
我們致力于打造端到端的多媒體解決方案,讓使用者可以實現快速、高效的集成,縮短從想法到產品的距離。當然,我們的產品也將持續圍繞用戶體驗進行打磨,這也是我們會長期堅持下去的事情。
去年發布的音畫質量分析系統,正是從我們的視頻云當中演化出來的產品,同時也可用來客觀地評價內部產品的體驗質量,從而進一步提高我們對于自身產品質量的要求。
LiveVideoStack:您認為未來幾年音視頻需求增長來自哪里?
陳輝: 我個人認為元宇宙的爆發會為音視頻行業帶來猛烈的增長。其實從去年年底開始,已經有廠商在陸續地推出元宇宙概念型的產品,包括音視頻類的社交互娛產品,以及虛擬空間、數字人等一系列的產品或場景,都離不開音視頻能力的加持。
另外悄悄說一句,七牛云音視頻團隊在緊鑼密鼓地準備元宇宙領域的相關產品。
LiveVideoStackCon 2022 上海站 七牛云專場分享劇透
LiveVideoStack:回到本次5月份 LiveVideoStackCon 上海站活動,本次大會的七牛云專場會有哪些精彩內容?您可以和我們分享一下嗎?
陳輝: 這次七牛云的專場主要會帶來三場分享,這三場分享都會圍繞七牛云如何提升音畫質量展開。
第一場會圍繞七牛云音畫質量分析系統 QoE,為大家介紹這半年來我們所接觸的一些業務場景和遇到的技術挑戰;
第二場,會從協議層給大家介紹去年七牛云實時互動團隊在升級傳輸協議上,如何設計和應對升級過程中的一些難點;
第三場分享,會從“RTC+數據”的視角介紹在七牛云 RTC 的生產環境中如何快速定位、解決問題,以及結合相關特定場景如何將數據發揮更大價值。
LiveVideoStack:謝謝您接受采訪!
陳輝: 謝謝!期待在 LiveVideoStackCon 2022 上海站與大家見面!
總結
以上是生活随笔為你收集整理的对话七牛云技术总监陈辉:音视频行业中的新系统新规划和新增长的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 虎牙直播在AI实时剪辑技术上的创新实践
- 下一篇: LiveVideoStack成立5周年生