音视频技术开发周刊 | 158
每周一期,縱覽音視頻技術領域的干貨。
新聞投稿:contribute@livevideostack.com。
內容推薦
京東智聯云分布式低延時RTC系統
本文由京東智聯云的魏偉在LiveVideoStackCon2020線上峰會的演講內容整理而成,他會從邏輯結構、系統業務流程和弱網增強等方面介紹京東智聯云在RTC方面所做的工作。
https://mp.weixin.qq.com/s/75Ccf0tndxMTjIxkX-P-og
Janus網關的集成與優化
本文由學霸君音視頻架構師李橋平在LiveVideoStackCon 2020 線上峰會的演講內容整理而成,內容主要包括Janus網關的集成過程以及集成過程中遇到的一些問題。
https://mp.weixin.qq.com/s/D1ZruKHYuJ7hSIzZksAPPA
淘寶直播窄帶高清技術
本文來自阿里巴巴淘系技術部 高級算法專家王立波在LiveVideoStackCon 2020線上峰會的分享,從直播背景、直播痛點分析、窄帶高清、云視頻技術趨勢幾方面詳細介紹了如何在確保用戶體驗QOS不變的前提下,實現淘寶直播的技術架構升級和成本大幅縮減。
https://mp.weixin.qq.com/s/goVRIi4OE0kjLaB5GnsqcQ
架構
基于 WebRTC 開發 Android Messenger:第3部分
請首先閱讀第 1 + 2 部分(并歡迎您參加網絡研討會)
https://googleprojectzero.blogspot.com/2020/08/exploiting-android-messengers-part-3.html
三個月時間,需求量增長30倍:在 COVID-19 疫情期間Google Meet如何做到高速增長
隨著COVID-19將我們的世界變成一個距離更遠的世界,許多人開始尋求在線視頻會議來保持社交,教育和工作場所的聯系,這種轉變吸引了更多的用戶使用Google Meet。
https://cloud.google.com/blog/products/g-suite/keeping-google-meet-ahead-of-usage-demand-during-covid-19
WebRTC 產品中第一個 HEVC(H.265)支持和 v2.1 中的改進
Ant Media 在其 WebRTC streaming 功能中增加了 HEVC 支持。
https://antmedia.io/the-first-hevc-h265-support-in-webrtc/
傳輸網絡
通過IP傳輸音頻元數據
這是AIMS和VSF帶來的一期夏季會議,會議主講人是Kent Terry,他是杜比實驗室聲音技術的高級經理,他將與我們討論IP音頻及元數據的內容。
https://mp.weixin.qq.com/s/ZJLOOGVLtxFipMFqtZzsrg
HESP及其聯盟的介紹
HESP聯盟將流媒體視頻供應商和媒體公司聚集在一起,通過標準化和推進HESP(High Efficiency Streaming Protocol 高效流媒體協議)和HESP市場化解決方案,以更低的成本提供卓越的在線視頻質量體驗。
https://mp.weixin.qq.com/s/JEslKft4zKMfXU72hBcriA
表白失敗后,我明白了TCP實現原理
面向連接、可靠、基于字節流、傳輸層、協議、端到端,理解了這些關鍵字也就理解了 TCP 的實現原理,本文將從這些關鍵字開始進行分析。
https://mp.weixin.qq.com/s/0zU_Qc1zMXdy-RQzKUBdkw
編解碼
從編解碼、傳輸到基礎架構 詳解Bigo多媒體技術棧
本文來自Bigo多媒體技術團隊的投稿,詳細介紹了Bigo多媒體技術的前生今世,通過何種技術手段支撐起了BigoLive、Likee和imo三大業務。技術棧具體涉及編解碼、傳輸、全球基礎設施架構等三方面。如果你也有獨到的經驗與思考,歡迎通過contribute@livevideostack.com投稿給我們。
https://mp.weixin.qq.com/s/INALBMInYD18AFtCDZCPjQ
LCEVC繞開編解碼器戰爭的9個原因
對于希望通過4K UHD和其他新興的高比特率視頻格式來解決帶寬和延遲挑戰的人們,而不必解決下一代編解碼器帶來的所有問題,這是一個好消息:看來您的愿望已經成真。今年年初,運動圖像專家組(MPEG)朝著最終批準MPEG-5第1部分和第2部分邁出了重要一步,分別稱為基本視頻編碼(EVC)和低復雜度增強視頻編碼(LCEVC),以及H.266,也稱為多功能視頻編碼(VVC)。
https://www.red5pro.com/blog/9-reasons-why-lcevc-circumvents-the-codec-wars/
音視頻技術
視頻碼控:CBR、VBR和ABR
本文介紹下常見視頻編碼器碼率控制方案,具體的編碼器可能在實現和使用上有所差異,具體在調用API和閱讀源碼時需要進行進一步分析和了解。
https://mp.weixin.qq.com/s/6VPT_35BNPMAwFSs8KsJdQ
Dropbox評估了CUBIC,BBR和BBR v2三種擁塞控制算法
在本文中,我們研究了在Dropbox Edge Network上收集的實驗數據。我們將BBRv2與BBRv1和CUBIC進行了比較,表明BBRv2是對它們兩者的絕對改進。我們還顯示BBRv2實驗結果與其理論設計原理相符。
https://arxiv.org/abs/2008.07699
視頻質量評估
無參考評估在云信的視頻測試實踐
在實時音視頻領域,如何實現視頻的全自動化評估是一個業界共同的難題。無參考(NR)技術不需要關于參考視頻的任何信息,無疑是視頻全自動化評估的曙光。本篇文章將介紹云信測試組最近在使用的一種視頻無參考評估方法,及其自動化應用方案。
https://mp.weixin.qq.com/s/eaAGxhvP9FAczwzwMP1vgw
AI智能
使用MediaPipe BlazePose進行設備上實時身體姿勢跟蹤
視頻姿勢估計起著至關重要的作用,可以在增強現實,手語識別,全身手勢控制甚至量化體育鍛煉中將數字內容和信息疊加在物理世界的頂部,從而構成瑜伽的基礎,舞蹈和健身應用。由于各種可能的姿勢(例如,數百個瑜伽體式),許多自由度,閉塞(例如,身體或其他物體遮擋從攝像機看到的四肢),用于健身應用的姿勢估計尤其具有挑戰性外觀或服裝。
https://ai.googleblog.com/2020/08/on-device-real-time-body-pose-tracking.html
圖像
谷歌新研究:用2D網圖就能合成3D地圖模型
通常根據真實場景重建精準逼真的3D地圖模型并不容易,谷歌科研人員為了簡化這一流程,訓練了一個基于NeRF(神經輻射場)的學習算法,可通過同一場景的幾張網絡照片合成多個視角,實現3D效果。
https://mp.weixin.qq.com/s/ImLW2XXu7Sav3f1D_mV5qg
資源推薦
前端音視頻的那些名詞(入門)
適合音視頻初學者收藏。
https://juejin.im/post/6861941219938418702
資訊速覽
Android“ Nearby Share” 文件共享功能上線?
Scener 與 Agora 合作,見證了100倍增長的 Watch Party 平臺
AVCtechnologies 宣布達成收購 Ribbon 的 Kandy Communications 業務的協議
活動推薦
【線上分享】互動協作白板與音視頻實時同步技術實踐
在線教育行業中白板技術占據了不可或缺的位置,逐漸成為各大教學場景的標配功能。但由于網絡環境參差不齊、教學手段各有特色,如何實現白板實時協作、攻破白板與音視頻不同步成為關鍵。8月27日19:30-20:30,即構科技互動白板技術負責人陳曉聰將通過對齊音視頻流與白板信令以及沖突判定算法實現音畫同步和百人實時互動協作。
訪問下方鏈接或點擊【閱讀原文】預約直播:
http://livevideostack.mikecrm.com/DaOkXQf
總結
以上是生活随笔為你收集整理的音视频技术开发周刊 | 158的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Telltale:看Netflix如何简
- 下一篇: 【线上分享】互动协作白板与音视频实时同步