音视频技术开发周刊 | 142
每周一期,縱覽音視頻技術領域的干貨和新聞投稿:contribute@livevideostack.com。
架構
使用 WebRTC 進行開源云游戲
我相信云游戲不僅將很快成為游戲的新一代,而且還將成為計算機科學其他領域的新一代。云游戲是客戶端/服務器模型的頂峰。通過將游戲邏輯放在遠程服務器上并將圖像/音頻流傳輸到客戶端,它可以最大化后端控制并最小化前端工作。服務器處理繁重的處理,因此客戶端不再受硬件限制。
https://webrtchacks.com/open-source-cloud-gaming-with-webrtc/
?
通過適用于 WebRTC 的可插入流(Insertable Streams) API 將元數據添加到媒體幀
可插入流的另一個用例。
https://levelup.gitconnected.com/adding-metadata-to-media-frames-via-insertable-streams-api-for-webrtc-47f7a740e457
?
實時流媒體的最佳實踐
本次演講來自streaming media west,演講者是videoRX的創建者Robert Reinhardt,演講的主要內容是如何實際部署一個流媒體系統。
https://mp.weixin.qq.com/s/i0xa4yDnnfhcBsFoQHhdlA
傳輸網絡
降低OTT的峰值帶寬
本文是2020年4月17日來自Bitmovin的一篇Tech Talk,主題是降低OTT的峰值帶寬,演講者是來自Akamai的首席架構師Will Law和來自Bitmovin技術產品市場經理Sean McCarthy。
https://mp.weixin.qq.com/s/D_C2583h4pPUArnowJpKAw
?
Netflix如何通過支持TLS 1.3提供更安全高效的播放體驗
這樣一個端到端的加密通信系統,對Netflix而言,是為了保護自身網絡的數據流,防止截播一類的情況發生。同時,就算有不懷好意的人拿到了數據,也沒有辦法解讀。現在基本上是TLS1.2就已經很難被解密了,但有一些黑客就是喜歡冒險去做這個事情。密碼保護或者是點對點的加密通信,對Netflix這種規模的流媒體服務來說非常重要,尤其他們現在原創的劇集越來越多,一個平臺肯定要保護好自己的內容與用戶。
https://mp.weixin.qq.com/s/jap4ta6fkyQc7dhig_DkYg
?
5G:視頻分發的轉型正在進行中
對于5G而言,2019年是關鍵的一年:運營商開始推出商業服務,企業用例變得更加清晰,并逐漸融入消費者意識。5G有望在2024-34年之間為全球經濟增加近2.2萬億美元,到2025年將占全球所有連接的20%。
4G技術現在是全球主導的移動技術。盡管5G現在存在于24個市場中,但絕大多數連接仍在4G或更慢的網絡上運行,并且全球一半以上的人口沒有覆蓋5G。
https://mp.weixin.qq.com/s/Dvo6cXIxSwhOjz19X8FWsg
編解碼
向行業交付標準:MPEG案例
在全球化經濟中,越來越多的企業每天都要面對的問題之一是向大眾傳遞產品、服務和應用。試想一下,30年前的問題是什么樣子的,當時媒體內容的傳遞,通過提供適用于特定媒體類型、傳遞方式、國家、地區、行業和公司的解決方案來實現。電信公司發行音樂;有線電視運營商通過有線電視傳播電視;地面和衛星廣播公司通過地面和衛星網絡進行同樣的傳播;不同類型的企業通過實物支持傳播各種錄制的媒體(膠片、激光光盤、光盤、光盤、視頻家庭系統/Betamax磁帶等)。
https://mp.weixin.qq.com/s/n2h5XRTmMAJJR8RWfEcZrQ
?
四個新的 Google Duo 功能可幫助您保持聯系
Google 將開始在 Android 版本的 Duo 已經支持 AV1 視頻編解碼器。
https://www.blog.google/products/duo/4-new-google-duo-features-help-you-stay-connected/
?
多播的時代終于到來了嗎?
第一段視頻來自于Streaming Media West,主講人是Dom Robinson。Dom是行業資深老兵,id3as的聯合創始人,也是Content Delivery Networks-Fundamentals, Design, and Evolution(2017)一書的作者(此書寫得很hacker)。該視頻是有關于多播的演講。Dom解釋了其原因,進步過程,以及其下一步的目標。
https://mp.weixin.qq.com/s/R2AfXAvt_085n-pIjy1Taw
視頻技術
金山云VR+8K超高清直播全鏈路解決方案
未來5G低延遲、高帶寬、廣連接的網絡環境,為音視頻內容在各行業的應用帶來了新的變革,也為虛擬現實產業發展提供新的契機。金山云在VR領域持續投入資源,實現了VR+8K的直播端到端全鏈路解決方案。
https://mp.weixin.qq.com/s/al8_lDjJHC0W8hr48WUWWQ
如何將ijkplayer引入AS工程中進行二次開發
筆者在對ijkplayer進行二次開發的時候也是踩了不少坑,查了不少資料才把坑給填了,今天把它分享出來,算作一個記錄。
https://mp.weixin.qq.com/s/mxlV9bQ-rgUABx8QXdUjeA?
實時音視頻會議場景下QoS策略
隨著5G正式商用元年的真正到來,更加即時與具象的實時音視頻通訊將被更廣泛的應用。實時音視頻系統,是一個相對比較復雜的內容傳輸系統,從大的流程上來講,系統覆蓋音視頻采集、音視頻編碼、音視頻傳輸、音視頻解碼、音視頻繪制。想要做到高質量的音視頻通話,每個環節都需要豐富的手段才能進行各種場景及設備的適配與效果提優。
https://mp.weixin.qq.com/s/2PFX_fvfXWe9gDWuegcfnA
告別AV畫質:實時把動畫變成4k高清,延時僅3毫秒,登上GitHub趨勢榜
有個名叫Anime4K的開源算法,能在動畫播放中,實時把畫面變成4k,延時低至3毫秒。
能把720p/1080p變成2160p,也能把480p變成1080p。
https://mp.weixin.qq.com/s/8fvf6Std9ZNVVdt9IQ6iYQ
WhatsApp 即將支持多達8人的群組通話
也有關于 Messenger 進行獨立視頻通話的討論。
https://thenextweb.com/apps/2020/04/21/whatsapps-group-call-feature-will-soon-allow-8-people/
一個專門為律師設計的視頻會議應用,并且免費
使用 WebRTC 構建的專注于律師的視頻通話服務。
https://www.lawsitesblog.com/2020/04/this-video-conferencing-app-is-purpose-built-for-lawyers-and-its-free.html
AI智能
人臉合成效果媲美StyleGAN,而它是個自編碼器
自編碼器(AE)與生成對抗網絡(GAN)是復雜分布上無監督學習最具前景的兩類方法,它們也經常被拿來比較。人們通常認為自編碼器在圖像生成上的應用范圍比 GAN 窄,那么自編碼器到底能不能具備與 GAN 同等的生成能力呢?這篇研究提出的新型自編碼器 ALAE 可以給你答案。目前,該論文已被 CVPR 2020 會議接收。
https://mp.weixin.qq.com/s/yB7tq2vcBpVBnM-j9PgRsw
?
詳解StyleGAN進化過程!看GAN如何一步步控制圖像生成風格?
GAN 能夠有條不紊地控制其生成圖像的風格嗎?
https://mp.weixin.qq.com/s/bnYDoppTl6XG1gi2cbvtew
圖像
23個系列分類網絡,10萬分類預訓練模型,這是飛槳PaddleClas百寶箱
顧名思義圖像分類是指根據圖像信息把不同類別的圖像自動區分開來,并能指出圖像類別信息。可以說圖像分類是人類最先學到的一門本領。而在此基礎之上,才會繼續學會指出什么物體在什么位置(目標檢測),以及如何去接觸物體(圖像分割)等等。如果您仔細分析下計算機視覺的其它技術,您會發現,也確實是如此。
https://mp.weixin.qq.com/s/R8CH9hzI1DZEFMSPz-mKaw
資源推薦
視頻工程師的工具箱
本文是來自Streaming Media West的演講,演講者是David Hassoun, 他是RealEyes Media的CEO。演講的主要內容是介紹了大部分視頻工程師所需的工具軟件。
https://mp.weixin.qq.com/s/c-5Q1-LR-OJDfKxK_4ANfg
?
音視頻技術路線
抖音/快手等短視頻APP的風靡,讓音視頻成為當下最火熱的技術,越來越多的人想要進入到這個領域,我自己也是從圖形方向剛剛踏入這領域不久,音視頻方向所包含的技術棧非常復雜,我自己也在一點一點慢慢鉆研,這里面每一個方向都值得深入研究,而且隨著5G時代的到來,音視頻方向的應用會更加廣泛,所以希望自己能掌握更多的關于音視頻方向的技能,未來可以探索更多的音視頻玩法。然后這篇博客主要是想梳理一下我自己關于音視頻這個方向的學習路線,分享出來的同時也能鼓勵自己朝著這個方向繼續深耕下去。
https://zhuanlan.zhihu.com/p/120855530
點擊“閱讀原文”可查看更多詳細信息,請大家科學上網。
超強干貨來襲 云風專訪:近40年碼齡,通宵達旦的技術人生總結
以上是生活随笔為你收集整理的音视频技术开发周刊 | 142的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: @你最强资源包来了 MobTech 联合
- 下一篇: LiveVideoStack线上分享第五