苹果欲为苹果眼镜带来类似Zoom的背景替代物
蘋果一直在研究如何讓 "Apple Glass "風格的頭顯進行色度摳像,或者用蘋果 AR 圖像替換純色背景。一項名為"低延遲色度鍵控嵌入頭戴式顯示器,用于混合現實"的蘋果美國專利申請,于 2020 年 2 月提交,但本周才披露。我們現在都很熟悉用其他圖像,如徽標或海灘場景來取代辦公室和家庭的背景。我們也很熟悉這些東西很少有好的效果,特別是當發言人移動時。
這在一定程度上是因為即使做得不是很有效,這種背景替換也需要大量的處理能力。在 2020 年 7 月的更新之前,微軟 Skype iOS 版本甚至不能像 Mac 或 PC 版本那樣模糊背景。這種模糊是一個復雜的過程,但其中一部分涉及確定一個人的頭部結束和背景開始的位置。Chroma key 讓這一過程變得非常簡單,因為人物被放置在一個單一的純色背景前。這和電影中使用的綠屏或藍屏過程是一樣的。
當視頻會議畫面的哪一部分是說話的人,哪一部分是他們的背景非常明顯時,像 Zoom 或 Skype 這樣的系統可以更容易地替換背景。不過那些都是 2D 系統,而 "蘋果眼鏡 "的目標是用 3D 的方式來實現,這樣當佩戴者四處走動時,背景就可以被替換掉,而不是僅僅看著一個平面屏幕。因此,蘋果的專利申請同時涉及到為蘋果 AR 制作 3D 立體版背景替換,以及讓它的工作速度足夠快。其中一部分與頭顯處理能力有關,但也與將數據返回用戶視野的速度有關。蘋果表示,需要一個可穿戴式沉浸式頭顯(HMD),利用嵌入式立體 RGB 攝像頭捕捉環境,做實時的顏色鍵控,還有一個顯示系統來顯示增強了虛擬內容的真實世界圖像。該系統以高幀率(通常為 75 幀/秒或更多)運行,通過捕捉圖像并將其格式化以在頭顯本身中顯示,它實現了小于一幀的延遲。
所以,蘋果的提案所說的是,頭顯擁有相機傳感器,在混合現實環境中執行 Chroma key,并且要在對佩戴者來說最小延遲情況下完成。低延遲是通過在頭顯本身嵌入處理來實現的,具體來說,就是將攝像頭圖像格式化,檢測所選顏色范圍,并與虛擬內容進行合成。該專利申請并沒有解決替換圖像來自哪里的問題。在 Zoom 或 Skype 會議中,這將由演講者自己進行選擇。
總結
以上是生活随笔為你收集整理的苹果欲为苹果眼镜带来类似Zoom的背景替代物的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 剩下的烧烤怎么做好吃呢?
- 下一篇: 小米10至尊纪念版的名字怎么来的?听听雷