谷歌 Daydream 实验室:VR中学习新技能是一种怎样的体验?
谷歌 Daydream 實驗室:VR中學習新技能是一種怎樣的體驗?
| 本文作者:逸炫 | 編輯:田苗 | 2017-07-26 10:56 |
雷鋒網按:在VR中,我們到底能不能學習新技能?VR中的交互學習跟我們實際操作又有什么不同?最近,雷鋒網看到谷歌軟件工程師 Ian MacGillivray 在官方博客上發表的一篇文章,其中講到Daydream 實驗室對VR中交互學習的一些思考。雷鋒網(公眾號:雷鋒網)將原文整理如下。
你可以把全世界的食譜都一字不差的記在腦子里,但是要真正成為大廚,還是得擼起袖子下廚房。如果能戴上VR頭盔,就有頂級大廚一步步教你如何做菜,那該多好。未來也許真有一天,我們能在全VR環境中學做一桌滿漢全席。實際上,VR 可以幫助人們學會各種各樣的技能。
在谷歌 Daydream ?實驗室,我們試圖研究 VR 環境中的交互式學習。于是我們進行了一項試驗:教人們制作咖啡。我們制作了教人學做咖啡的訓練原型,用一個3D模型模擬了一個濃縮咖啡機,只要按下按鈕、轉動手柄,操作方式與真實世界的咖啡機相同。我們還做了一個非常詳細的教程,然后邀請了一組用戶在VR中學習如何制作濃縮咖啡。最后,每個用戶都會獲得一份詳細的報告,評價他們的表現,包括制作咖啡的質量。為了進行比較,另一個小組通過觀看網絡視頻學習做咖啡。兩個小組都不限訓練時間,直到他們能夠在真實世界中制作咖啡。看視頻學習的小組通常看了三遍教程,而進行VR訓練的小組通常進行了兩次教程。
??
我們很高興地發現,在VR中人們可以學得更快、更好。進行VR訓練的小組中,犯錯的次數和制作濃縮咖啡的時間都顯著減少(不過,就咖啡出品的質量來說,評委們沒覺得有什么區別)。雖然一次的試驗還不能說明什么,但是這些早期結果讓人充滿期待。此外,我們還發現未來如何更好地設計試驗。下面一起來看一看: ?
首先,不該選擇做咖啡。震動觸感無法替代壓實咖啡粉的手感。而且,當VR中有人碰到熱蒸汽噴嘴,無論我們做什么樣的警告提示,在真實世界中人們還是沒有吸取教訓,我們需要有專人在邊上盯著,時刻準備著把人的手擋開。這說明對于一些技能來說,VR技術還不是很到位。VR訓練只適合移動物品、按下按鈕之類的輸入,除非更好的追蹤和觸感手套成為主流。如果數字模擬與其所模擬的物品相差甚遠,可能對于真正學會這些技能并沒有什么幫助。
我們還發現,人們是不聽從指令的。
在Daydream實驗室制造的所有原型中都看到了這一點,但是在訓練原型中的問題尤為突出。在控制器上寫指令?那人們的手就停下來了。在背板上顯示指令?面前的東西都來不及看。用語音播放?沒人有這個耐心聽完指令再動手。我們甚至加入了一個“提示”按鈕,但是他們覺得這是作弊,一兩個步驟之后就把這個按鈕忘記了。最后,我們不得不把以上所有辦法結合起來,而且還在場景中加上標記。我們用一個很大的綠色箭頭指明用戶下一步需要互動的物品,這用于測試還行。但是,我們離真正解決問題還遠著,要有效地融入指令還需要大量工作。 ?
用于提示的綠色大箭頭
”點擊控制器上的燈泡圖標,可以獲得提示。“
燈泡圖標
紅色:重置,綠色:提示
最后我們發現,要追蹤每個用戶的所有步驟難度太大。我們給用戶提供的每一個選擇,都會讓教程中的路徑數量指數級增加。更糟糕的是,人們不按照我們設定好的線性路徑展開教程,因此我們必須把所有可能的情景進行建模。舉個例子,用戶有可能在磨咖啡粉之前先蒸牛奶。最終,像游戲一樣建模要容易得多,每一個物品都有自己的狀態。我們讓系統追蹤關鍵步驟是否完成,例如杯子里是否裝有牛奶,而非按順序追蹤用戶所做的所有步驟。
雖然有很多挑戰,我們還是認為這是一個成功的原型:因為人們在VR中學到了新技能,而且享受了整個學習的過程。一些人甚至在真實環境中做完咖啡后,還回來重玩VR教程。實際上,當學員有了真實世界的體驗后,就能更好地理解虛擬訓練的環境和意義了。也許VR是引導人們學習新技能的好辦法,并且人們在真實環境中嘗試后,VR能幫助人們練習、鞏固所學的技能。
至少,要在VR中get新技能,我們自己還得get更多新技能。
總結
以上是生活随笔為你收集整理的谷歌 Daydream 实验室:VR中学习新技能是一种怎样的体验?的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 康奈尔大学王飞博士:AI处理医疗数据面临
- 下一篇: 华为诺亚方舟实验室主任李航:神经符号处理