雷锋网按:在VR中,我们到底能不能学习新技能?VR中的交互学习跟我们实际操作又有什么不同?最近,雷锋网看到软件工程师 Ian MacGillivray 在官方博客上发表的一篇文章,其中讲到Daydream实验室对VR中交互学习的一些思考。雷锋网将原文整理如下。
你可以把全世界的食谱都一字不差的记在脑子里,但是要真正成为大厨,还是得撸起袖子下厨房。如果能戴上VR头盔,就有顶级大厨一步步教你如何做菜,那该多好。未来也许真有一天,我们能在全VR环境中学做一桌满汉全席。实际上,VR可以帮助人们学会各种各样的技能。
在谷歌Daydream 实验室,我们试图研究VR环境中的交互式学习。于是我们进行了一项试验:教人们制作咖啡。我们制作了教人学做咖啡的训练原型,用一个3D模型模拟了一个浓缩咖啡机,只要按下按钮、转动手柄,操作方式与真实世界的咖啡机相同。我们还做了一个非常详细的教程,然后邀请了一组用户在VR中学习如何制作浓缩咖啡。最后,每个用户都会获得一份详细的报告,评价他们的表现,包括制作咖啡的质量。为了进行比较,另一个小组通过观看网络视频学习做咖啡。两个小组都不限训练时间,直到他们能够在真实世界中制作咖啡。看视频学习的小组通常看了三遍教程,而进行VR训练的小组通常进行了两次教程。
我们很高兴地发现,在VR中人们可以学得更快、更好。进行VR训练的小组中,犯错的次数和制作浓缩咖啡的时间都显著减少(不过,就咖啡出品的质量来说,评委们没觉得有什么区别)。虽然一次的试验还不能说明什么,但是这些早期结果让人充满期待。此外,我们还发现未来如何更好地设计试验。下面一起来看一看:
首先,不该选择做咖啡。震动触感无法替代压实咖啡粉的手感。而且,当VR中有人碰到热蒸汽喷嘴,无论我们做什么样的警告提示,在真实世界中人们还是没有吸取教训,我们需要有专人在边上盯着,时刻准备着把人的手挡开。这说明对于一些技能来说,VR技术还不是很到位。VR训练只适合移动物品、按下按钮之类的输入,除非更好的追踪和触感手套成为主流。如果数字模拟与其所模拟的物品相差甚远,可能对于真正学会这些技能并没有什么帮助。
我们还发现,人们是不听从指令的。
在Daydream实验室制造的所有原型中都看到了这一点,但是在训练原型中的问题尤为突出。在控制器上写指令?那人们的手就停下来了。在背板上显示指令?面前的东西都来不及看。用语音播放?没人有这个耐心听完指令再动手。我们甚至加入了一个“提示”按钮,但是他们觉得这是作弊,一两个步骤之后就把这个按钮忘记了。最后,我们不得不把以上所有办法结合起来,而且还在场景中加上标记。我们用一个很大的绿色箭头指明用户下一步需要互动的物品,这用于测试还行。但是,我们离真正解决问题还远着,要有效地融入指令还需要大量工作。
用于提示的绿色大箭头”点击控制器上的灯泡图标,可以获得提示。“灯泡图标红色:重置,绿色:提示最后我们发现,要追踪每个用户的所有步骤难度太大。我们给用户提供的每一个选择,都会让教程中的路径数量指数级增加。更糟糕的是,人们不按照我们设定好的线性路径展开教程,因此我们必须把所有可能的情景进行建模。举个例子,用户有可能在磨咖啡粉之前先蒸牛奶。最终,像游戏一样建模要容易得多,每一个物品都有自己的状态。我们让系统追踪关键步骤是否完成,例如杯子里是否装有牛奶,而非按顺序追踪用户所做的所有步骤。
虽然有很多挑战,我们还是认为这是一个成功的原型:因为人们在VR中学到了新技能,而且享受了整个学习的过程。一些人甚至在真实环境中做完咖啡后,还回来重玩VR教程。实际上,当学员有了真实世界的体验后,就能更好地理解虚拟训练的环境和意义了。也许VR是引导人们学习新技能的好办法,并且人们在真实环境中尝试后,VR能帮助人们练习、巩固所学的技能。
至少,要在VR中get新技能,我们自己还得get更多新技能。