为什么眼动跟踪将成为所有VR头显的标准?

  • Johan Bouvin
  • 5 分钟

VR headset

自数字革命开始以来,新技术不断以软件服务的形式取代了实物,逐渐实现了人们交流方式的虚拟化。航空邮件变成了即时通讯,报纸变成了网站,面对面的会议正被在线聚会、远程出席和虚拟现实所取代。

越来越多的虚拟化使得人们能够跨时区和距离远程协作变得更加容易。在这篇文章中,我将探讨虚拟化对远程协作的影响,随着时间的推移,远程协作变得更加直观和易于实现,而应用程序开发人员为什么会专注于眼动追踪技术。

Cassette tapes

几年前,我在帮助父母清理他们的阁楼。在回忆和灰尘中,我找到了一堆可以追溯到70年代的磁带。我发现的是我父母和祖母之间的通信。当时,他们住在不同的大陆上,他们用他们称为磁带邮件的方式进行交流。这是他们保持联系的独特方式,他们觉得这比书面信件更有深度,更有意义。

在伍德斯托克和第一次石油危机的时代,从纽约到伦敦的往返成本在今天的等值约为四千美元。手写或打字的备忘录是主要的商务通信形式。我父母的创新使得长途电话的声音通信在价格上变得实惠,当时长途电话的音质很差。电话需要事先计划,通话成本较高,并且只限于了解最新消息。

过去几个月提醒我们所有人对人际关系的人类需求——这种需求体现在遥远VR协作的急剧增加上。2020年3月,VR Chat的使用量比2019年同期增加了48%。Steam也注意到类似的增长,AltspaceVR增长了13%。对我来说,这些数据说明了VR的潜力,以及它如何能够以一种加强人际关系的方式把人们聚集在一起。

今天,在似乎是一项不断的家族传统中,我的孩子和他们的祖父母也住在两个不同的大陆上。通常情况下,我们每周一次在视频通话中见面,但在社交距离的时期里,这已经成为了日常活动。无限的语音和视频可用性,多种设备和强大的网络连接使我们能够一起玩耍——自然交流。

虽然我很感激有一份工作,也很感激支持基本商务的技术,但我还是忍不住希望下一代VR头显和应用程序已经成为主流。这将帮助我的孩子们以一种互动的方式学习,确保他们记住信息。而对我来说,我可以借助广泛的VR进行会议和远程协作,享受额外的创造力和自由。

虚拟作战指挥室

现在,我正要开始一个新的项目。几年前,我们会在办公室定制一个作战室,一个团队汇聚在一起进行创造、讨论、测试和完善的地方。如今,和许多其他现代企业一样,我团队的专家分布在不同的时区。合作需要耐心和创造力。虚拟现实(VR)使我们摆脱了实体空间、距离和时间的约束和限制。在我们的虚拟现实作战室中,我们可以带上我们需要的所有工具,如演示文稿、视频、实时内容、我们产品的最新3D模型、明年消费电子展(CES)的展台以及我们的新设计理念。

和其他许多虚拟解决方案一样,虚拟现实带来了便利、减少旅行和可持续的合作的好处。但是虚拟现实体验在其灵活性和超真实性方面超越了其他技术,因为它使我们能够在现实世界中无法实现的事情。

企业级应用与令人惊讶的虚拟人物

当我继续对这样的工作方式进行白日梦时,事实上,远程虚拟现实协作正在娱乐界获得立足点。由于技术的进步,使得虚拟人物从滑稽的卡通人物发展为逼真的数字双胞胎,虚拟现实应用正在开始进入高管层。进一步的采用将取决于有用的企业级应用程序和令人信服的虚拟人物。眼球跟踪技术可以支持这两者,这就是为什么我相信这将成为所有头戴显示设备的标准。它可以消除令人不安的凝视,让虚拟人物有自然的眼球移动和侧目,确保虚拟人物在深化逼真度的道路上不断发展。通过取消对不自然的头部动作的需求,例如选择物体,眼球跟踪可以提高虚拟现实应用程序的直观性水平。

HTC最近宣布了VIVE Sync的公测版,这是一款专为企业通信而构建的虚拟现实协作和会议工具。目前对企业免费提供,并支持Tobii眼球跟踪,以实现自然交互的虚拟人物。

不用说,我迫不及待地想试用一下。我想亲自看看Tobii的眼球跟踪技术如何支持远程协作的直观性,并为新一代虚拟人物注入活力。

因此,当我的同事玛吉想要讨论如何在虚拟现实头盔中使用眼球跟踪时,我们并没有像通常那样进行视频会议,而是用Vive Sync进行了会面。我戴着配备眼球跟踪技术的头盔,而玛吉没有。我们的会议录像清楚地显示了我们眼动的差异 - 我的眼动可以实时跟踪,而玛吉的则是模拟的。

Avatar simulation gif
Maggie在左边进行模拟眼动,我在右边进行实时追踪

类似于触觉控制器为虚拟现实体验增添触觉,眼球追踪则为虚拟现实体验增添视觉,捕捉眼神交流、眨眼和可能的目光转移等所有与信息传递相关的手势,这些都对有意义的交流至关重要。

如果您对我对虚拟现实头戴式显示器中眼球追踪技术的高层描述感兴趣,您可以观看我们的3分钟会议视频。

上手开发眼动应用

一些VR设备已经包含了眼球追踪技术,我确信这项技术将成为所有新设计的标准,不仅仅是因为它可以支持各种应用程序,更重要的是它是实现注视点渲染的头戴式显示器的先决条件(如果你想了解更多关于这项技术的信息,请查看“使用动态注视点渲染实现逼真虚拟视觉”)。

为了加速新应用程序的开发,Tobii开发者区提供了软件开发工具包(SDK)和演示,帮助开发者创建可以模拟用户眼球运动或将视线点映射到屏幕上物体的头像。与此同时,我迫不及待地想在我和孩子还有爷爷奶奶的视频通话中尝试VR技术。

作者

  • Johan Bouvin

    Johan Bouvin

    Director of product — XR software and ecosystem at Tobii

    Hi, I work with tons of developers from all over, hoping to gain an understanding of how their eye tracking needs are evolving. My aim is to ensure that we continue to develop our SDKs, developer tools, and XR platform to align with the rapidly expanding needs of the industry. I collaborate with amazing people in different lines of work. I find the more varied the individuals, the more interesting the results.

相关内容

Subscribe to our blog

Subscribe to our stories about how people are using eye tracking and attention computing.