XR开发者聚焦— Tobii Ocumen、VR游戏和交互设计

  • Maggie Ma
  • 6 分钟

Tobii Blog

欢迎来到这期的XR开发者聚焦!自上次更新以来时间过得如此之快,但我们从未缺乏兴奋之情,看到眼动追踪被应用于新的领域,并激发了新产业创新。请务必订阅我们的邮件列表,成为第一个获取有关使用Tobii眼动追踪开发的相关新闻、见解等的人。

亮点:

  • Tobii Ocumen成功案例和AWE演讲
  • 具备眼动追踪技术的VR游戏
  • 基于注视的交互设计

Tobii Ocumen 为创新赋能

自其推出两年以来,Tobii Ocumen已经为许多行业赋予了创新能力,颠覆了传统方法,提高了效率。作为一种高级工具,用于观察虚拟现实中的用户行为,它提供了新的数据,并帮助人们深入了解人类行为。开发人员使用它提供的框架来记录、整理和分析生物医学情况,并快速构建和开发科学级别的虚拟现实产品,如健康评估、治疗和培训。

Gaize是一家软件公司,致力于解决酒后或药后驾车和工作人员的问题。Gaize的首席执行官肯·菲奇勒(Ken Fitchler)在AWE USA 2023大会上与我们共同探讨了虚拟现实和眼动追踪的融合可能性,以理解人类状况并开发突破性解决方案。

AWE talks 2023

AWE USA 2023 - Collaboration, Training and Education: Unleashing the Power of VR

在另一场由Tobii的Amanda Bentley和Robert Malmström主讲的AWE演讲中,更多医疗、培训和其他行业使用Tobii Ocumen的成功案例被提及。

AWE talks 2023

AWE USA 2023 - Healthcare & Wellness: Disrupting Healthcare, Training, and More

如果Tobii Ocumen似乎适合您的使用情况,请查看我们的产品页面和开发者网站以获取更多信息。我们也鼓励您利用我们的免费试用,了解Tobii Ocumen如何增强您的解决方案能力。

充分利用眼动追踪技术的VR游戏

今年,我们看到在虚拟现实游戏中利用眼动追踪的趋势不断增加,以优化虚拟现实头显的计算能力,创造更自然的互动。

Tobii眼动追踪技术已经为许多增强现实设备实现了动态焦点渲染。类似于我们在现实世界中眼睛和大脑的工作方式,增强现实设备的计算能力只能关注我们眼睛所关注的地方。这样节省下来的计算能力可以用于其他关键任务,如维持高帧率,这对于运行像游戏这样要求高的内容至关重要。随着显示技术的进步,未来增强现实设备将能够支持更高分辨率,如8K、16K等,这样的节省将成倍增加。

"Foveated rendering on PS VR2 can bring a massive reduction in GPU usage while producing the same perceptual quality – and, combined with eye tracking technology, the performance gains are even better...We’ve also seen gains up to 3.6x faster when foveated rendering is combined with eye tracking."

-- Unity 

通过利用我们的眼睛和直觉理解视觉线索的能力,XR设备可以实现与虚拟环境的自然和身临其境的交互水平。更好的是,它实现了这一点,而不需要用户学习新的行为模式。

以下是媒体的一些评论:

"You can select dialog choices with characters by simply looking at an option and hitting a face button instead of swiping around with an analog wheel. It’s so seamless that I almost forgot I was doing it sometimes — and I never want to go back."

-- The Verge

"And in a game like Horizon: Call of the Mountain, you can use that gaze tracking to navigate menus. And very quickly, I found this much preferred over your standard kind of head tracked look pointer...I found it so much easier and so much more intuitive and natural to just use my eyes to move the cursor..."

- Adam Savage's Tested.

"... the fleeting glance was so crucial to making me feel like I was really there, really being given the stink eye by a character, that I couldn't help but lose myself in the moment... It's the kind of immersion I haven't gotten from VR in a while."

- WIRED

为了帮助开发者更好地利用眼动追踪技术,Tobii在GDC 2023上进行了演讲,介绍了如何通过先进的眼动和头部跟踪技术将沉浸感推向新一代游戏的极限。演讲深入探讨了眼动和头部跟踪技术及其在PC和XR设备游戏中的应用案例。此外,还提供了避免设计陷阱的技巧和诀窍,帮助开发者更好地采用这项技术,以增强游戏的沉浸感。

基于注视的交互设计

这种利用眼动追踪技术来创建优化用户交互和体验的趋势不仅仅在游戏中出现,最近苹果的Vision Pro也在更广泛的应用领域发布。眼动追踪再次被证实是XR中一项必要的技术。

如果你对这一趋势感兴趣,并且想设计基于凝视的交互,你应该检查我们的开发区,那里可以找到有关为VR设计眼动追踪的基本构建模块的信息,以及在设计基于凝视的使用情景时应该考虑的技巧和窍门。

值得一提的是,Unity已经在XRI2.3中添加了眼动追踪支持。Tobii一直在协助相关概念和研究,并自豪地为开发者提供下一级别的支持。

相关资源

最后,我想给你留下一些可能对你有趣的精选材料。

凹凸渲染是一种正在改变我们体验虚拟现实方式的渲染技术。通过仅在用户注视的区域渲染最高质量的图像,它可以显著降低运行VR头显所需的处理能力,从而带来很多性能上的好处,例如更流畅的性能、更高分辨率的显示甚至更长的电池寿命。阅读我们的博客文章《凹凸渲染》以了解更多信息。

如果你正在进行眼动追踪研究,并且需要解读数据并得出关于研究结果的结论,你会发现我的同事Ieva Miseviciute最近撰写的学习文章《眼动类型》非常有用。

Walter Greenleaf博士是斯坦福大学虚拟人类互动实验室的医学AR/VR专家。他最近发表了一篇关于VR、ML、生物传感正在融合以改变医疗保健的激励性演讲:《虚拟现实、机器学习、生物传感-融合以改变医疗保健》。它不仅讨论了这些重要技术的详细趋势,还指出了一个未来,在这个未来中,这些技术的融合将导致更经济、更可扩展和更有效的医疗保健。

祝开发愉快,期待下一次更新!

作者

  • Tobii employee

    Maggie Ma

    Head of Marketing XR

    As the head of marketing for the XR segment at Tobii, I get to tell amazing stories about our eye tracking sensor technology and how it is put to good use in VR and AR. I get inspired by the innovations that enhance understanding of ourselves, break the physical and financial barriers, help address incurable diseases, and fuel curiosity to explore new frontiers. It feels great to connect the magic of technology with the need of the users.

Subscribe to our blog

Subscribe to our stories about how people are using eye tracking and attention computing.