眼动追踪技术在VR中的革命与应用

通知

本站已搬迁至 https://news.nweon.com,本站将保留一年左右。2021年底开始,本文会自动跳转到新站对应文章https://news.nweon.com/19723

YiViAn 2016年7月30日)在交互中,眼睛扮演着一个非常重要的角色。双方眼睛交汇的时候,要比其他所有的社交方式都要强大。从低眼凝视对方,到在拥挤咖啡厅的眼神相遇,可以看到对方的眼睛,或者甚至是看到希望购买的衣服,人们都认为是理所当然的,是最基本的事情。在虚拟现实和增强现实中使用眼动追踪技术,可以让交互变得更自然,更轻松,就算是在一个基于软件的环境也是如此。

眼动追踪交互软件使用了基于场景的算法,制作了一个完全基于注视点控制的用户界面,让用户可以完成普通的任务,例如:扫描、滑动、放大、选择等等。

摆脱疲劳和追踪误差

目前的虚拟现实和增强现实交互界面仍然存在一些比较大的局限。手势控制、头部运动和声音控制都会导致疲劳。或许就像”少数派报告“中指出的一样,3D手势操作很有前景,但手臂和肩膀很快就会感觉很累。疲惫的手臂会让人们的交互慢下来,并丢失追踪精度。

声控适合于某些场景,但这种控制方式的响应速度很慢和不准确,当你说话太大声的时候也会影响其他人。头部运动现在正作为主要的控制方式,但不停地转动头部和倾斜脖子也会让人感觉很累,不实际,并可能会造成脖子损伤。

眼球运动的精细肌肉对疲劳免疫。事实上,眼睛经常都会用于视觉世界中,并作为观看事物的正常机制。如果一个人的眼球运动出现了问题,医生甚至会使用基于眼球的技术来帮助诊断,判断病人是否患上了创伤性脑损伤和脑震荡。对于那些患有言语障碍,或者诸如肌萎缩性侧索硬化症这样的闭锁综合症的人来说,通过眼睛来操作计算机和头戴式显示器更是为他们提供了一个必备的交流手段。

注视、伸手,捉取这样的动作协作很复杂(例如人们在超市中挑选一个鲜艳苹果),而视觉焦点是这种协作的一部分。同样的,眼动追踪技术可以结合头部、手部和声音,从而提供一个强大的、直观的控制方法。

虚拟现实和增强现实的未来

眼动追踪技术的响应速度很快,追踪很准确,也不会造成疲劳,这样一种交互方式可以促进人机交互领域的技术突破。以下有三个建议,你可以将其应用在商业活动中:

1. 开始在工作中尝试使用头戴式显示器

你的业务需要为这些新技术准备好,所以在办公室中准备这么一台设备。对于头戴式显示器来说,眼动追踪技术的出现是一个引爆点,将会加速头显的普及,企业、消费者、以及其他市场都会开始使用。之前,头显的价格和操作难度令到许多消费者望而却步,但借助眼动追踪技术,这两个问题都不再是问题。

通过“注视点渲染技术”(foveated rendering),眼动追踪技术可以节省设备的运算资源。在现实生活中,我们观看事物的时候,通常都是聚焦于某一个事物上,而边缘环境的分辨率则会大幅度降低,模糊掉。所以通过注视点渲染技术,虚拟现实和增强现实系统就可以只渲染焦点的全分辨率,对于其他边缘区域则以较低分辨率进行渲染,从而大幅度节省了运算资源。这样子,头显的价格也会降下来,让市场上的价格更加亲民,进一步推动头显的普及。

2. 在虚拟环境中与你的用户进行交互

想像一下虚拟化的客户服务呼叫中心和某些场所,为其增加一层交互性。这样子,拥有头显的用户就可以实时看到你的员工。通过简单地注视,就可以实现操作控制,那么虚拟现实和增强现实的用户就可以通过手部、声音和头部运动来进行其他交互和导航,从而提高了人际沟通和社交化的程度。

像Facebook这样的社区已经采取了一些积极的措施,继续深化在线社交,文字形式严重约束了休闲的人类交流。借助眼动追踪技术,人际交往会进一步扩大,因为它是基于视觉注意力这一自然的方式,可以促进同理心和沉浸感。眼动技术具有丰富的自然交互方式,

无论是实时虚拟化身,视频、或者是全息影像,可以“一起”冒险的体验都为我们提供了一种连接方式,通过眼神交流来进行情感的交流。当通过带有眼动追踪技术的虚拟现实和增强现实来分享故事时,我们会产生更多的同理心和更直接的情感投入。

3. 让呈现在增强现实和虚拟现实的事物更加友好

因为眼动追踪技术响应更快速,也更直观,我们可以将其用于菜单选择和应用发行。人们为什么只相信鼠标操作是最快的UI呢?这是因为他们还没有见过更快的交互界面。无需等待或者眨眼睛,只需要简单地看着,用户就可以完成计算机任务,这让眼动追踪交互成为首选的UI。

现在眼动技术已经应用在判断一个广告的效果如何,以及测试一个网站或者应用设计的可用性,甚至用来帮助一个饥饿的消费者决定吃什么午餐。

从传统的UI(如菜单和图标),到真实的社交参与和毫不费力的景观游览,眼动技术将会推动虚拟现实和增强现实的普及,并会改变人们使用网上资源的方式。不用多少年,眼动追踪技术将会更新传统的思维习惯,从“看到才愿意相信”变成“看着就可以操作”。

引用参考JimMarggraff@tech.co

资讯