谷歌研发3D音频激光系统,为视障人士带来VR交互体验〔附论文〕

文章相关引用及参考:映维网

谷歌正在探索空间音频提示如何用于虚拟环境的导航和交互。

映维网 2017年10月28日)虚拟现实拟提供足不出户就能探索新世界和踏上冒险征途的能力。我们喜欢VR提供的自由感,但这项技术仍然主要依赖于视觉线索,从而使得视障人群难以步入这个神奇的虚拟世界。为了将这种令人难以置信的体验带给视障人士,VR需要提供新的工具。因此,谷歌正在探索空间音频提示如何用于虚拟环境的导航和交互。

与VR相比,其他技术为视障人群提供了更多的工具和帮助。一个例子是在网站图像上的替代文字,另一个是Google TalkBack(增加了口头,听觉和触觉反馈,帮助视障人士与设备进行交互)。以这些技术为灵感,谷歌创建了一个令VR更容易达至这部分人群的音频工具。

借助HTC Vive,谷歌创建了一个1:1的虚拟房间原型,记录了房间中每个物体的名称,并将这些音频标签与各个对象(包括地板墙壁等等)相链接。然后,谷歌遮挡了用户的视场,从而模拟完全失明的情景。为了在漆黑的房间进行导航,谷歌创建了一个3D音频激光系统,其中包括一个从Vive控制器延伸出来的激光指针,帮助用户选择和播放音频标签。谷歌同时还提供了音频位置控制(通过点击触摸板),通过激光指针提供最后一个目标的距离和方向。

当用户把激光指针瞄准虚拟对象并选择音频位置控制时,VR系统将在控制器的位置播放简短的脉冲响应音。然后,随着其快速接近虚拟对象的位置,声音会再播放多几次。由于所有音频都是通过Google VR Spatial Audio插件进行处理,所以每个音色都提供了足够的信息来帮助用户了解对象在虚拟空间中的距离和相对位置。

为了测试原型,谷歌实验的参与者需要在虚拟房间内找到并拿起玩具激光枪,导航至窗户,并且射击窗外的移动鸭子。谷歌一共测试了6名非视力障碍人士,而他们都能成功完成挑战。在任务完成后,其中4名参与者再次体验了这个实验,而这一次不再模拟完全失明的情景。由于参与者是通过声音导航房间,所以他们已经熟悉了周围环境。

这是向前迈出的一小步,但实验表明,我们可以单纯通过听觉线索在VR中导航和交互。映维网希望大家能够继续探索旨在让每个人都可以使用VR的方法。因为这方面还有很多事情要做。

相关论文:Three-Dimensional (3D) Audio Laser for Virtual Reality Systems

原文链接https://yivian.com/news/37342.html
转载须知:转载摘编需注明来源映维网并保留本文链接
英文阅读:点击前往映维网合作伙伴 RoadtoVR 阅读专业英文报道
入行必读:深度分析:AR的过去、现在、未来与现实
入行必读:为什么Oculus Quest是历史性突破
入行必读:AR/VR,下一个计算机浪潮,下一个三十年科技文明!

更多阅读推荐......

首页