编译/VR陀螺

Facebook的一项新实验表明，声音能够在增强现实中扮演重要角色。Facebook首席科学家迈克尔·阿布拉什（Michael Abrash）和他的FRL Research研究小组（以前的Facebook Reality Labs）今天发布了有关该小组所谓的“perceptual superpowers（超感知）”的详细信息，即能感知用户想要听到的声音的AR系统，然后放大并减弱背景噪音。结合空间音频功能，该设备可以在眼镜中产生与全息图重叠的声音效果。

多年来，Facebook一直在通过其Oculus VR设备追求高品质的虚拟声音。FRL Research的最新工作集中在AR应用程序上。举一个例子，该公司解释说：“想象一下，能够在拥挤的餐厅或酒吧里进行对话，而不必提高自己的声音就能让别人听到，也不必费力去理解别人在说什么。”

AR眼镜可以通过使用麦克风拾取音频，使用环境感知线索来评估哪些声音很重要，然后将这些声音通过降噪听筒来实现。相反，如果您正在通话或进行视频通话，则改善的空间声音可以将参与者的声音或其他音频投射到房间的特定部分，从而让用户增加与其他人真正在一起的感觉。

正如Facebook所承认的那样，实验室的“超感知”与现有助听器的功能非常相似，后者还可以放大声音并降低背景噪音（一个实验系统甚至使用大脑植入物专注于特定的声音）。

但是，AR眼镜为有或没有听力障碍的人们提供了独特的机会。方向传感器和对外摄像头或眼动摄像头可以收集详细的环境信息，包括用户的身体朝向和凝视的位置。这有助于听筒确定“声学聚焦点”以进行放大。而且AR系统还可以将自己的音景与放大后的音频混合在一起。

Facebook还可以通过其他AR计划对系统进行补充。例如，LiveMaps旨在创建丰富的地图，其中包含有关人们周围环境的信息。如果LiveMaps检测到有人在餐馆戴眼镜，则眼镜可以执行类似的操作，例如自动标记并取消叮当响的餐具的声音。

Facebook发布了这款入耳式设备的原型照片，以及团队成员佩戴着设备的图片，这些耳机设备看起来更像Valve的离耳式Index扬声器。 Oculus Quest VR头显使用定向扬声器，这是一种方便且适合所有人的解决方案，其可将声音投射到环境中，但声音会泄漏给旁观者，而这种入耳式的设计可能更适合在公共场所佩戴AR眼镜时改变整体声音水平。

其他公司也尝试过增强听觉的功能-最著名的是Bose，它在2018年推出了仅有音频的AR眼镜。Bose的眼镜使用空间传感器来检测佩戴者的目光，并提供虚拟街道游览等功能。但是，该公司未能使它们在商业上可行，并于今年6月放弃了该项目。

与往年不同的是，Facebook并没有举办会议，以在2020年炫耀其实验性技术，因此我们还未能亲自听到过这款设备的声音。 FRL Research向记者提供了远程呼叫音频过滤系统的演示。而且，任何空间音频方面的改进都将很快应用于VR头戴设备，包括谣传的即将在本月Facebook Connect大会前后推出的Oculus Quest迭代产品。FRL Research音频主管Ravish Mehra说道：“我们正在做的工作以及我们今天展示出的成果肯定有适用于我们VR​​设备系列的应用。”

来源：theverge