一项新的Facebook实验显示了声音在增强现实中的重要作用。frlresearch（前Facebook Reality Labs）首席科学家迈克尔•阿布拉什（Michael Abrash）和他的团队今天公布了该团队称之为“感知超能力”（perceptive superpowers）的细节——AR系统，它能找出你想要听到的声音，然后放大并抑制背景噪音。与空间音频功能相结合，该设备创建了一个听觉等效全息图覆盖在一副眼镜。

Facebook多年来一直在追求高质量的虚拟声音，主要是通过Oculus虚拟现实耳机。frlresearch的最新工作集中在AR应用上。举一个例子，“想象一下，在拥挤的餐厅或酒吧里进行一次谈话，而不必提高嗓门让别人听到，也不必费劲去理解别人在说什么，”该公司解释道。

AR眼镜可以做到这一点，通过麦克风拾取音频，使用上下文线索来判断哪些声音是重要的，并通过一个消除噪音的听筒来传送这些声音。相反，如果你在打电话或视频电话，改善的空间声音可以将参与者的声音或其他音频投射到房间的特定部分，增加你真的和别人在一起的感觉——或者用FRL Research的话说，“音频存在”。

正如Facebook所承认的，该实验室的“感知超能力”音调与现有助听器的功能非常相似，助听器也能放大声音，降低背景噪音。（一个实验系统甚至使用大脑植入物来聚焦特定的声音。）

然而，AR眼镜为有听力障碍和无听力障碍的人提供了独特的机会。方向传感器和外向或眼睛跟踪相机可以收集详细的上下文信息，包括你的身体方向和你的目光集中在哪里。这有助于耳机精确定位“声聚光灯”进行放大。当然，AR系统可以将自己的音景与放大的音频混合。

Facebook还可以用它的其他AR计划来补充这个系统。例如，LiveMaps的目标是创建丰富的地图，其中包含有关人们周围环境的信息。如果LiveMaps检测到有人在餐厅戴着眼镜，眼镜可以做一些像自动标记和取消叮当声银器。

Facebook发布了一张假人头上的入耳式监听器原型照片，以及一张团队成员戴着耳机的照片，这些耳机看起来更像Valve的离耳式扬声器。Oculus Quest VR耳机使用定向扬声器，这是一种方便的一刀切的解决方案，用于将声音投射到环境中，但会将声音泄漏给旁观者，而在公共场合佩戴AR眼镜时，入耳式监听器可能更适合改变整体声级。FRL研究音频负责人Ravish Mehra说：“使用什么形状因子来解决问题最终取决于应用程序。”。

其他公司也尝试了听觉增强技术——最引人注目的是Bose，该公司在2018年推出了纯音频AR眼镜。Bose的眼镜使用空间传感器来检测佩戴者的视线，并提供虚拟街头游览等功能。不过，该公司未能使它们在商业上可行，并于今年6月放弃了该项目。

与前几年不同的是，Facebook没有在2020年举办会议展示实验性技术，因此我们没有亲自听到它的音频。frlresearch向记者展示了它的远程通话过滤系统。而任何空间音频的改进都可能很快应用到虚拟现实耳机上，包括传闻中的本月Facebook Connect大会前后的Oculus Quest更新。Mehra说：“我们正在做的工作和我们今天介绍的工作肯定对我们的VR设备系列有应用。”。

这些能力的全面应用可能需要数年的时间。我们对Facebook的消费者AR眼镜路线图了解不多，即使我们正在慢慢了解该公司认为他们应该做些什么。有几张照片显示的是塑料镜框，但它们的设计是用来固定麦克风阵列的，而不是作为正式的眼镜。Facebook此前表示，它已经**了多个原型变体，包括最近的AR/VR组合耳机设计，看起来像一副太阳镜。

为了销售真正的商业产品，Facebook需要消除超出技术层面的担忧。这包括让人们相信“感性超能力”不会对隐私构成威胁。

在没有任何限制的情况下，足够强大的麦克风和过滤技术可以让人们在公共空间中潜移默化地窃听对话。人工智能音频分析提供了更奇怪、更令人担忧的可能性，比如在拥挤的房间里标记特定声音或对话关键词的能力。（从理论上讲，它还可以执行更无害、更有用的任务，比如实时翻译。）当然，眼镜也可以记录你自己的对话。

没有迹象表明联邦调查局的研究人员正在考虑蓄意监视。但许多人已经担心——可能是错误的——Facebook的应用程序正在将它们记录下来以投放目标广告。因此，仅仅是这种可能性就可能引起消费者的警觉。frlresearch表示，捕获的音频目前被加密并存储在服务器上，少数研究人员可以访问这些服务器。

阿布拉什说，Facebook正试图将隐私融入眼镜设计的各个方面，这与它对AR/VR整体计划的克制相呼应。除此之外，该系统可以在放大对话之前请求他人眼镜的许可，也可以范围有限。他告诉记者：“与其把这当成一个神奇的手电筒，我们可以指着任何人，听听他们在说什么，不如把它看成是人们无论如何都能参与他们的谈话。”。

阿布拉什说，目前这种微型麦克风阵列的威力还不足以进行远程间谍活动。“如果你看到有人戴着两英尺宽的眼镜走路，”他开玩笑地提醒说，“你应该多疑。”