FB未来的AR智能眼镜计划将会把智能音频纳入其中
Facebook 未来的 AR 智能眼镜计划仍在酝酿之中,但其中一些计划可能很快就会宣布,即智能音频。空间音频和增强的音频现实是 Facebook 非常感兴趣的两个领域。Facebook 最新的 Facebook 现实实验室研究更新了该公司计划如何打造能够脱离现实世界、让虚拟物体听起来更接近用户的设备,即使它们实际上并不存在。
Facebook 的两项独立技术 --AudioPresence 和 ExancedHling-- 是该公司正试图解决的音频难题的一部分。与此同时,更大的增强现实领域仍然是一个出色的模式,包括苹果(Apple)、谷歌(Google)、微软(Microsoft)、MagicLeap 和其他公司,旨在推动未来十年的创新。
Facebook 原计划在本月晚些时候举行的 FacebookConnect 会议上亮相。但由于新冠肺炎的流行病造成的社交距离,记者在与 FacebookRealityLabs 研究主管迈克尔·阿布拉什(MichaelAbrash) 和一个音频研究团队聊天时,得到了一个虚拟的介绍。
智能音频 AR 并不是什么新鲜事:在今年早些时候其 AR 音频部门被显著关闭之前,Bose 已经尝试了多年。苹果的 AirPodsPro 具有积极的降噪和通过功能,并将在今年秋天增加 3D 空间音频支持。空间音频已经是真实虚拟现实的一个关键特征,但 Facebook 下一波计划更多地关注对话、注意力和音频保真度,包括在一些地方放置隐形扬声器,让人感觉自己就像在同一个房间里。"对我来说最重要的是(关于 Facebook 的新音频技术)在合理的时间内一切都是完全可行的,"Abrash 说。
根据 Abrash 的说法,音频技术最终可能出现在 OculusQuest 等 VR 头盔上,甚至可能出现在 Facebook 的其他设备上。
Facebook 正在进行的空间音频实验包括使用消声室和带有扬声器阵列的机械手包围一个人,计算出他们耳朵的特定空间音频几何图形,这需要 30 分钟,因此很难携带。下一步是缩小程序范围,拍摄耳朵的图像(Facebook 称其为与头部相关的传输,简称 HRTF)。长期以来,Facebook 一直被用来测试测量过的音频设置,更像是带有音频播放和聚焦麦克风的眼镜,而且没有视觉元素。
FacebookRealityLabResearch 的音频团队还希望将音频技术作为一种辅助技术,过滤背景噪声,或者当其他人说话、倾听和增强对话,提高语音清晰度。音频团队还希望使音频技术成为一种补充技术,同时过滤背景噪声,或者当其他人说话时,倾听和增强对话,提高演讲的清晰度。
Facebook 的一些 3D 音频和音频感知超能力概念让 CNET 记者 ScottStein 想起了他多年前在多普勒实验室试用的 HereOne 耳塞的各种环境噪声过滤器。Facebook 的研究利用波束形成来聚焦音频,以及测试人员使用的空间感知原型,包括定向麦克风。该公司已经生产了一个定制的耳监视器来创建音频,目的是最终将这一技术引入到未来的产品中。
Facebook 没有具体说明这一过程,但周四发表的一篇博客文章承诺,未来的音频可以用于导航 AR 优化的 Live 地图,Facebook 目前正在组装太空地图世界。Abrash 承诺,该公司在空间音频方面的进步已经产生了逼真的 3D 音频,看上去像是来自现实世界,而不是耳机,但目前的研究涉及复杂的耳朵扫描和特定的空间映射空间。该公司正在研发一种算法,可以在家中进行简单的摄像头耳扫描,以使这项技术更容易获得。