编译/VR陀螺
视觉元素是下一代数字体验的主要焦点,但音频在促进完全沉浸式交互方面也发挥着关键作用,人们听到的声音有助于传送思想,并使虚拟环境变得生动。
这就是Meta公司新研究的意义所在。为了带来更真实的AR和VR体验,Meta公司正在开发新的空间音频工具,以响应视觉中显示的不同环境。
图源:Meta
Meta的工作围绕着人们在某些环境中期望体验的声音的共性,以及如何将其转化为数字领域而展开。
正如Meta所解释的那样:
无论是在元宇宙的聚会上与其他人打成一片,还是在客厅里通过AR眼镜观看家庭电影,声学在这些时刻的体验中发挥着作用。我们设想的未来是,人们可以戴上AR眼镜,重温全息记忆,其外观和声音与他们从有利位置所经历的完全一样,或者当他们在虚拟世界中玩游戏时,不仅能沉浸在画面中,而且也能沉浸在声音里。
这可能使其即将推出的元宇宙更具沉浸感,而且声音实际上在体验中发挥的作用比人们最初预期的要大得多。
Meta公司已经在某种程度上考虑到了这一点,其第一代Ray-Ban Stories眼镜,包括直接将声音传入用户耳朵的扬声器。
扬声器的定位方式使人们能够完全沉浸在音频中,而无需额外使用耳机。而且该扬声器可能已经成为这款时尚眼镜设备的一个关键卖点。
为了将其沉浸式音频元素推向下一个阶段,Meta公司向开发者开放了三种新的视听理解模型。
Meta表示:"这些模型专注于视频中的人类语言和声音,旨在推动我们以更快的速度实现更加沉浸式的现实。"
Meta公司已经开发了自己的自监督视听匹配模型,通过将这些声学研究扩展到更多的开发者和音频专家那里,可以帮助Meta公司建立更加现实的音频翻译工具,以进一步加强其工作。
这一点,可能比人们想象的更有意义。正如Meta首席执行官马克-扎克伯格所指出的那样:
获得正确的空间音频将是我们为元宇宙所构建的东西中提供"令人惊叹"体验的因素之一。我很高兴看到它的发展。
与Ray-Ban Stories中的音频元素类似,这种 "令人惊叹"的因素很可能是让更多人购买VR头显的原因,这可能有助于迎来Meta正在建立的数字连接的下一个阶段。
因此,它最终可能会取得重大进展,未来Meta公司将如何建立其空间音频工具以加强其VR和AR系统?这是一件令人期待又有趣的事情。
投稿/爆料:tougao@youxituoluo.com
稿件/商务合作: 六六(微信 13138755620)
加入行业交流群:六六(微信 13138755620)
元宇宙数字产业服务平台
下载「陀螺科技」APP,获取前沿深度元宇宙讯息