空间音频与沉浸式体验

lhw 2023年3月1日15:20:12
评论
摘要

这种音频格式是单声道和立体声的巨大改进。它旨在发展用户与音乐、电影和未来元宇宙的互动方式。

空间音频可以改变我们感知音乐的方式等等。它通过为音频信号源提供空间背景来为听众创造沉浸式体验。

沉浸式环境使用360度空间,用户可以从各个方向享受3D内容。空间音频以令人难以置信的真实感增强了虚拟、增强和混合现实(VR/AR/MR)空间中的交互。

这种音频格式是单声道和立体声的巨大改进。它旨在发展用户与音乐、电影和未来元宇宙的互动方式。

空间音频与沉浸式体验

空间音频如何工作

空间音频声音系统以精确的现实主义模拟真实世界的声波。人们在听过往的汽车、对话和其他基于环境的应用程序时,可以利用沉浸式空间音频。

为了实现这一点,音响工程师使用双耳装置录音,两个麦克风同时捕捉音频,创造出3D声音。双耳录音复制声波对环境的反应。

此外,专业的软件和设备帮助音响工程师捕捉和再现精确和清晰的空间音频。

下一代头显和空间音频

在越来越多的VR头显中,许多人第一次接触这项技术是在Meta Quest 2上。其他头显包括Meta Quest Pro, HTC VIVE XR Elite, Pico 4和Pico 4 Enterprise, Varjo VR-3和XR-3,以及联想VRX和A3都采用了这项技术。

这些设备为协作工具、模拟和游戏整合了空间音频,为用户提供关键声音和反馈。例如,使用飞行模拟器的用户可以使用3D声音来定位故障信号或指示对讲。另外,参加沉浸式音乐会的人也可以享受3D音乐。

此外,声网Agora和制造商Conquest VR等众多公司正在开发第三方解决方案来提供增强的空间音频体验。这些工具利用智能手机、笔记本电脑、个人电脑、平板电脑和头显等现有设备硬件,为听众重现沉浸式音频。

这是制造商和大型科技公司之间一系列合作的结果。我们已经看到了许多探索空间音频潜力的创新冒险。

Nreal与微软合

全球消费智能眼镜制造商Nreal与微软合作,开发了一款旨在改善盲童社交互动的实验设备。

微软的PeopleLens利用空间音频,当视障用户看向他们的方向时,就可以读出被检测到的人的名字。

Nreal Light是Nreal公司的系绳智能眼镜解决方案,通过外部计算箱为PeopleLens设备供电。这使得Nreal得以进入医疗保健领域,尽管该公司主要专注于消费设备。

布里斯托尔大学的研究人员与Nreal和微软合作,在5至11岁的儿童中试用PeopleLens设备。该设备的空间音频功能利用其头戴式显示器(HMD)构建儿童周围环境的“人物地图”。

这种空间工具可以让儿童和视障人群在物理环境中检测到其他人的相对存在。然后,用户可以基于这个“基于回声定位”的识别系统构建人物地图。

AppleAtmos合作

杜比全景声(Dolby Atmos)是音频解决方案的支柱,增强了苹果的空间音频,用户能以3D声音收听音乐和电影。苹果公司在2020年9月的iOS 14更新中引入了这一功能。

作为苹果全球开发者大会(WWDC)的一部分,苹果公司于2021年6月在Apple Music上推出了这一功能,并于六月下旬宣布与杜比全景声(Dolby Atmos)合作。

苹果的虚拟声音技术允许用户通过AirPod Pros和AirPod Max耳塞中的内部加速计和陀螺仪跟踪头部运动。

使用杜比全景声(Dolby Atmos)技术的空间音频为用户提供高级无损质量。这为听众提供了顶级现实主义的真实音频体验。

听力体验的未来

沉浸式技术的复杂性将会增加,从而被广泛采用。这些工具将用户带到复杂的沉浸式世界、逼真的会议和扩展现实电影院。

随着Netflix、Conquest VR、索尼、苹果等公司采用空间音频技术,所提供的丰富音质使得对该解决方案的需求将急剧上升。再加上手、眼和身体的跟踪技术,空间音频对终端用户来说将变得更加真实。

随着重要的游戏技术与尖端XR解决方案的融合,制造商将达到所需的现实主义深度来转变沉浸式体验中的怀疑态度。

 

投稿:tougao@arinchina.com   来源:XRTODAY
稿件/商务合作: Vicky(微信 ARC-vicky)电话:18700987744
创始人:张明军(微信 13720775110)
更多精彩内容,请关注ARinChina微信公众号(ID:X增强现实)
版权申明:本文为.ARinChina原创,任何第三方未经授权不得转载。如需转载请注明转载来源、不得擅自更改内容,违规转载法律必究
weinxin
我的微信
这是我的微信扫一扫
广告也精彩
lhw
  • 本文由 发表于 2023年3月1日15:20:12
  • 转载请注明:https://www.arinchina.com/18190.html
广告也精彩
匿名

发表评论

匿名网友 填写信息

:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen: