谷歌开源提供真实VR和AR体验所需的空间音频SDK

2023-05-10 14:56:27

谷歌正在寻求通过新的试验和SDK改进虚拟现实体验。近日,该公司宣布将去年发布的Resonance Audio(即公司的空间音频SDK)开源。谷歌还对外展示了其光场试验的更多进展——这是一组用于高级捕获、拼接和渲染的算法。

“为了推动和加速沉浸式音频技术的采用并加强围绕该技术的开发者社区,我们将Resonance Audio开源,采用社区驱动的开发模式。通过创建针对移动和桌面计算优化的开源空间音频项目,任何平台或软件开发工具提供商都可以轻松与Resonance Audio集成。更多的跨平台和工具支持意味着内容创作者可以获得更多的发行机会,而无需投资昂贵的移植项目。”谷歌的项目经理Eric Mauskopf在一篇博文中写道。

谷歌称,空间音频对于在虚拟现实和增强现实世界中提供存在感非常重要。

该开源项目将包括YouTube的基于Ambisonic的空间音频解码器的参考实现,该解码器与业界使用的Ambisonic格式兼容。它还将具有编码、声场操控、解码技术以及头部相关传输等功能,以实现丰富的空间音频。此外,谷歌将开放其优化的DSP类和功能库。

此外,它正在作为独立库和相关引擎插件、VST插件教程和示例进行开源。

谷歌表示,自11月份发布以来,Resonance Audio已被用在许多应用中,例如皮克斯为Gear VR推出的Coco VR以及AndroidiOS中的迪士尼星球大战Jedi Challenges应用。

谷歌一直试图通过其他方式在VR领域中为用户营造真实的存在感,即通过Light Fields试验的方式。据该公司介绍,光场通过创建运动视差和逼真的纹理和光线营造出存在感。

“在光场中,附近的物体似乎靠近你,而当你移动头部时,它们看起来会变化很多。远处的物体变化较少,不同物体反射的光线也不同,因此用户会得到强烈的暗示,即此时此刻处于3D空间中。当用户使用支持位置跟踪的VR头戴式设备时,光场可以根据真实世界中拍摄的视频获得一些真正令人惊叹的VR体验。“谷歌负责光场试验的小组在一篇文章中写道。

作为试验的一部分,谷歌将在Steam VR上发布一款名为“Welcome to Light Fields”的应用程序,以展示该技术的潜力。


友情链接

Copyright © 2023 All Rights Reserved 版权所有 广西壮歌分享交流群