Nvidia发布VR Works Audio SDK，欲解决VR音效这个大难题
为了解决VR音效问题，Nvidia这次算是放了大招了。 VR体验的定位音频，一直以来都被认为是体现VR沉浸感的重要部分，它使声音听起来犹如来自真实准确的方向。但是，判断出声音的方向仅仅是沉浸式音频的一部分内容。VR音频下一个要完成的挑战，是让定向音频以现实的方式与虚拟环境进行交互，在音频的作用下，让VR空间感觉更加真实。 目前，定位音频以某种形式，被结合运用到大多数VR应用程序中（有些应用程序运用了更好的音频集成方式）。定位音频能传递出各色声源的方向，但这种传递会忽略掉声音所处的环境。因为我们的耳朵和大脑开始不自觉地辨别混合的声音，这些混合的声音是由于我们身处环境的形态和材质不同，而产生的混响、回声、衍射或更复杂的音频交互。即使没有相应的视觉感受，单是声音也能营造出巨大的空间感。毋庸置疑，要使VR的沉浸感最大化，音频是很重要的一点，而这正是我们引入实物音频的原因。 基于物理空间的音频是虚拟声音在虚拟环境中的一种模拟，包括方向音频、环境形态及材料产生的交互音频。以往，由于这种模拟太占用资源，而无法快速准确地完成实时游戏。Nvidia公司提出了一个解决方案，在他们强劲的GPU上做模拟算法和运行。该公司称，即使在高性能的VR应用程序中，他们的GPU也能实时高效工作。在本文开头的视频中，你就可以仅靠音频感受到场景，并获得场景的物理形态等信息。当然，使用耳机能确保音频的效果；这次演示令人印象深刻，特别是视频末尾，从声源附近环绕的视线变化能展示出遮挡物的位置。 据了解， Nvidia 公司今天在2017 GTC会议上发布的计划——VRWorks Audio SDK，是该公司VRWorks工具套件的一部分，用于增强VR在Nvidia GPU上的应用。SDK可以在任意应用程序中构建位置音频，除此之外，Nvidia公司的VRWorks音频也可用作虚拟引擎插件 （我们很快就会看到相同的统一），这为开发人员研究VR的实物音频提供了方便。 该公司表示，VRWorks音频是“ 的硬件加速和路径追踪音频解决方案，能够实时创造出环境中完整的声学图像，而不需要事先对场景进行了解。当场景被应用程序加载时，声音模型就会立即构建和更新。于此同时，音频效果过滤器也会生成并应用于声源波形。” VRWorks音频再现了公司的OptiX射线跟踪引擎，它通常用于渲染高保真的物理图形。关于VRWorks音频，系统生成了不可见射线传播声波，能跟踪它从起点到与它交互表面的路径，最终到达听众。 |