为了解决VR音效问题,Nvidia这次算是放了大招了。
VR体验的定位音频,一直以来都被认为是体现VR沉浸感的重要部分,它使声音听起来犹如来自真实准确的方向。但是,判断出声音的方向仅仅是沉浸式音频的一部分内容。VR音频下一个要完成的挑战,是让定向音频以现实的方式与虚拟环境进行交互,在音频的作用下,让VR空间感觉更加真实。
目前,定位音频以某种形式,被结合运用到大多数VR应用程序中(有些应用程序运用了更好的音频集成方式)。定位音频能传递出各色声源的方向,但这种传递会忽略掉声音所处的环境。因为我们的耳朵和大脑开始不自觉地辨别混合的声音,这些混合的声音是由于我们身处环境的形态和材质不同,而产生的混响、回声、衍射或更复杂的音频交互。即使没有相应的视觉感受,单是声音也能营造出巨大的空间感。毋庸置疑,要使VR的沉浸感最大化,音频是很重要的一点,而这正是我们引入实物音频的原因。
NVIDIA供图
基于物理空间的音频是虚拟声音在虚拟环境中的一种模拟,包括方向音频、环境形态及材料产生的交互音频。以往,由于这种模拟太占用资源,而无法快速准确地完成实时游戏。Nvidia公司提出了一个解决方案,在他们强劲的GPU上做模拟算法和运行。该公司称,即使在高性能的VR应用程序中,他们的GPU也能实时高效工作。在本文开头的视频中,你就可以仅靠音频感受到场景,并获得场景的物理形态等信息。当然,使用耳机能确保音频的效果;这次演示令人印象深刻,特别是视频末尾,从声源附近环绕的视线变化能展示出遮挡物的位置。
据雷锋网了解, Nvidia 公司今天在2017 GTC会议上发布的计划——VRWorks Audio SDK,是该公司VRWorks工具套件的一部分,用于增强VR在Nvidia GPU上的应用。SDK可以在任意应用程序中构建位置音频,除此之外,Nvidia公司的VRWorks音频也可用作虚拟引擎插件 (我们很快就会看到相同的统一),这为开发人员研究VR的实物音频提供了方便。
该公司表示,VRWorks音频是“唯一的硬件加速和路径追踪音频解决方案,能够实时创造出环境中完整的声学图像,而不需要事先对场景进行了解。当场景被应用程序加载时,声音模型就会立即构建和更新。于此同时,音频效果过滤器也会生成并应用于声源波形。”
VRWorks音频再现了公司的OptiX射线跟踪引擎,它通常用于渲染高保真的物理图形。关于VRWorks音频,系统生成了不可见射线传播声波,能跟踪它从起点到与它交互表面的路径,最终到达听众。
关于GTC 2017更多的详情,可以关注雷锋网(公众号:雷锋网)的相关报道。此外,美国西部时间5月10日上午9:00 - 11:00,黄仁勋将用2个小时的Keynote阐明今年NVIDIA推动人工智能和虚拟现实的全线产品和战略,大家可以关注官方页面http://nvda.ws/2qQOhGM收看。
- 蜜度索骥:以跨模态检索技术助力“企宣”向上生长
- iPhone在华份额为何不断下滑?外媒分析:因无法提供AI服务
- 深圳中院宣告柔宇破产 曾发布全球首款消费级折叠屏手机
- Canalys:2024年Q3全球AI个人音频设备出货量达到1.26亿部 同比增长15%
- 全球个人智能音频设备Q3出货量激增15%,苹果下滑9.2%
- 中国智能手机品牌加速进军欧洲高端市场
- 华为Mate 70系列即将发布,霸占微博热搜前三
- 明基发布新款27寸2K显示器PD2706QN,首发价3499元
- PC Partner迁总部至新加坡并上市,生产基地转至印尼,继续领跑全球GPU市场
- 深耕智能家居领域,苹果计划2025年推出AI驱动的智能家居控制中心
- 美媒:面对现实,苹果可能再无iPhone这样的爆款了
免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向本网站提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后,将会依法尽快联系相关文章源头核实,沟通删除相关内容或断开相关链接。