0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

HTC Vive推出了3DSP音频SDK,可以为应用程序提供具备空间音效的音频

0wvm_ARchan_TT 来源:未知 作者:李倩 2018-06-28 16:45 次阅读

听觉是VR体验中不可或缺的一部分,真正沉浸式的体验除了视觉外也要让听觉符合场景的设定。为了帮助开发者更方便的创造自然的立体音效,HTC Vive推出了3DSP音频SDK。

3DSP是一款音频SDK,可以为应用程序提供具备空间音效的音频。影响人类对于音频空间化感知的因素有很多,比如声音传入两只耳朵的时间差,两耳之间的水平差异,人体耳廓、头部等部位的差异、环境因素(例如房间声音反射和混响)以及从声源发出声音到人耳接收到声音之间遇到的障碍物阻挡,都会影响人的听感。

为了让用户在VR中听到的声音尽可能的真实,就需要考虑到声音发出到被听到之间的种种因素,让VR中的声音尽可能接近真实空间中人们听到的声音,以增加从沉浸感。

高阶Ambisonics(高保真立体声)

传统的双声道立体声利用两个扬声器,通过人的双耳效应使声音达到空间立体的效果。

而随着技术的不断进步,在VR中我们常用一种音频技术Ambisonics,相当于让声源遍布球状的内表面,环绕用户的头部。

Ambisonics使用“球谐函数”描述声场,使声音从四面八方传来,带来更好的沉浸感。

不过迄今为止简易的基本型Ambisonic系统只能在一个中心位置创建一个精确的声场。随着听众远离中心并随着频率的增加,误差水平逐渐增加。

为了减少误差,可以采用增加球面的阶数来描述更加复杂的谐波。

HTC在对3DSP SDK的展示中便展示了3阶Ambisonics模型。

房间音频

当用户处在虚拟房间中时,就要考虑房间的复杂情况,对声音做出相应处理。

3DSP从早期反射、后期混响、背景噪声、环境材料等方面模拟房间音频,让用户获得更具空间感的声音。值得一提的是,3DSP同时保证了该技术在低计算量的情况下运行,减少设备的计算负担。

距离模型

空间中真实传播的声音会随着传播距离的增长而发生衰减,但是在不同的情况下衰减的变化是不同的。

在HTC Vive 3DSP SDK中,提供了几种情况下声音的衰减模型,采用基于现实建模的距离模型。

阻塞效应

当声音从声源发出遇到障碍物再被用户听到的时候,会因为障碍物的阻挡而发生改变。

分析物体的几何特点来计算遮挡物对声音的遮挡能力。

为了计算障碍物的遮挡能力,是通过在空间中投射大量射线,并列举有多少被障碍物遮挡。

无需使用Unity对撞机,根据不同障碍物的具体面积以及形状计算得到声源经过障碍物后被听众听到的实际情况。

其他特性

除了上述的几点外,HTC Vive 3DSP SDK还具备以下特性

·基于对真实世界精确建模(包括水平和垂直方向)的头相关变换函数(HRTF),可以得到适用于所有声音的滤波器进而还原空间音频。

·原声和回放均采用高分辨率音频。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 音频
    +关注

    关注

    29

    文章

    2839

    浏览量

    81384
  • SDK
    SDK
    +关注

    关注

    3

    文章

    1029

    浏览量

    45788
  • vr
    vr
    +关注

    关注

    34

    文章

    9634

    浏览量

    150084

原文标题:HTC Vive发布空间音频SDK,带来身临其境的听感

文章出处:【微信号:ARchan_TT,微信公众号:AR酱】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    Adobe将推出全新免费应用程序

    Adobe近日宣布了一项令人振奋的新举措——从明年起,将推出一款免费的基于网络的应用程序。这款应用的主要功能是为图像、视频和音频创作者提供便捷的“内容凭证”管理工具。
    的头像 发表于 10-10 16:54 354次阅读

    2.4G & 5.8G无线音频传输有什么区别?

    ) 目前业界5.8G无线音频传输做得比较好的DSP有台湾钰宝科技等公司,QUMAX/奎宇资讯为其代理商,可提供芯片与模块,有兴趣的朋友可以联络。 IA25系列
    发表于 09-25 11:01

    DSP音效处理芯片有什么作用

    算法的微处理器。在音频领域,DSP芯片可以执行各种复杂的数学运算,以改善音质、增强音效、实现声音的3D定位等功能。 1.
    的头像 发表于 09-24 16:11 525次阅读

    HTC新头显Vive Focus Vision:强化混合现实体验

    HTC最新推出VIVE Focus Vision头显,作为VIVE Focus 3的升级力作,不仅预示着其在混合现实(MR)领域的深入探索
    的头像 发表于 09-19 15:52 743次阅读

    炬芯科技联合驊訊电子推出颠覆性Xear™ 7.1.4 全景3D空间音频无线电竞耳机方案,重新定义游戏音效

    Audio全景空间音频无线电竞耳机解决方案 ,终端产品目前已量产上市。 针对无线电竞耳机产品,炬芯科技与驊訊电子充分发挥各自在软硬件方面的深厚积累及技术优势,共同合作推出了一款全新的高音质低延迟无线
    发表于 09-13 09:25 214次阅读
    炬芯科技联合驊訊电子<b class='flag-5'>推出</b>颠覆性Xear™ 7.1.4 全景<b class='flag-5'>3</b>D<b class='flag-5'>空间</b><b class='flag-5'>音频</b>无线电竞耳机方案,重新定义游戏<b class='flag-5'>音效</b>

    HiFi 音频和计算音频是互斥的还是共存的?

    在实际应用中,HiFi音频可以利用计算音频技术来增强其功能和性能。例如,通过数字信号处理(DSP)来优化音频输出,或者利用计算能力进行实时噪
    的头像 发表于 08-02 18:20 622次阅读
    HiFi <b class='flag-5'>音频</b>和计算<b class='flag-5'>音频</b>是互斥的还是共存的?

    支持多种数字音频接口和集成多种音效算法的DSP音频处理芯片-DU562

    DU562芯片是一款高性能DSP音频数字信号处理芯片,采用LQFP48封装;能实现多种音频功能如混响、均衡、滤波、反馈抑制等集成多种音效算法可对音乐播放及人声进行实时
    的头像 发表于 07-31 09:23 426次阅读
    支持多种数字<b class='flag-5'>音频</b>接口和集成多种<b class='flag-5'>音效</b>算法的<b class='flag-5'>DSP</b><b class='flag-5'>音频</b>处理芯片-DU562

    山景BP1048B2-高性能32位DSP蓝牙音频处理器

    信号的精确处理,能还原出更加清晰、逼真的音质。 山景BP1048B2 支持丰富的音频算法 ,音效包括 回声、混音、3D环绕、虚拟低音、支持电音/变调/变声 ;同时还具备参数均衡器(EQ
    的头像 发表于 07-22 10:40 1507次阅读
    山景BP1048B2-高性能32位<b class='flag-5'>DSP</b>蓝牙<b class='flag-5'>音频</b>处理器

    HiFi音频pro和普通HiFi音频

    针对那些对音质要求极高、追求专业级音频表现的用户,音频设备公司专门设计了HiFi 音频Pro系列。它们在设计和性能上更为精细和高级,当然价格通常也会反映其高端定位和专业水准。相比之下,普通HiFi
    的头像 发表于 07-11 16:56 526次阅读
    HiFi<b class='flag-5'>音频</b>pro和普通HiFi<b class='flag-5'>音频</b>

    DU562音频处理芯片—车载娱乐设备音响解决方案

    作为车载娱乐设备的核心组件,DSP音频处理芯片在车载娱乐设备中起关键作用,它可以音频信号进行实时处理和增强,以提供更好的音质和
    的头像 发表于 05-17 11:06 669次阅读
    DU562<b class='flag-5'>音频</b>处理芯片—车载娱乐设备音响解决方案

    DSP ARM FPGA 实验箱_音频处理_滤波操作教程:3-9 音频信号的滤波实验

    。 调用这些例程的运行速度比直接用C语言编写的等效代码快得多。使用DSPLIB可以缩短应用程序开发时间。 DSPLIB3_4_0_0包括适用于 C64x+ 或 C66x 或 C674x 处理器
    发表于 05-10 10:24

    高通推出三代S5和S3音频平台,拓展音频功能

    在中高档市场,高通宣布第三代骁龙S3音频平台具备比上代提升2倍的运算速度,并支持来自“高通语音及音乐合作伙伴拓展计划”的第三方技术。此计划涵盖多种特定的音频功能如
    的头像 发表于 03-26 13:41 1036次阅读

    fx3枚举成usb扬声器,电脑无法播放音频是哪里出了问题?

    参考fx3 sdk 1.3.5例程uac_examples,将fx3修改为usb 扬声器,电脑能识别到设备,但电脑无法正常播放音频,fx3
    发表于 03-06 06:52

    艾为重磅推出新一代Digital Smart K数字音频功放产品AW88396FOR

    上海艾为电子技术股份有限公司(awinic),作为国内引领音频IC设计潮流的龙头企业,在内置DSP的数字功放系列上持续深耕,推出了一款内置丰富音效和保护算法
    的头像 发表于 02-19 18:09 1004次阅读
    艾为重磅<b class='flag-5'>推出</b>新一代Digital Smart K数字<b class='flag-5'>音频</b>功放产品AW88396FOR

    AKM成化旭推出全新车载音频DSP提供设计方案应用

    AKM成化旭推出全新车载音频DSP提供设计方案应用
    的头像 发表于 01-15 11:11 1021次阅读
    AKM成化旭<b class='flag-5'>推出</b>全新车载<b class='flag-5'>音频</b><b class='flag-5'>DSP</b><b class='flag-5'>提供</b>设计方案应用