0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

空间音频技术的现状和特性

贸泽电子 来源:贸泽电子 2024-06-26 16:46 次阅读

音频偏好始终被视为一项个人体验。一个人认为好的东西对另外一个人可能并非如此。但随着Apple iOS 16对Personalized Spatial Audio的支持,许多渠道上众说纷纭,误传误报层出不穷。本文将浅谈一下空间音频技术的现状和特性。

人们对再现更佳音质的追求似乎永无止境。从Victrola的手摇留声机到新的环绕立体声技术,收听者们一直在寻求用技术来改善传递到他们耳朵的声音。随着空间音频技术的新应用,这种对改善音频和收听体验的追求迎来了新的转机,因为这项技术承诺提供比以往更身临其境的听觉体验。

Apple Spatial Audio并不是唯一的空间音频技术;Sony和Denon等公司在这项技术上也处于前排地位,并提供商业化产品。不过,本文仅讨论空间音频技术一般概念以及Apple的Personalized Spatial Audio。

音频偏好始终被视为一项个人体验。一个人认为好的东西对另外一个人可能并非如此。但随着Apple iOS 16对Personalized Spatial Audio的支持,许多渠道上众说纷纭,误传误报层出不穷。本文将浅谈一下空间音频技术的现状和特性。

01

头部结构剖析

个性化音频要考虑身体机能运转背后的生理和物理因素;每个人都是独二无二的。耳朵离头部的距离、在头部的位置以及耳朵本身的形状和角度都会影响我们的听觉体验。对于Personalized Spatial Audio,Apple使用运行iOS 16系统的iPhone中的3D TrueDepth相机功能来三维扫描用户的头部。

iPhone进行三次扫描:头部左侧、头部右侧和正面脸部(不是一些人所说的内耳道)。生成专属于个人的配置文件并存储起来,以备播放引擎使用。人们担心这些配置数据文件会被获取并用于先进的面部识别系统。Apple表示,这些文件在设备上是安全且加密的,不会用于监控和先进的面部识别应用。

TrueDepth扫描参数创建一个声学模型,音频渲染引擎使用该模型来优化用户耳朵接收的实时音频流。

但是等等,好像还不止于此。

对于人类而言,当播放的声音进入内耳时,内耳会产生共鸣,并用自己的声音做出回应。这些声音来自耳朵里的耳蜗,可被检测和测量。这些交感声音被称为耳声发射(OAE),在听众更敏感的频率上,声音明显更大。许多耳机制造商在耳塞内安装了灵敏的麦克风来检测耳声发射。频率扫描让Spatial Audio系统可以剖析用户每只耳朵的听力频率响应图。

该系统利用每只耳朵的频率特征来量身调整音频,通过补偿用户不太敏感的频率来使用全频谱。由此产生的动态调整均衡器利用耳塞发射器的特定角度来优化不同频率下的音频和频谱功率,呈现完整的音频流频率。

02

声球

空间音频感觉有点像环绕头部的声音泡泡。音轨呈现出一种新的特色,不是仅仅出现在左边、右边、前方中间和后方中间,因为它们是来自定向扬声器的环绕声。相反,声音发射源好像是环绕在头部,当您把头靠近这些声源的“音频线”(类似于视线)时,声音会变得更响、更亮。为了实现这一点,音轨必须是包含所有声球声源及其相对水平和距离数据的编码音轨。

03

空间音频的使用

空间音频处理可用于戏剧音频、电影音频、游戏音频以及健康和健身应用。可以说,目前非常流行的应用是游戏—尤其是虚拟现实(VR)游戏。

VR头显采用先进且高效的头部跟踪,以确保音频和视频同步。如果没有快速准确的头部跟踪,VR会让人很快感到恶心想吐;例如,当您转头时,若场景没有实时跟踪,大脑就会遇到问题。

因此,VR头显会锚定空间音频引擎,所以当头部转动时,来自该方向的主要声音来源就会发出超大的声音。其他声音也会随着头部的位置和转动速度而改变位置。

但家庭影院空间音频系统无法执行这类锚定。例如,如果您坐在沙发上看电影,只要观看中央屏幕,空间音频就可能会提供一个合理的近似环绕声。但是当您转头时,系统就很难让侧边的声音更加突出。机器视觉摄像头和人工智能可能会帮助系统识别您的转头,但这项技术目前还不成熟。

一些听戴式设备中使用的加速度计和陀螺仪可以执行头部跟踪,但这并不是完美解决方案。因此,这种相对头部跟踪技术远不如绝对头部跟踪技术那样又快又准。

不论哪种情况,其中包括游戏,都需要快速的响应时间和低延迟,这样当听众移动头部时,其音频线就做出正前方出现较高音频源而两侧出现静音或较低音频源的响应。

家庭和剧院使用的可能解决方案就是让每个人都戴上沉浸式VR头显(图1)。这个方案只有在音频引擎能够同时为每个人提供量身定制的音频流时才可行。但这是一个更加昂贵的解决方案,而且大大削弱了看电影的社交体验。

04

其他问题、顾虑、技术和用途

尽管空间音频是一种纯粹的数字技术,但使用耳塞时也会遇到问题。音频发射器较小会限制低音响应。这就是低音功放为何要使用更显眼的扬声器、低音炮和大型重低音喇叭的原因。

低音依赖于大量的空气运动,因而较小的发射器不如较大的声波发射器。相控阵已经展示了让较小发射器保持适当间距来增强频谱中低频的功率,从而再现低音的能力,但用耳塞很难实现这一点。

较大的耳机通常使用能提供更好低音响应的较大音频发射器。但耳机需要不同的音频处理来再现频谱,尤其是环绕声效果。耳机使用360度头部相关传输函数(HRTF)滤波器。这些滤波器调节声音的播放方式,所以耳朵反弹使它看起来在不同的位置和水平上感知到声音。

无论如何,360度音频技术在游戏、剧院、健康与保健之外都有许多潜在的应用和用途。白色噪音和粉色噪音机器已经在帮助人们入睡、放松和减压。未来的应用可能在空间音频中增加生物识别传感器,以记录哪些频率和模式有助于个人放松、降低血压和入睡。跟踪阿尔法脑电波可以关闭这个反馈回路,从而增强放松状态。

这项技术还可以作为一种听力辅助设备来帮助失聪或有听觉障碍的人,尽管目前这还是一项没有得到证实的用途。音乐家可以使用空间音频来获得理想的入耳混音效果。舞台音量和场地混音总是不同。音响师可以调节场地混音,但空间音频可以帮助表演者在舞台上听得更清楚。

目前,人们对空间音频的评价褒贬不一;有些人喜欢,有些人不喜欢。这是一项每个人都必须自己尝试后才能做出决定的技术。毕竟,许多用户对众多环绕声系统昂贵的价格和复杂的设置并不满意,更何况背景音有时会压过对话音。

05

空间音频的使用

空间音频技术通过分析人体结构和生理特性,利用独特的音频配置文件,并结合先进的音频渲染技术,提供更加个性化和身临其境的聆听体验。这项技术的应用范围涵盖游戏、剧院、健康、健身等领域,其未来的影响可能会彻底改变我们体验音频的方式。

审核编辑:彭菁

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 立体声
    +关注

    关注

    1

    文章

    178

    浏览量

    35454
  • 机器视觉
    +关注

    关注

    161

    文章

    4149

    浏览量

    118966
  • 音频技术
    +关注

    关注

    1

    文章

    135

    浏览量

    24577
  • 频谱
    +关注

    关注

    7

    文章

    862

    浏览量

    45283

原文标题:音频技术的卷王模式

文章出处:【微信号:贸泽电子,微信公众号:贸泽电子】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    苹果公司任命音频业务新主管,应对AirPods销量增长

    苹果的音频团队有着大约三百人的庞大规模,是AirPods、音箱等产品的核心研发力量。他们致力于研究声学和麦克风技术,同时也擅长打造诸如空间音频这样的软件
    的头像 发表于 02-21 16:55 678次阅读

    高通 S7 和S7 Pro 音频芯片

    第一代高通S7和S7 Pro音频平台经过全面重新设计的架构,拥有听力损失补偿、自适应主动降噪(ANC)、透传和噪声管理专用内核,支持Snapdragon Sound骁龙畅听技术等诸多创新音频
    发表于 01-23 19:06 0次下载

    工程振弦采集仪监测技术的发展现状与展望

    工程振弦采集仪监测技术的发展现状与展望 工程振弦采集仪监测技术是指利用振弦采集仪对工程结构进行振动检测和监测的技术。随着工程结构的复杂化和要求的提高,工程振弦采集仪监测
    的头像 发表于 01-22 14:44 150次阅读
    工程振弦采集仪监测<b class='flag-5'>技术</b>的发展<b class='flag-5'>现状</b>与展望

    空间光调制器的原理 空间光调制器的作用

    信息处理等领域有重要的应用。 空间光调制器的工作原理基于光的幅度、相位的空域分布特性。当光通过空间光调制器时,其幅度和相位会由光在空间上的分布结构所决定,通过调节
    的头像 发表于 12-20 13:45 1323次阅读

    数字视音频技术的基本概念

    技术的应用范围广泛,涵盖了广播电视、影视制作、多媒体通信、远程教育等多个领域。本文将详细介绍数字视音频技术的基本概念、技术原理和应用现状等方
    的头像 发表于 12-14 15:00 946次阅读

    WT2605C-A001音频蓝牙语音芯片:小巧体积,高品质音频播放的创新

    在现今的科技繁荣时代,音频技术作为人类感知世界的重要方式,已经变得越来越重要。唯创知音WT2605C-A001音频蓝牙语音芯片,以其卓越的特性和创新性,正在为
    的头像 发表于 11-24 10:26 280次阅读

    光束偏转技术研究现状及趋势分析

    本文系统总结了机械式和非机械式六类光束偏转技术的国内外研究进展,根据不同技术的偏转特性,从关键指标方面比较分析了各类光束偏转技术的特点,并从空间
    的头像 发表于 11-14 09:40 604次阅读
    光束偏转<b class='flag-5'>技术</b>研究<b class='flag-5'>现状</b>及趋势分析

    AMBEO双声道空间音频实时渲染器插件将于2023年底发布

    摄影师:Jason Charters,发布于:Unsplash AMBEO双声道空间音频实时渲染器插件将于2023年底发布 AMBEO双声道空间音频实时渲染器将以插件形式于2023年第
    的头像 发表于 11-03 15:23 343次阅读
    AMBEO双声道<b class='flag-5'>空间</b><b class='flag-5'>音频</b>实时渲染器插件将于2023年底发布

    高通发布《音频产品使用现状调研报告2023》

    随着全新计算和连接技术的进步,人们对音频产品的理解和使用方式正不断变化,而真无线耳塞和头戴式耳机在人们的工作、通勤、游戏和运动等日常活动中也扮演着越发重要角色,极致的音频体验已成为卓越移动
    的头像 发表于 10-18 15:55 434次阅读
    高通发布《<b class='flag-5'>音频</b>产品使用<b class='flag-5'>现状</b>调研报告2023》

    数字音频技术资料分享

    音频技术的应用有很多,但通常的目标是在以后的时间、在另一个地方或两者兼而有之地再现声音。消费者需要价格合理的设备来复制录音或接收传输,而唱片公司或广播公司需要能够操纵音频信号来制作录音或节目的设备
    发表于 09-20 07:23

    AMBEO 双声道空间音频现已迈进直播制作领域

    AMBEO 双声道空间音频现已迈进直播制作领域 为所有观众解锁更加身临其境的听觉体验 森海塞尔将功能强大的 AMBEO 双声道空间音频技术
    的头像 发表于 08-31 09:23 483次阅读
    AMBEO 双声道<b class='flag-5'>空间</b><b class='flag-5'>音频</b>现已迈进直播制作领域

    实现ECU节省空间特点,兼顾小型化与高特性

    实现ECU节省空间特点,兼顾小型化与高特性
    的头像 发表于 08-15 14:35 458次阅读
    实现ECU节省<b class='flag-5'>空间</b>特点,兼顾小型化与高<b class='flag-5'>特性</b>

    如何提升沉浸感?如何提升空间音频体验?头部跟踪功能RealSpace解决方案

    如果没有头部跟踪,由于大脑无法解决这种关键的含糊不清问题,这种沉浸感可能会被破坏。 我们将引入空间音频的概念。简而言之,这是一个宽泛的总括性术语,用于描述各种音频播放技术,利用这些
    的头像 发表于 08-01 11:30 2451次阅读
    如何提升沉浸感?如何提升<b class='flag-5'>空间</b><b class='flag-5'>音频</b>体验?头部跟踪功能RealSpace解决方案

    高通无线蓝牙空间音频解决方案

    等不同类型不同格式的音频内容解码。耳机端芯片能够动态追踪头部运动,将获取的运动信息传递至手机,进而对内容空间化和渲染。配合上高通 aptX传输技术,能以极低时延回传至耳
    发表于 07-04 18:15 7次下载

    高通最新蓝牙芯片及Le Audio音频技术应用2023年

    自2020年,蓝牙技术联盟(SIG)发布了下一代低功耗蓝牙音频标准——LE Audio后,蓝牙技术可以说是革命性蓝牙技术拓展,构建全新的音频
    发表于 07-04 17:29 9次下载