0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

打造沉浸式体验,AR/VR设备需要怎样的声学系统

Monika观察 来源:电子发烧友 作者:莫婷婷 2023-01-16 00:00 次阅读
电子发烧友网报道(文/莫婷婷)随着硬件迭代、性能提升,以及市场需求的增长,AR/VR市场获得了更高的关注度,包括主控芯片、显示系统、声学系统在内的产业链各个环节都在推出相应的新品。其中,声学元器件是AR/VR设备中的重要元器件。
以VR设备为例,在基本结构中,成本占比前三的元器件分别是显示屏幕、存储、芯片处理器,占比依次是34%、27%、16%,光学模组和声学模组分别占据6%的成本。在声学模组方面,为AR/VR设备提供声学器件的厂商有楼氏电子、歌尔股份、瑞声科技等,另外,共达电声也在投资者互动平台表示公司已有麦克风、喇叭等产品可应用于VR领域。
视觉之外,听觉是AR/VR感知体验的另一个重要感知。那么,AR/VR到底需要怎么样的音频系统,麦克风等声学器件与降噪算法等音频技术之间可以怎么配合?
由于AR与VR应用场景、产品形态都有较大的不同,因此将两者分开来看。瑞声科技系统架构高级总监李建国提到,AR产品需要的是ID友好、轻薄,非入耳式佩戴,但是又要有私密性,音频体验要求有立体声效、响度适中。VR产品对音频系统的需求主要有四点,一是空间声场,沉浸感要强,二是声场饱满,性能优越;三是无声泄露,私密性好;四是小巧便捷,穿戴方便。
识音方案是提升AR/VR设备听觉体验的另一要素。在这方面,MEMS麦克风支撑语音交互功能的核心器件,为AR/VR设备提供定向人声拾取、低功耗语音的识别等功能。对于全向麦克风来说,麦克风阵列加语音算法是实现定向拾音的关键。但空间与性能之间的平衡是多麦克风阵列要实现轻便AI 设计的双重挑战。
为此,瑞声科技推出了小尺寸数字麦克风以及模拟麦克风。其中,数字麦克风的尺寸为2. 75* 1. 85*0.9mm,信噪比可以高达66dB,模拟麦克风的信噪比达到了67. 5 dB。“在这么小尺寸的产品封装空间内,要达到这么高的信噪比是具备挑战的。但是我们的小尺寸麦克风可以完全满足 AR 设备对语音品质以及整机堆叠对空间的极致要求。”李建国表示。
值得一提的是,瑞声科技还推出指向性麦克风和智能麦克风。迄今为止,消费类设备不得不采用多个全向麦克风阵列,并且这些麦克风很难将需要的语音与不需要的背景噪声隔离,采用麦克风阵列代价需要更大的空间能耗以及设计的复杂性。基于上述难点,瑞声科技推出的指向性麦克风,采用了 8 字形的拾音模式,相较于全向麦克风,可以在硬件层面消除更多不必要的噪声,高保真的隔离用户声音。指向性麦克风的推出让麦克风可应用于语音翻译、听障人士语音转换文字等语音指向性要求更高的场景。目前,亮亮视野等多家硬件厂商推出的AR眼镜明确可以面向听障人士。
据了解,瑞声科技从声临其境、HiFi音质以及隐私保护三大方面打造AR/VR声学系统。其中针对身临其境的头戴设备音频体验,瑞声科技研发了空间音频算法,在保证原本音频特性的同时,扩大了声场的范围,将常见立体声更变成具有空间感、沉浸式的立体音频;该算法提供低延时360°头部追踪,通过追踪佩戴者的头部位置声场,作出相应的变化。
为了达到HiFi音质,瑞声科技的大师级同轴1216扬声器,配合自研的 NLC算法等算法增强技术提升音效。此外,瑞声科技还通过隐私声场技术减少漏音。李建国表示,为了提升音频体验的私密性和沉浸体验,瑞声科技推出了超微型扬声器,尺寸仅为8*20*3mm,可以把 AR眼镜的镜腿做到宽11mm,厚度 8mm米,接近普通眼镜,这将助推AR/VR设备的小型化发展趋势。
尽管当下AR/VR市场的增速没有预期的快,并且出现下滑,但IDC预计到2026年中国AR/VR市场规模将超130亿美元,整体市场趋势向好。如今,AR/VR产业正处于市场增长的关键期,就在近期,业内流出苹果AR/VR设备的新设计和功能等细节展示,预期在苹果推出AR/VR设备后,能将加速整体市场的发展。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • Ar
    Ar
    +关注

    关注

    24

    文章

    5075

    浏览量

    169152
  • 声学
    +关注

    关注

    1

    文章

    50

    浏览量

    13655
  • vr
    vr
    +关注

    关注

    34

    文章

    9629

    浏览量

    149957
  • XR
    XR
    +关注

    关注

    0

    文章

    384

    浏览量

    9084
收藏 人收藏

    评论

    相关推荐

    安宝特分享 | AR技术重塑工业:数字孪生与沉浸培训的创新应用

    AR在工业领域的创新应用,不断推动着数字孪生和沉浸体验的发展。通过实时数据的可视化、沉浸培训和远程协作支持,
    的头像 发表于 09-30 13:48 865次阅读
    安宝特分享 | <b class='flag-5'>AR</b>技术重塑工业:数字孪生与<b class='flag-5'>沉浸</b><b class='flag-5'>式</b>培训的创新应用

    AR学系统视觉相关重要参数

    AR(增强现实)技术是下一代前沿视觉显示技术。完美的AR显示需要光、机、电、声的无缝配合以呈现一场科技盛宴。光学无疑是显示技术中的核心,本文将从光学角度切入探索AR世界。
    的头像 发表于 08-26 10:17 533次阅读
    <b class='flag-5'>AR</b>光<b class='flag-5'>学系统</b>视觉相关重要参数

    XR与ARVR的区别是什么

    XR(Extended Reality,扩展现实)是一种将现实世界与虚拟世界相结合的技术,它包括了AR(Augmented Reality,增强现实)和VR(Virtual Reality,虚拟现实
    的头像 发表于 07-08 09:43 3980次阅读

    室内设计MR混合现实情景实训教学系统开发

    定制开发需求。 首先,**[MR混合现实情景实训教学系统]**能够创建出一种沉浸的环境,使学生能够直接接触到各种室内设计的实际场景。学生可以通过MR系统中的虚拟模型进行操作,比如改变
    的头像 发表于 05-13 15:00 373次阅读

    教育互动体验馆中的讯维大屏显示系统打造沉浸学习体验的新高地

    在教育领域,如何创新教学方式,提高学生的学习兴趣和效果,一直是教育工作者追求的目标。而讯维大屏显示系统在教育互动体验馆中的应用,为打造沉浸学习体验提供了新的解决方案。 在教育互动体验
    的头像 发表于 02-28 14:39 495次阅读
    教育互动体验馆中的讯维大屏显示<b class='flag-5'>系统</b><b class='flag-5'>打造</b><b class='flag-5'>沉浸</b><b class='flag-5'>式</b>学习体验的新高地

    大屏拼接器应用案例分享:打造沉浸展览体验

    在数字化和多媒体日益融合的时代,大屏拼接器以其独特的魅力和功能,为展览行业带来了革命性的变革。下面,我们将通过几个具体的应用案例来探讨大屏拼接器如何为展览体验增添沉浸的魅力。 案例一:艺术展览 在
    的头像 发表于 02-26 15:18 447次阅读

    鸿蒙应用/元服务开发-窗口(Stage模型)体验窗口沉浸能力

    一、体验窗口沉浸能力说明 在看视频、玩游戏等场景下,用户往往希望隐藏状态栏、导航栏等不必要的系统窗口,从而获得更佳的沉浸体验。此时可以借
    发表于 02-06 15:08

    石油化工MR混合现实情景实训教学系统开发

    的可能。 如有虚拟仿真教学软件定制开发需求,lianxi我们020电3892联1121。 MR混合现实情景实训教学系统将虚拟现实(VR)与增强现实(AR)技术相结合,为石油化工教学提供了全新的视角。学生可以在虚拟环境中进行各种操
    的头像 发表于 01-31 09:46 388次阅读

    学系统设计过程

    任何一种光学仪器的用途和使用条件必然会对它的光学系统提出一定的要求,因此,在我们进行光学设计之前一定要了解对光学系统的要求。
    的头像 发表于 01-23 13:46 464次阅读

    arvr的区别与联系 arvr哪个更高级

    存在着明显的差异。本文将对ARVR的区别和联系介绍。 首先,我们需要了解ARVR的定义和基本原理。A
    的头像 发表于 01-19 10:48 5650次阅读

    PC VR与一体机VR设备:硬件和使用方式的比较

    PC VR与一体机VR设备:硬件和使用方式的比较 PC VR 和一体机VR是当前市场上主要的两种虚拟现实
    的头像 发表于 01-09 14:20 3270次阅读

    AR/VR声光触应用趋势和全栈解决方案

    在视觉方面,瑞声科技的显示光学技术帮助AR/VR设备实现更轻更薄的体积,并且带来视野更宽广、画质更清晰的体验,其开发的相机模组为环境感知、自我识别、深度识别提供技术支持。
    发表于 12-12 14:02 585次阅读

    4R技术(ARVR、MR、XR)傻傻分不清,看完这篇你就懂了!

    它们的区别:   1.虚拟现实技术(VR) 虚拟现实技术VR(Virtual Reality)是通过电脑生成的模拟环境,用户用头戴显示器(如VR头盔)来观察虚拟世界,并通过手柄、手套
    的头像 发表于 12-04 09:04 1587次阅读
    4R技术(<b class='flag-5'>AR</b>、<b class='flag-5'>VR</b>、MR、XR)傻傻分不清,看完这篇你就懂了!

    中兴通讯发布5G VR大空间沉浸剧场解决方案

    的是5G-A技术和ZTE XRExplore的云渲染技术算网一体部署,将大空间VR沉浸剧场云化,一个手机大小的5G终端和VR头盔就可以解决低时延、高并发、不易受干扰等要求。
    的头像 发表于 11-28 18:32 2049次阅读

    使用 OpenUSD 和数字孪生打造沉浸活动

    Moment Factory 是一家全球多媒体娱乐工作室。该工作室结合视频、灯光、建筑、音响、软件和交互等领域的专业技术,为世界各地的观众打造沉浸体验。从现场表演、多媒体秀到互动装置,Moment
    的头像 发表于 11-09 10:45 353次阅读
    使用 OpenUSD 和数字孪生<b class='flag-5'>打造</b><b class='flag-5'>沉浸</b><b class='flag-5'>式</b>活动