0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

开放式音频系统引入AI大模型,蓝牙音频SOC迈向高端化

Monika观察 来源:电子发烧友 作者:莫婷婷 2024-07-16 09:09 次阅读

电子发烧友网报道(文/莫婷婷)随着技术的迭代以及市场需求的兴起,智能眼镜作为一种新型智能穿戴设备,可以通过独立的操作系统,安装各种应用程序,并通过语音、手势,或者与智能手表、智能手机的联动,实现多种功能,如今正逐渐成为市场的焦点。

不过智能眼镜设备不能忽视的挑战是其开放式音频系统,音频作为智能眼镜最基础的功能,在完成多种交互体验之外,如何实现更好的音频体验,也是需要不断突破的技术难题。


AI技术加持,推进蓝牙音频SOC的高端化

OWS耳机、智能音频眼镜等产品,对开放式的音频系统提出了更高的要求。面对开放式的音频系统,主控芯片的技术瓶颈、难点是在哪里?

物奇微蓝牙产品线销售负责人陈武清在接受电子发烧友网采访时表示,开放式的音频系统有着三大挑战,一是低频泄露问题,二是大回声结构下的通话效果和运动风噪场景下的通话质量问题,三是轻巧舒适结构状态小尺寸的设计对电池的要求的低功耗。

为了符合人体工学的设计,大多数OWS耳机都采用U型声学腔体结构,内部搭载了发声单元,例如SoundPEATS 的GoFree2,以及beyerdynamic拜雅的VERIO 200都搭载了超大16.2mm动圈单元。较大的动圈单元在低频响应和声压级上有更好的表现,但依旧解决不了低频泄露、通话效果、降风噪等方面的挑战。

陈武清提到,开放式耳机的通话大回声结构存在mic-spk间距短,声隔离弱、信回比低的问题,相对入耳式,有效回波损耗 (ERL) 小近20dB、通话回声双讲效果差。

同样有着开放式音频系统的智能眼镜,在音频系统存在的挑战不比OWS耳机小。一般而言,OWS耳机会通过不同的人体工学结构设计,让前出声孔靠近耳道,改善开放式音频系统的音量、低音体验等问题,这些不同的人体工学设计虽然治标不治本,但都能够在一定程度上提升音频体验。而智能眼镜的音频系统在镜腿的位置,难以通过上述方式进行改善。

随着技术的发展,AI已经成为提升开放式音频系统音频体验的关键技术之一。据了解,物奇的多模态AI能力已经落地多个领域,其中边缘计算AI处理技术已经引入蓝牙音频SOC中。

为了提升开放式音频系统的通话质量,物奇基于先进的循环神经网络和卷积神经网络,经过40G的大量数据训练大模型,加上LMS+KLM双滤波结构,线性回声抑制能力达30dB,非线性残余回声引入AI处理。在降风噪等方面,通过多麦技术、神经网络算法的加持,通过大量风噪数据训练AI模型,达到了风噪残留少、语音稳定,损伤小,可辨度高的效果。

相较以往只是在算法上做处理,加入边缘计算AI处理技术能够实现更清晰的通话质量,在很大程度上提升了开放式音频系统的音频体验。

在功耗方面,智能眼镜的蓝牙芯片、传感器、麦克风等元器件基本放在镜腿的位置,受限于空间的限制,一般只能采用容量较小的电池,因此续航性能较差,此时需要蓝牙芯片也要有强大的低功耗性能。

物奇的蓝牙芯片在提升续航方面带来创新和突破。率先采用RISC-V + DSP的设计架构,以及多模块化处理的软件SDK。以OWS的应用为例,物奇可以在芯片级功耗只有3.xmA的情况下,增加了针对OWS形态必须增加的低频补偿/虚拟低音/动态EQ和多MIC AI的ENC等算法,让功耗维持在4.xmA的低功耗水平,“在45mAh的电池容量下,听音乐可以使用10小时”。

在芯片厂商的技术迭代下,AI技术在音频处理上的应用取得了新的进展,AI技术引入蓝牙音频SOC,成为蓝牙音频SOC走向高端的象征之一,由此也将推动音频市场的创新和进步。


音频眼镜将在音频设备市场上逐渐起量

今年一季度,全球个人智能音频设备市场迎来6%的同比增长,出货量超过9000万台。在TWS耳机、无线颈挂式、无线头戴式三大类产品中,TWS耳机品类已经出现增长乏力,笔者认为,接下来OWS耳机、智能音频眼镜将成为智能音频设备市场中增长明显的细分品类。

如果从智能眼镜这个大品类来看,智能音频眼镜这一品类也会首先在市场上起量。陈武清认为在AI/智能音频/AR智能眼镜三大品类中,智能音频眼镜会率先起量,其次是AI眼镜,最终朝着包含音频/视频/内容为一体的AR智能眼镜方向演进。

“智能音频眼镜会先开始起量,在当前技术背景下优先解决轻巧和轻度语音处理的问题,其次通过技术的演进延伸到可以具备AI语音处理能力的AI眼镜,再继续演进到包含音视频及内容为一体的AR智能眼镜,需要解决痛点非常多。”

陈武清表示,对于芯片而言,主芯片平台需要高集成度以及丰富的外设接口和AI处理能力,在各种各样的语音/视频处理算法的加持下,维持高算力下的低功耗要求。

从长期的演进来看,信息/数据经过终端的基础处理后,会到云端做进一步的处理,因此设备在终端的处理会越来越多,同时在云端处理的需求也会增长。随着智能眼镜需要处理的场景越来越多,云端也需要有更强的能力去应对这些处理任务。但在这之前,终端设备的主芯片平台需要更加强大应对更复杂的终端处理任务,芯片厂商也需要持续迭代产品推出更具竞争力的芯片。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 音频
    +关注

    关注

    29

    文章

    2825

    浏览量

    81138
  • 蓝牙
    +关注

    关注

    114

    文章

    5742

    浏览量

    169466
  • soc
    soc
    +关注

    关注

    38

    文章

    4077

    浏览量

    217679
  • AI大模型
    +关注

    关注

    0

    文章

    307

    浏览量

    272
收藏 人收藏

    评论

    相关推荐

    汽车音频系统中的诊断和保护

    电子发烧友网站提供《汽车音频系统中的诊断和保护.pdf》资料免费下载
    发表于 09-26 10:38 0次下载
    汽车<b class='flag-5'>音频系统</b>中的诊断和保护

    合肥汤诚便携蓝牙音箱XA9811D音频功放芯片应用解决方案

    响都能够提供高质量的音乐播放,极大地提升了音频体验。除了蓝牙音响,便携耳机和便携音频播放器也是常见的便携音频设备,它们为用户提供了个性
    的头像 发表于 09-07 11:18 300次阅读
    合肥汤诚便携<b class='flag-5'>式</b><b class='flag-5'>蓝牙音</b>箱XA9811D<b class='flag-5'>音频</b>功放芯片应用解决方案

    达发科技LDAC蓝牙音频芯片出货量破7000万

    联发科旗下的网通芯片与物联网芯片领先企业——达发科技,宣布了一项重要里程碑。自2021年起,通过与全球知名电子巨头索尼集团的深度合作,达发科技成功在其蓝牙音频平台中整合了索尼标志性的LDAC音频编码技术。这一创新举措不仅极大地提升了蓝牙
    的头像 发表于 08-28 15:31 320次阅读

    无线音频系统介绍

    无线音频系统是一种通过无线信号传输音频数据的技术,旨在消除传统有线连接的限制,提供更大的灵活性和便利性。无线音频系统广泛应用于消费电子、专业音频、家庭娱乐和公共广播等领域。
    的头像 发表于 08-09 17:48 1204次阅读
    无线<b class='flag-5'>音频系统</b>介绍

    如何挑选合适的蓝牙音频模块?

    : 1.主从发射器解决方案 我们的模块有:BT951,BT806A,BT806B,BT901,BT802,BT926,BT956B 特征: 一对一的音频发送 音频接收一对一 aptX(BT802,BT806A,BT806B) 应用范围:
    的头像 发表于 06-28 16:19 519次阅读
    如何挑选合适的<b class='flag-5'>蓝牙音频</b>模块?

    使用ESP32做蓝牙音频是否必须外部SRA吗?

    如题,使用ESP32做蓝牙音频是否必须扩展外部SRAM
    发表于 06-28 08:21

    高通QCC3096 蓝牙音频aptX HD方案

    高通QCC3096 蓝牙音频aptX HD方案 设备说明 ·四核处理器架构 “高性能蓝牙立体声音频SoC “低功耗模式可延长电池寿命 应用程序 无线扬声器 有线/无线立体声耳机
    的头像 发表于 06-20 15:58 843次阅读
    高通QCC3096 <b class='flag-5'>蓝牙音频</b>aptX HD方案

    QCC5181蓝牙音频发射LDAC APTX

    应市场需求,公司基于QCC5181芯片模块,开发出作为蓝牙音频发射,支持输入接口AUX、I2S、USB AUDIO,也可以作为USB Dongle,支持Ldac/aptX/aptXHD/aptXAd/aptXLL/Sbc音频格式,支持串口通讯。
    的头像 发表于 05-24 16:54 3230次阅读
    QCC5181<b class='flag-5'>蓝牙音频</b>发射LDAC APTX

    最新蓝牙音频方案选型表

    随着蓝牙技术的不断发展,蓝牙5.2已经到来,LE Audio 是否会对传统经典蓝牙音频垄断地位发起挑战。新的技术如何发展还尚未可知,不过目前的主流
    的头像 发表于 04-12 16:55 726次阅读
    最新<b class='flag-5'>蓝牙音频</b>方案选型表

    炬芯科技赵新中:无线音频SoCAI算法未来和应用

    的平台。 炬芯科技算法研发中心高级总监赵新中受邀出席,于电声元器件及芯片专题论坛发表以《无线音频SoCAI算法未来和应用》为主题的演讲,分享了炬芯科技的音频
    的头像 发表于 04-10 11:13 422次阅读
    炬芯科技赵新中:无线<b class='flag-5'>音频</b><b class='flag-5'>SoC</b>的<b class='flag-5'>AI</b>算法未来和应用

    Bose推出全新Ultra开放式耳机,搭载第二代高通S5音频平台

    全球知名音频品牌Bose近日宣布推出其全新音频可穿戴设备——Bose Ultra开放式耳机。这款耳机采用第二代高通®S5音频平台,并支持Snapdragon Sound骁龙畅听技术,旨
    的头像 发表于 03-11 10:30 982次阅读

    蓝牙与高通探讨2024年蓝牙音频发展预测

    近日,蓝牙技术联盟高级营销项目经理Mindy Dolan采访了高通公司产品营销高级总监Chris Havell。采访中,Chris Havell分享了高通对2024年蓝牙音频发展的预测。
    的头像 发表于 02-26 14:07 950次阅读

    蓝牙midi和蓝牙音频或者蓝牙audio有什么区别呢

    蓝牙midi和蓝牙音频或者蓝牙audio有什么区别呢 首先这里分为三个概念,也就是什么是蓝牙?什么是蓝牙midi?什么是
    的头像 发表于 01-09 15:22 1083次阅读
    <b class='flag-5'>蓝牙</b>midi和<b class='flag-5'>蓝牙音频</b>或者<b class='flag-5'>蓝牙</b>audio有什么区别呢

    芯知识 | 什么是音频蓝牙播放语音芯片?

    随着科技的不断进步,音频蓝牙播放语音芯片成为嵌入音频系统中备受关注的创新解决方案。本文将深入解析什么是音频
    的头像 发表于 12-15 08:36 708次阅读
    芯知识 | 什么是<b class='flag-5'>音频</b><b class='flag-5'>蓝牙</b>播放语音芯片?

    如何降低SigmaDSP音频系统复杂度的情形

    电子发烧友网站提供《如何降低SigmaDSP音频系统复杂度的情形.pdf》资料免费下载
    发表于 11-29 11:13 0次下载
    如何降低SigmaDSP<b class='flag-5'>音频系统</b>复杂度的情形