0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

声加科技助力小米首款支持本地命令词语音唤醒TWS耳机上市

测试测试测试 来源:北国网 2019-09-26 15:00 次阅读

9 月 24 日,小米新一代真无线蓝牙耳机 Air 2正式亮相,在外形和功能上都较一代有了非常大的变化。小米官方海报广告词宣称“智能真无线,轻松舒适戴”,并且将“智能语音唤醒,双麦克风降噪”作为其首条宣传卖点。目前该产品已在小米商城开放预约,9月27日正式上市。

小米Air2宣传海报,图片来源于小米官网

Air2的语音唤醒到底有多智能呢?据本次算法技术支持方案商——声加科技CEO邱锋海介绍,此次小米Air2采用了声加科技提供的耳机本地语音识别方案,与市面同类产品最大的不同是能直接在Air2耳机端完成多命令词语音识别,急速响应命令——用户在播放音乐时无需唤醒语音助手“小爱同学”,可直接向耳机发出语音指令“上一首/上一曲”,“下一首/下一曲”,迅速实现自由切歌,无需再等待语音助手唤醒手机进行响应,大大提高了用户使用体验。

小米Air2宣传海报,图片来源于小米官网

邱锋海表示,耳机搭载语音助手已经成为目前TWS耳机的主流趋势,但目前市面上绝大部分产品使用的还是以基于手机的语音识别方案,用户每一次的语音指令都要首先唤醒手机语音助手,造成响应速度较慢(切换歌曲需要等待5~6秒),不少用户因此放弃了语音唤醒功能,宁可使用手势或按键,甚至只能拿出手机进行操作,体验欠佳。其原因主要受限于耳机运算能力较弱以及电池续航时间短,给耳机端进行精确的语音识别造成了极高难度。而声加科技的小资源关键词唤醒(KWS)有限语音命令方案攻克了技术难点,可实现唤醒低功耗计算方案,KWS启动和手机语音交互,有限语音命令实现切歌、调音量等基本操作。在算法所需资源消耗上,低至30Mips, 50KBytes memory的唤醒词模型(m4f平台),模型规模可变,能根据产品计算资源快速调整模型,还能整合声加自有前端语音增强,优化整体性能。

除此之外,耳机使用场景复杂且运算资源受限,如果只依靠基于深度学习的小资源语音识别模型,在嘈杂环境下会存在误识率高、识别率低的问题。而Air2同时还搭载了声加科技的双麦SVE降噪技术,如定向拾音、环境降噪(尤其是风噪抑制)等,能有效降低通话时的环境噪声,即使身处嘈杂环境,也能保障高清晰的语音识别以及通话质量。

对小米Air2直接说“下一首”,迅速切换歌曲

据了解,声加科技成立于2018年1月,专注于通信声学核心技术,依托于中科院声学所雄厚的人才和科研资源,打造产学研一体化。其SVE(Soundplus Voice Enhancement)降噪技术可以广泛应用于耳塞式耳机、半入耳式耳机、入耳式耳机、头戴式耳机、挂耳式耳机等,是通过双麦克风阵列,精准计算通话者说话的方位,在保护主方向目标语音的同时,去除环境中的各种干扰噪声,例如其他人的讲话声、交通工具产生的噪音、风噪声等等,有效抑制90%的反向环境噪声,由此降低环境噪声最高可达30dB,保证高品质通话效果。让使用者无论身处何种嘈杂环境,都可细语轻聊,无惧干扰。其核心技术包括:

回声消除AEC:

支持单通道回声抵消、双通道立体声回声抵消,可在设备自身播放大音量时轻松唤醒,ERLE》30dB。

声源定位Direction of arrival estimation:

支持多源定位;可在强混响及噪声干扰情况下准确定位目标声源;工作信噪比可低至0db以下;DOA分辨率《10°。

波束形成Beamforming:

保护目标语音的同时,去除噪声干扰与散射噪声,大幅提高语音识别率;稳态噪声抑量》30dB,非平稳噪声印制量》24dB。

关键词唤醒、有限语音命令词识别Key word spotting、command

基于深度神经网络训练,根据前端算法进行深度优化,精确辨识关键词,超低误唤醒。消耗资源配置灵活(小模型超低资源占用;资源丰富时可实现高性能识别),可应用于耳机、手环、手表等可穿戴智能设备。5米唤醒率》93%,3米唤醒率》97%,误唤醒《2次/48H。

基于机器学习降噪/识别

已成功用于声学建模,与标准GMM模型相比语音识别率实现了大幅改进,DNN是全连接神经网络,解决了局部最优解的问题;卷积神经网络CNN降低模型体积,充分利用语谱中的局部信息;循环神经网络RNN可以对时间序列进行建模,适合处理语音信号。对动态/稳态噪声均有效(~30dB)同时保护语音成分,表现鲁棒。

音效:

EQ均衡:通过对各种不同频率的电信号的调节来补偿扬声器和声场的缺陷,补偿和修饰各种声源及其它特殊作用。

虚拟环绕声:在双声道立体声的基础上,不增加声道和音箱,把声场信号通过电路处理后播出,使聆听者感到声音来自多个方位。

SVE开启前后对比(公路噪声):

此外,作为智能听觉的创新公司,声加科技的耳机技术方案还应用在了华为Flypods、小米Air、小米Air2、万魔EM001、万魔EM004、京东京鱼座等产品上。目前,其团队凭借十余年的技术积累,可为B端客户提供复杂场景下的近场、中场、远场语音交互技术方案,以及从芯片、模组、PCBA到工业设计的一站式产品方案。其回声抵消、噪声抑制、声源定位、混响消除、波束形成、语音唤醒等性能在行业内均名列前位。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 小米
    +关注

    关注

    70

    文章

    14349

    浏览量

    144092
收藏 人收藏

    评论

    相关推荐

    TAS5719插入耳机时会有一pop noise,怎么解决?

    问题描述:上电5秒后,插入耳机时,往Tas5719的0x05寄存器写入0x13,切换到耳机模式,耳机上可以听到正常的音乐,但耳机出声音前会听到一
    发表于 10-24 08:06

    HLK-V20支持用户修改唤醒词和命令词 海凌科语音定制后台系统上线

    HLK-V20离线语音模块首发即爆,在抖音上V20的单个视频播放量过100万。关于这款产品用户咨询量最多的便是语音命令词和唤醒词的自定义问
    的头像 发表于 07-28 08:38 642次阅读
    HLK-V20<b class='flag-5'>支持</b>用户修改<b class='flag-5'>唤醒</b>词和<b class='flag-5'>命令</b>词 海凌科<b class='flag-5'>语音</b>定制后台系统上线

    请问ESP32-EYE开发板例程支持修改语音唤醒命令吗?

    请问ESP32-EYE 开发板例程支持修改语音唤醒命令吗?该如何修改?
    发表于 06-28 16:23

    隆重呈现!拜雅开放式耳机VERIO 200正式发布

    VERIO 200开放式真无线耳机可直接使用耳机上的触摸传感器进行操作。接听电话、调整音量或启动语音助手,一触即达。beyerdynamic配合VERIO 200同时发布了一新开发的
    的头像 发表于 06-25 20:58 472次阅读
    隆重呈现!拜雅<b class='flag-5'>首</b><b class='flag-5'>款</b>开放式<b class='flag-5'>耳机</b>VERIO 200正式发布

    接近传感芯片可延长TWS真无线立体耳塞的播放时间

    TWS耳塞的基本工作原理是移动装置连接主耳机,再由主耳机通过蓝牙无线方式连接副耳机组成立体声系统,实现真正的蓝牙左右声道无线分离使用。
    的头像 发表于 05-31 09:19 624次阅读
    接近传感芯片可延长<b class='flag-5'>TWS</b>真无线立体<b class='flag-5'>声</b>耳塞的播放时间

    TWS 蓝牙耳机 ESD EOS保护方案

    TWS 蓝牙耳机 ESD EOS保护方案
    的头像 发表于 05-17 08:02 704次阅读
    <b class='flag-5'>TWS</b> 蓝牙<b class='flag-5'>耳机</b> ESD EOS保护方案

    飞利浦影音推出首AI会议降噪耳机飞利浦“8号”

    飞利浦影音近日重磅推出其AI会议降噪耳机——“8号”。这款产品的诞生,是飞利浦影音与小鹿文App深入合作的结晶,同时得到了“腾讯混元”语言大模型提供的强大AI技术
    的头像 发表于 05-13 11:29 870次阅读

    TWS 蓝牙耳机 ESD EOS保护方案

      1. TWS 蓝牙耳机 TWS(True Wireless Stereo)蓝牙耳机是指没有传统连接线的完全无线耳机,通常由两个分别放置在
    的头像 发表于 05-04 21:19 635次阅读
    <b class='flag-5'>TWS</b> 蓝牙<b class='flag-5'>耳机</b> ESD EOS保护方案

    2024年小米汽车产业链分析及新品上市全景洞察报告

    2024年小米汽车产业链分析及新品上市全景洞察报告 *附件:小米汽车全面洞察报告.pdf 本文主要介绍了小米汽车在市场中的布局和优势,以及其面临的劣势与挑战。
    发表于 03-29 13:46

    应用在TWS真无线耳机领域中的数字红外接近检测模块

    TWS是True Wireless Stereo(真无线立体)的缩写,该技术是基于蓝牙芯片的发展而出现。TWS耳机是将TWS技术应用于蓝牙
    的头像 发表于 03-27 09:21 638次阅读
    应用在<b class='flag-5'>TWS</b>真无线<b class='flag-5'>耳机</b>领域中的数字红外接近检测模块

    云知再次冲刺港交所上市

    备受瞩目的“AI语音第一股”云知智能科技股份有限公司(简称“云知”)更新了其招股书,并继续稳步推进在港交所主板的上市进程。此前,云知
    的头像 发表于 03-19 14:59 905次阅读

    iQOO发布全新TWS 2真无线耳机

    近日,科技巨头iQOO推出了一备受瞩目的新品——iQOO TWS 2真无线耳机。这款耳机基于第二代高通S3音频平台打造,并首次在国内市场应用了Snapdragon Sound 骁龙畅
    的头像 发表于 03-06 10:38 1105次阅读

    iQOO发布iQOO TWS 2真无线耳机支持Snapdragon Sound骁龙畅听技术

    近日,iQOO发布iQOO TWS 2真无线耳机,全新产品基于第二代高通®S3音频平台打造,支持Snapdragon Sound 骁龙畅听技术,助力iQOO
    的头像 发表于 03-05 15:52 977次阅读

    森海塞尔发布 Momentum Sport TWS 运动耳机支持实时心率与体温

    据官方信息透露,Momentum Sport TWS耳机采用半开放式设计,具备“通透模式”、“自适应降噪模式”和“风噪抑制模式”。支持AptX Adaptive、AAC、SBC等多种音频编码协议。此外,
    的头像 发表于 01-09 10:11 830次阅读

    探索TWS蓝牙耳机的技术奥秘

    解决TWS耳机传输及音质问题的关键在于蓝牙技术与音频编解码技术发展,这些通常集成在TWS耳机的主控蓝牙芯片SoC内,因而蓝牙SOC芯片对TWS
    的头像 发表于 01-08 14:45 4039次阅读