0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

恩智浦发布新一代智能语音技术组合的语音识别引擎

NXP客栈 来源:NXP客栈 2024-01-26 09:15 次阅读

恩智浦发布新一代智能语音技术组合的语音识别引擎。本文将探讨开发人员在嵌入式语音控制设计中面临的挑战、恩智浦新的Speech to Intent引擎,以及您如何在应用中使用它。

嵌入式系统中语音命令的挑战

随着亚马逊、谷歌和苹果等公司推出了具有革命性意义的智能扬声器,嵌入式语音控制的设备已经成为了当下的热门趋势,而这种技术其实已经存在了很多年。通过这些智能扬声器,终端用户第一次体验到了语音优先设备的便捷性、实用性和直观性。语音是这些设备的用户界面(UI),也是它们最重要或唯一的交互方式。借助云端的自然语言理解技术,智能扬声器可以让语音优先设备的终端用户用自然语言与智能设备进行沟通,无论是请求、查询还是命令,都可以得到理解和响应。

为了实现自然语言处理,设计人员和终端用户需要面对一些挑战,比如要求有稳定、可靠的网络连接,以及要承受始终在线、始终聆听的设备的高耗电,更别提这种联网设备可能带来的隐私风险了。

针对嵌入式设计中的语音引擎难题,恩智浦推出了其智能语音技术(VIT)产品组合的最新产品VIT Speech to Intent (VIT S2I) 引擎,了解该技术详情,点击这里>>

本地语音控制vs.云语音控制

为了让设备具备语音控制功能,工程师通常有三种选择:本地处理、在云端处理或两者的组合,我们称之为“混合处理”。

通过本地语音控制,终端设备在边缘本地处理所有语音,而无需连接到云端或远程服务器进行二次处理。基于云的处理就是利用云端的计算能力来处理语音音频,然后把云端生成的响应通过网络传回设备。在混合处理的情况下,通常会使用本地唤醒词引擎来唤醒设备(如“Hey NXP”),然后将该唤醒词之后的所有语音命令流式传输到云端或远程服务器进行处理。

本地处理具有低延迟、低功耗和独立于网络等优点,但它通常只支持需要精确措辞的基本关键词和命令。例如,开灯可能需要准确的短语“Hey, NXP(唤醒词),开灯(语音命令)”,并且不能有任何变化。

对于云端处理和混合系统,云服务的使用增加了延迟,但提供了能够运行极其复杂的算法的优势,包括自然语言理解模型。重温刚才说的开灯示例,使用任何词语组合,系统都可以理解所要求操作的环境,例如“这里很黑,请开灯”。

如前所述,基于云的自然语言处理的一个主要缺点是安全和隐私问题。简单地说,这种方式的原理是把语音音频流通过网络传送到远程服务器进行处理,但是这也可能导致系统误启动并把无关的音频流传输到云端。这些音频流可能包括个人对话、凭证或其他敏感信息

恩智浦VIT S2I引擎介绍

针对嵌入式设计中的语音引擎难题,恩智浦推出了其智能语音技术(VIT)产品组合的最新产品VIT Speech to Intent引擎。S2I引擎是VIT产品组合的高端产品,其中还包括免费的唤醒词引擎 (WWE) 和语音命令引擎 (VCE)。

与依赖远程云服务的系统不同,VIT S2I能够在本地确定自然语言的意图。这一功能要归功于恩智浦针对嵌入式系统设计的神经网络算法和机器学习模型的最新开发成果。因此,要实现“开灯”的目的,可以用很多不同的方式来表达,比如“开灯”、“太暗了”和“你能让光线更亮吗”等。

观看视频,进一步了解基于RW61x上的本地语音控制功能——

这种Speech to Intent功能使用户能够更自然地与嵌入式系统进行交互,同时降低了系统延迟和云连接系统的功耗。此外,消除云服务也有助于提高安全性和隐私,因为所有语音都在设备上本地处理。此外,如果搭配恩智浦唤醒词引擎,可以开发超低功耗设计,只有在听到特定的唤醒词后,才会启动VIT S2I引擎来处理语音命令。

支持VIT S2I的恩智浦器件包括:Arm Cortex-M (i.MX RT跨界MCU和RW61x MCU),以及Cortex A (i.MX 8M Mini、i.MX 8MPlus和i.MX 9x应用处理器)。VIT S2I目前支持英语、普通话和韩语,于2023年底推出。用于创建自定义命令和训练模型的在线开发工具计划将于2024年发布。

052f8c90-bbdf-11ee-8b88-92fbcf53809c.jpg

VIT Speech to Intent框图

VIT S2I为您的下一个设计增加语音功能

物联网领域日新月异,VIT S2I能够适应各种应用场景,无论是家居自动化、可穿戴电子产品,还是汽车远程信息处理和楼宇门禁等,都能发挥其优势。消费者喜欢用自然语言来免手动控制设备的基本功能,消除边缘语音处理的云服务不仅减少了系统延迟,还减少了隐私和安全问题。

对于那些需要使用语音优先用户界面的设备,VIT S2I系统是一个不可或缺的部分,它可以应用在智能恒温器、智能电器、家居自动化、灯光控制、遮阳控制等领域。VIT S2I也适用于可穿戴设备和健身设备,一些用例包括设置提醒、控制蓝牙设备和监测健康状况。

使用恩智浦的VIT产品组合增强您的应用

如果您想要使用恩智浦智能语音技术组合进行开发,欢迎使用我们免费的VIT唤醒词和语音命令引擎,通过MCUXpresso SDK和在线模型工具即可获得。这些引擎可以让您方便地定制唤醒词和基本的语音控制,适用于那些不涉及自然语言理解的快速原型制作和开发周期。

如果您的应用需要更多自然语言理解功能,请联系当地的恩智浦代表,开始使用VIT Speech to Intent。




审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 处理器
    +关注

    关注

    68

    文章

    19155

    浏览量

    229044
  • mcu
    mcu
    +关注

    关注

    146

    文章

    16977

    浏览量

    350215
  • 神经网络
    +关注

    关注

    42

    文章

    4762

    浏览量

    100517
  • 恩智浦
    +关注

    关注

    14

    文章

    5825

    浏览量

    106591
  • 语音识别
    +关注

    关注

    38

    文章

    1721

    浏览量

    112533

原文标题:将意图转化为行动:恩智浦新一代语音识别引擎,开启嵌入式语音控制新时代!

文章出处:【微信号:NXP客栈,微信公众号:NXP客栈】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    ASR语音识别技术应用

    ASR(Automatic Speech Recognition)语音识别技术,是计算机科学与人工智能领域的重要突破,能将人类语音转换为文本
    的头像 发表于 11-18 15:12 224次阅读

    **十万级口语识别,离线自然说技术,让智能照明更懂你**

    NLP技术。该技术基于端到端语音识别技术及端侧NLP技术,可
    发表于 04-29 17:09

    发布专为新一代工业和物联网设备智能互联而打造的无线MCU

    MCX W系列的可扩展无线MCU是首款具有蓝牙信道探测功能的无线MCU,进步扩展了MCX产品组合丰富的连接功能,可最大限度地提高新一代
    的头像 发表于 04-12 12:15 1544次阅读

    车内语音识别技术智能驾驶中的应用与前景

    、引言 随着智能驾驶技术的快速发展,车内语音识别技术逐渐成为
    的头像 发表于 02-19 11:46 748次阅读

    车内语音识别技术智能驾驶的核心要素

    、引言 随着科技的飞速发展,智能驾驶已经成为未来出行的趋势。作为智能驾驶的关键技术,车内语音
    的头像 发表于 02-19 11:42 704次阅读

    车内语音识别技术智能驾驶的革新之源

    、引言 随着科技的飞速发展,智能驾驶已经成为现代交通领域的热门话题。作为智能驾驶的关键技术,车内
    的头像 发表于 02-19 10:10 410次阅读

    车内语音识别技术:重塑智能驾驶的未来

    、引言 随着科技的飞速发展,智能驾驶已经成为未来交通的必然趋势。作为智能驾驶的关键技术,车内语音
    的头像 发表于 02-19 10:09 587次阅读

    发布新一代MCX A系列MCU

    半导体近日发布了MCX A14x和MCX A15x两款通用MCU,作为MCX A系列中的首批产品,现已正式上市。
    的头像 发表于 02-02 14:41 1445次阅读

    语音数据集:智能驾驶中车内语音识别技术的基石

    、引言 在智能驾驶中,车内语音识别技术发挥着越来越重要的作用。语音数据集作为这
    的头像 发表于 01-31 16:07 489次阅读

    车内语音识别数据在智能驾驶中的应用与挑战

    、引言 随着智能驾驶技术的不断发展,车内语音识别数据在智能驾驶中的应用越来越广泛。车内
    的头像 发表于 01-26 18:14 1064次阅读

    语音数据集:开启智能语音技术的新篇章

    语音数据集的重要性 语音数据集是智能语音技术的基石。通过收集大量的
    的头像 发表于 12-29 11:06 623次阅读

    离线语音识别与在线语音识别有什么不样?

    离线语音识别与在线语音识别有什么不样? 离线语音识别
    的头像 发表于 12-12 14:36 1147次阅读

    情感语音识别的应用与挑战

    、引言 情感语音识别种通过分析人类语音中的情感信息实现智能化和个性化人机交互的
    的头像 发表于 11-30 10:40 615次阅读

    离线语音识别及控制是怎样的技术

    引言:随着人工智能的飞速发展,离线语音识别技术成为了项备受瞩目的创新。离线语音
    的头像 发表于 11-24 17:44 1103次阅读
    离线<b class='flag-5'>语音</b><b class='flag-5'>识别</b>及控制是怎样的<b class='flag-5'>技术</b>?

    离线语音识别及控制是怎样的技术

    引言:  随着人工智能的飞速发展,离线语音识别技术成为了项备受瞩目的创新。离线语音
    发表于 11-24 17:41