0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

恩智浦公司得意新作智能语音技术亮相

NXP客栈 来源:NXP客栈 作者:NXP客栈 2021-05-18 14:31 次阅读

“Hey NXP”、”哈啰恩智浦”……一声又一声的问候在宁静的办公室里格外惹人注目,原来是恩智浦公司又一呕心沥血的得意新作——智能语音技术(VIT)。

智能语音技术(Voice Intelligent Technology – VIT)基于最先进的深度学习语音识别技术,是一款完整的唤醒词/语音命令解决方案。

VIT在MCUXpresso SDK中支持的恩智浦设备上免费提供,目前已经可以支持英语,而中文、土耳其语、西班牙语等其他语言也正如火如荼地开发测试当中。

VIT功能包括

唤醒词引擎(Wake Word Engine - WWE):它使用了训练所需要并且已记录的触发词文件。

在训练阶段使用数据增强技术来整合数据集中的可变性。

利用神经网络分类器来确定提取的音素序列是否与目标关键字对应。

不需要音频数据集的语音命令引擎(Voice Commands Engine - VCE)。

目标语音命令在脱机过程中被转换为单词符号序列,VCE在运行时确定提取的音素序列是否对应于特定的单词符号序列以及命令。

一个模型可以支持从大量词汇当中所挑选的30个语音命令。

简而言之VIT可以

通过Text2Model工具创建的自定义命令

自定义触发字选项

低延迟检测(<200ms)

VIT现已经支持的平台有

i.MX RT600系列:Cortex-M33内核,HiFi4 DSP处理器,评估板为MIMXRT685-EVK

i.MX RT1060系列:Cortex-M7内核,评估板为MIMXRT1060-EVK

VIT可以利用语音服务来唤醒并控制物联网装置或家用设备。目前的VIT版本可以支持唤醒词以及利用Text2Model工具所产生的语音命令,如下图所示↓↓↓

d3adfdf8-b4d1-11eb-bf61-12bb97331649.jpg

唤醒词模型是从关键词档案数据库所创建,而语音命令模型则是由Text2Model工具所产生。目前SDK中所内建的VIT函式库可以侦测 “Hey NXP” 关键词以及12个在VIT_Voice_Commands.h当中所预设的语音命令。

这次VIT的发布包含了以下的部分:

Lib/libVIT_PLATFORM_VERSION.a :平台可以选HIFI4或Cortex-M7

Lib/VIT.h :描述VIT公用的API

Lib/VIT_Model.h :VIT模型档案包含了唤醒词和语音命令的描述

VIT_Voice_Commands.h :列举VIT函式库所支持的语音命令

Lib/Inc :涵盖VIT公用接口定义的文件夹

ExApp/VIT_ExApp.c :VIT范例

VIT提供丰富API以供使用者操作:

VIT_SetModel:储存VIT模块的地址,并确认此模块是否能被VIT函式库所支持

VIT_GetMemoryTable:通知软件应用程序VIT函式所需要的内存。共定义四种不同的内存区块,Fast data / Slow data / fast coefficient /Temporary or scratch

VIT_GetInstanceHandle:设置并初始化VIT,所有的内存都被映像到子模块所需的缓冲区

VIT_SetControlParameters:设置或修改VIT的控制参数

VIT_Process:分析音频以辨识是唤醒词或语音命令

VIT_GetVoiceCommandFound:VIT读取命令编号与名称

VIT_GetModelInfo:辅助API,用来取得VIT模块的讯息

VIT_ResetInstance:辅助API,用来重置VIT模块

VIT_GetControlParameters:辅助API,用来取得VIT的控制参数

VIT_GetStatusParameters:辅助API,用来取得VIT的状态参数

以下为简单的API调用流程↓↓↓

d3cdb4a4-b4d1-11eb-bf61-12bb97331649.png

原文标题:免费提供!VIT智能语音技术:恩智浦深度学习应用又一得意之作!

文章出处:【微信公众号:NXP客栈】欢迎添加关注!文章转载请注明出处。

责任编辑:haq
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 恩智浦
    +关注

    关注

    14

    文章

    5830

    浏览量

    106725
  • 智能语音
    +关注

    关注

    10

    文章

    781

    浏览量

    48713
  • 深度学习
    +关注

    关注

    73

    文章

    5493

    浏览量

    120990

原文标题:免费提供!VIT智能语音技术:恩智浦深度学习应用又一得意之作!

文章出处:【微信号:NXP客栈,微信公众号:NXP客栈】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    米尔NXP i.MX 93核心板亮相2024工业和物联网技术峰会

    2024年10月11日(周五),在北京举办“工业和物联网技术峰会”,洞见技术发展趋势
    的头像 发表于 10-18 08:01 300次阅读
    米尔NXP i.MX 93核心板<b class='flag-5'>亮相</b>2024<b class='flag-5'>恩</b>智<b class='flag-5'>浦</b>工业和物联网<b class='flag-5'>技术</b>峰会

    启扬智能受邀参加2024技术峰会

    2024年10月11日,工业和物联网技术峰会在北京举行,本次会议聚焦前沿性的赋能技术,覆盖智能工业、
    的头像 发表于 10-13 08:00 322次阅读
    启扬<b class='flag-5'>智能</b>受邀参加2024<b class='flag-5'>恩</b>智<b class='flag-5'>浦</b><b class='flag-5'>技术</b>峰会

    专家对话蓝牙技术联盟

    亲爱的蓝牙科技爱好者们,欢迎来到《蓝牙创新说》的第六期!在本期节目中,蓝牙技术联盟邀请到了重磅嘉宾——半导体市场经理陈子良先生!作为
    的头像 发表于 10-12 14:34 331次阅读

    泰克科技出席汽车生态技术峰会

    业内领先的测试与测量解决方案供应商泰克荣幸地参与了主办的汽车生态技术峰会。本次峰会以“软件定义汽车”为核心议题,旨在深入探讨汽车行业电动化和智能化等前沿
    的头像 发表于 09-12 11:44 590次阅读

    发布全新S32 CoreRide开放平台

    近日,半导体在杭州成功举办了为期两日的汽车生态技术峰会。此次峰会上,正式发布了全新的S32 CoreRide开放平台,预示着汽车
    的头像 发表于 06-03 14:06 1116次阅读

    举办汽车生态技术峰会,并发布全新S32 CoreRide开放平台

    半导体于杭州举办为期两日的汽车生态技术峰会,并发布全新S32 CoreRide开放平台。
    的头像 发表于 05-31 09:23 3155次阅读
    <b class='flag-5'>恩</b>智<b class='flag-5'>浦</b>举办汽车生态<b class='flag-5'>技术</b>峰会,并发布全新S32 CoreRide开放平台

    在杭州召开汽车生态技术峰会,推出全新S32 CoreRide开放平台

    峰会上,正式在中国发布了S32 CoreRide开放平台,该平台融合了成熟的S32计算、网络、系统电源管理技术,以及来自
    的头像 发表于 05-30 16:59 1284次阅读

    举办汽车生态技术峰会,发布全新S32 CoreRide开放平台

    中国杭州 —— 20 24 年 5 月 30 日 —— 半导体(NXP Semiconductors N.V.,纳斯达克代码:NXPI)于杭州举办为期两日的 汽车生态
    的头像 发表于 05-30 15:07 2096次阅读
    <b class='flag-5'>恩</b>智<b class='flag-5'>浦</b>举办汽车生态<b class='flag-5'>技术</b>峰会,发布全新S32 CoreRide开放平台

    飞凌嵌入式亮相技术日巡回探讨会」杭州站

    5月9日,技术日巡回研讨会(杭州站)举行。本期探讨会以“工业和物联网”为技术主题,聚焦前沿性的赋能技术,覆盖HMI\PLC\机器人、电
    的头像 发表于 05-10 10:32 453次阅读
    飞凌嵌入式<b class='flag-5'>亮相</b>「<b class='flag-5'>恩</b>智<b class='flag-5'>浦</b><b class='flag-5'>技术</b>日巡回探讨会」杭州站

    启扬智能受邀参加2024技术巡回研讨会

    2024年5月9日,技术技术巡回研讨会—工业和物联网专场在杭州举行。此次研讨会汇聚了众多行业专家,聚焦前沿性的赋能技术,覆盖UWB超
    的头像 发表于 05-10 08:00 425次阅读
    启扬<b class='flag-5'>智能</b>受邀参加2024<b class='flag-5'>恩</b>智<b class='flag-5'>浦</b><b class='flag-5'>技术</b>巡回研讨会

    首个云实验室正式上线运营

    正式上线运营。   于2021年正式启动人工智能创新中心一期“ 人工智能应用示范基地” ,集中展示
    的头像 发表于 04-24 11:36 879次阅读
    <b class='flag-5'>恩</b>智<b class='flag-5'>浦</b>首个云实验室正式上线运营

    亮相2024国际嵌入式大会,展示智能边缘技术

    4月9日至11日,在德国纽伦堡举办的2024国际嵌入式大会(Embedded World)上,盛装亮相,展示最新技术成果如何为创新方案打造坚实的基石,诠释
    的头像 发表于 04-15 09:26 975次阅读

    发布年度企业可持续发展报告

    半导体发布年度企业可持续发展报告(CSR),重申其对信息透明度及公司可持续业务实践的承诺。报告详细阐述环境保护、社会责任和
    的头像 发表于 03-29 09:36 960次阅读

    发布新一代智能语音技术组合的语音识别引擎

    发布新一代智能语音技术组合的语音识别引擎。本文将探讨开发人员在嵌入式
    的头像 发表于 01-26 09:15 719次阅读
    <b class='flag-5'>恩</b>智<b class='flag-5'>浦</b>发布新一代<b class='flag-5'>智能</b><b class='flag-5'>语音</b><b class='flag-5'>技术</b>组合的<b class='flag-5'>语音</b>识别引擎

    半导体盛装亮相2024年国际消费电子展 (CES)

    1月9日-12日,半导体盛装亮相2024年国际消费电子展 (CES),在这个一年一度的行业盛会中,与业界同仁相聚和交流,激发技术灵感、展示前沿科技,共同将创新提升到新的高度。
    的头像 发表于 01-12 09:46 544次阅读