0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

关于云知声开源全栈语音交互方案概念详解

云知声 来源:djl 作者:云知声 2019-08-08 16:40 次阅读

其实现在外面好多合作伙伴都说我们特别‘独’,不过等你们的东西做出来,大家就不会这么说啦。”云知声联合创始人、芯片负责人李霄寒经常用这句话作为开头来鼓励自己的芯片团队尽快完成 Turnkey 整体音箱方案。因为在 5 月份云知声首款面向物联网AI 芯片—— UniOne 的发布会上,在 UniOne 上实现 Turnkey 音箱方案并将其整体开源,已经作为一个重大举措发布了。

谈起之前和合作伙伴的合作,李霄寒还是比较感慨的,云知声之所以能成为国内唯一实现 IVM (智能硬件模组)在白电领域大规模出货的 AI 公司,其中最关键的一条就是云知声提供了软硬件云+端一体化解决方案,为客户提供了一站式解决方案。但是这种模式,让很多希望和云知声展开合作的技术方案公司感觉云知声不太愿意和大家一起玩,所以有人半开玩笑半认真地说云知声比较“独”。

但是另一方面,李霄寒认为前两年的“独”,恰恰是对合作伙伴的负责。因为面向智能家居实现 AI 落地,牵涉到非常多的环节,比如需要积累可以量产化的结构经验;比如需要通过引擎、硬件平台选型以及系统优化,满足家电厂商整体的功耗要求;再比如适配云知声引擎,并在价格和性能方面达到最佳配置的通用芯片选型。这些都需要经过团队之间日常的紧密的合作,有时候甚至需要针对某些硬件特点做相应的引擎代码级别修改,才能真正实现最佳效果。

“如果仅仅提供一个引擎给自己的合作伙伴,再提供一些 SDK 层面的适配和支持,其实对自己的合作伙伴,包括对自己的团队,都是不负责任的。因为大家资源都是有限而宝贵的,引擎原厂没有足够的硬件、系统和产品经验,是无法高效支撑合作伙伴,最终大家做了很多合作,可能只是一场热闹,而无法做到量产出货。”这是李霄寒的结论。

正是在这种思想的指导下,云知声一面提供着 IVM 的整体解决方案,一面把自己在 IVM 实际落地场景下积累的经验和参数,落实到自有 AI 芯片 UniOne 的设计中,期望通过芯片最大可能地把家居场景下的关键部分进行固化,再将该芯片之上的全栈语音交互进行开源,大大降低技术门槛、缩短上市时间,从而确保合作伙伴与云知声的合作都有收获。

“不过这么做压力很大”,作为资深金庸迷,李霄寒有时候在内部开玩笑,说基于 UniOne 整体开源交互方案出来之前,自己经常想起《倚天屠龙记》里面赵敏说的那两句话“周公恐惧流言日,王莽礼谦下士时”,不过这也更加促进了自己领导的芯片团队加班加点。

碎片化IoT市场 VS基于UniOne的统一战线

兵无常势,水无常形, UniOne 出来后,云知声也进入到自己的“芯时代”,远讲降噪的 2Mic、4Mic 算法的各个参数,离线唤醒达到最佳唤醒率/误唤醒率的阈值,离线识别命令的模型大小和反应速度,都已经调到了最佳状态并且固化在 UniOne 中。在这种情况下,和合作伙伴一起做,就在一个非常稳固并且高起点地基础上了。面向很多潜在地客户,云知声均有一套经过验证过的参数,可以保证最终产品的性能,如果后续云知声算法有升级,也可以通过刷新 UniOne 中的固件来确保效果。

与此同时, UniOne 上目前实现的音箱整体交互方案也将开源。大家可以先感受一下当前的效果。

“ Turnkey 方案的开源,必将大大促进整体智能硬件产品的开发”,谈及这点,李霄寒信心满满。原因主要来源于以下三个方面:

一、 智能硬件的产品经理非常稀缺,尤其是懂语音交互设计的产品经理。语音交互(VUI)与之前屏幕为主要展示的图形界面交互(GUI)差别非常大,前者是扁平结构,一句话直达系统任何一个图形界面,可以做任何一个操作。而后者是树形结构,需要一步步点击。这两种交互各有优势,而VUI 目前市面上人才不多,又由于其扁平结构的特性,在设计的时候,需要从系统整体层面来考虑,而不是简简单单一个 App 层面。如此总总,都大大增加了 VUI 设计难度。

“产品交互设计如果都不好,最终开发的产品效果就可想而知了。”而作为云知声创始团队的李霄寒,在十多年前就在 Motorola 中国研究中心从事人机交互相关的研究工作,从 Motorola 手机上的语音交互到云知声车载到格力空调、斐讯音箱,李霄寒带领云知声团队积累了丰富的 VUI 设计和开发经验,而这些经验凝结而成的整体语音交互方案,将随着 UniOne 一起作为 Turnkey 方案整体开源,这一切将大大降低行业门槛。

二、 语音交互方案开源将大大缩短开发周期。作为一个系统级的功能,语音交互方案将处理音频驱动,处理与系统其他应用的交互,处理各个案件和唤醒事件,而且必须足够健壮稳定,这些都随着云知声开源方案得到解决。合作伙伴可以只做浅层次的定制化改造,比如唤醒词修改;也可以做深层次开发,比如基于云知声架构框架增加自己的对话 Session ;也可以在看懂整体方案情况下,完全重写。

三、 云知声经过考验的实施团队,提及云知声的竞争优势,很多客户都对云知声的服务表示认可,这与云知声有一支经验丰富并且善于和客户配合的实施团队密不可分。而在“芯时代”,这支团队将为愿意采用云知声 UniOne 的合作伙伴提供整体开源方案的技术支持,包括代码培训、工具开发等,尽一切可能降低合作伙伴熟悉整体开源方案的学习曲线陡峭度。

正如在 UniOne 芯片发布会上李霄寒所强调的,IoT 是一个碎片化的市场,面对这个碎片化的市场,如何以一个高效的方式应对,是云知声,也是云知声的合作伙伴需要认真面对并深度思考的。现在云知声给出了自己的回答,通过凝结自己场景落地经验的 UniOne 芯片,将其上的全栈语音交互方案进行开源,结成统一战线。各个合作伙伴可以在开源方案上将精力更多地放在自己熟悉的细分市场定制化方向,更快更好更多的出货。而云知声聚焦在自己性能改进和芯片迭代,更高性能更低成本。

“9月份,大家一起来”,李霄寒非常高兴自己终于可以在9月份的 UniOne Turnkey 方案开源研讨会上甩掉戴在自己和云知声头上两年多的“独”的帽子了。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 芯片
    +关注

    关注

    452

    文章

    50117

    浏览量

    420318
  • 语音交互
    +关注

    关注

    3

    文章

    282

    浏览量

    27960
  • 云知声
    +关注

    关注

    0

    文章

    160

    浏览量

    8345
收藏 人收藏

    评论

    相关推荐

    与国信领英签署战略合作协议

    智能科技股份有限公司(以下简称“”)与苏州国信领英教育科技有限公司(以下简称“国信领
    的头像 发表于 10-12 14:16 229次阅读

    推出山海多模态大模型

    在人工智能技术的浩瀚星海中,多模态交互技术正成为引领未来的新航标。继OpenAI的GPT-4o掀起滔天巨浪后,以创新之姿,推出了其匠心独运的山海多模态大模型,正式宣告“Her时代
    的头像 发表于 08-27 15:20 333次阅读

    荣获“年度车载AGI解决方案高成长供应商”

      近日,2024高工智能汽车开发者大会暨舱驾智能与跨域论坛在沪举行,同期举办中国汽车新供应链百强颁奖盛典,凭借车载语音交互
    的头像 发表于 07-11 16:07 562次阅读

    在边缘侧大模型技术探索和应用

    解决的课题。 2024高工智能汽车开发者大会暨舱驾智能与跨域论坛上,智慧座舱解决方案中心总经理鲍晴峰以《边缘侧大模型带来智能座舱交互
    的头像 发表于 06-29 15:30 747次阅读

    携手耘途教育成立学院福建分院

    近日,与耘途教育携手,共同成立了学院福建分院,此举标志着双方在智慧教育领域展开了深度合作。根据合作协议,
    的头像 发表于 05-13 10:38 354次阅读

    携手耘途教育成立学院福建分院,探索智慧教育新思路

    近日,与耘途教育联合成立学院福建分院,深入探索智慧教育新模式、新思路。
    的头像 发表于 05-11 15:52 479次阅读
    <b class='flag-5'>云</b><b class='flag-5'>知</b><b class='flag-5'>声</b>携手耘途教育成立<b class='flag-5'>云</b><b class='flag-5'>知</b>学院福建分院,探索智慧教育新思路

    携山海大模型再赴港IPO

    智能科技股份有限公司(简称“”)于3月15日更新了招股书,继续其在港交所主板上市的步
    的头像 发表于 03-22 14:51 639次阅读

    推进港交所主板上市进程

    近日,智能科技股份有限公司(以下简称“”)再次更新招股书,继续其在港交所主板上市的征
    的头像 发表于 03-22 14:45 900次阅读

    再闯港股IPO

    近日,备受瞩目的智能科技股份有限公司(以下简称)再次更新了其招股书,继续稳步推进其在
    的头像 发表于 03-22 14:42 628次阅读

    推进港股IPO!AI解决方案收入排名中国第四,2023年营收破7亿

    于2012年,当时国内的AI产业刚刚萌芽,它率先开启AGI技术商业化。在成立仅三个月后,便发布了语音识别公有,在AI行业迅速崭露头角
    的头像 发表于 03-22 00:12 3344次阅读
    <b class='flag-5'>云</b><b class='flag-5'>知</b><b class='flag-5'>声</b>推进港股IPO!AI解决<b class='flag-5'>方案</b>收入排名中国第四,2023年营收破7亿

    通科技交互式人工智能,助力企业智能化升级

    在数字化浪潮席卷全球的今天,人工智能已经成为企业转型升级、提升竞争力的关键力量。上海通信息科技股份有限公司(以下称:通科技或公司)作为中国第二大企业级
    的头像 发表于 03-20 09:56 276次阅读

    再闯港股IPO,深耕AI领域

    近日,智能科技股份有限公司(简称:)正式向港交所递交了招股书,计划主板IPO上市。这
    的头像 发表于 03-19 15:36 744次阅读

    人工智能企业再度递交招股书,拟登陆港交所主板

    近日,备受瞩目的“AI独角兽”智能科技股份有限公司(以下简称“”)再度递交了招股书,
    的头像 发表于 03-19 15:04 862次阅读

    再次冲刺港交所上市

    备受瞩目的“AI语音第一股”智能科技股份有限公司(简称“
    的头像 发表于 03-19 14:59 827次阅读

    山海大模型获得华为昇腾技术认证

    山海大模型近日取得了重大突破,顺利通过了华为Atlas 800训练服务器和华为AI框架昇思MindSpore的兼容性测试。这一成就标志着
    的头像 发表于 02-05 09:32 926次阅读