0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

所有操作层都接入AI,Menteebot给人形机器人发展带来新思路

Felix分析 来源:电子发烧友网 作者:吴子鹏 2024-04-22 07:54 次阅读

电子发烧友网报道(文/吴子鹏)近日,初创公司Mentee Robotics展示了旗下首款人形机器人的原型Menteebot。相较于波士顿动力的电动Atlas,以及特斯拉的擎天柱(Optimus),Menteebot名声并不响。

不过,Mentee Robotics还是有名头的,因为它是Mobileye核心创始人Amnon Shashua的另一个创业项目,该公司的另外两位创始人分别为Mobileye首席技术官ShaiShalev-Shwartz、前FacebookAI研究总监LiorWolf。

Menteebot最大的特色是据称在所有操作层都接入了AI,注意这里面的区别,并不是围绕AI模型打造一个机器人的“大脑”,而是在所有操作层都利用AI赋能。

全身布满AI的Menteebot

Mentee Robotics表示,Menteebot是一款“可以指导的个性化人工智能机器人”,具备与人类相似的平衡和控制能力。刚刚提到,和以往的人形机器人有所不同,Menteebot浑身都布满了AI,搭载有丰富的AI模型和AI算法,这让Menteebot能够更加受益于多模态AI模型的发展。同时,人类可以使用自然语言来控制它。

通过演示视频,Menteebot超强的AI能力至少表现在两个方面,其一是更加自然的沟通能力,其二是超强的运动能力。

先看沟通能力,Menteebot搭载了更加丰富的自然语言模型,这使得它的控制不再受限于既定的指令。过往,人形机器人在沟通时,存在模型内和模型外能力的差距,此前我们也提到这个问题,当某一项指令属于模型训练范围内时,人形机器人能够表现出超强的能力,不过当指令超出模型训练范围之后,人形机器人就会显得“不知所措”。

据悉,Menteebot可以与人类进行自然的对话和交流。用户只需通过自然语言向机器人发出命令,它便能理解并执行相应的任务。这其实要得益于Menteebot“大脑”模型中更加强大的人工智能算法、大型语言模型和软件。Mentee Robotics称,基于NeRF的实时三维映射和定位、复杂环境中的动态导航等技术,可实现复杂的推理,以完成任务和快速学习新任务。

Mentee Robotics特别提到,完成部署的Menteebot可以进行更高级的训练以应对复杂的任务或者场景,此时软件会不断模拟任务直到掌握为止,随后机器人便能在现实世界中完成任务。

再看运动能力,Menteebot能够完成更加复杂的行走姿态,比如奔跑、侧向行走,甚至转身;也能够执行非常精细的操作,它能够准确地将餐具递给人类,这得益于其手臂和手部的全方位运动能力和精确性。

为了提升Menteebot的行动力,Mentee Robotics在这款机器人上集成了尖端的Sim2Real学习,可实现逼真的步态和手部运动,具有与人类相同的平衡和控制力,在举起重物时还会调整步态。

Mentee Robotics表示,Menteebot机器人的量产版预计将于2025年第一季度部署,将由纯视觉传感、支持“前所未有的”灵活性的专用电动马达、完全集成的人工智能提供动力。预计将分为家用版和商业版两个版本。

Menteebot给人形机器人硬件创新带来启示

通过在所有操作层都接入AI,Menteebot机器人展示了强大的能力,包括沟通和运动。但这其实也给模型和算法的部署提出了更高的要求,包括Menteebot“大脑”里的核心芯片以及其他执行单元里的芯片。

对于“大脑”里的核心芯片,首先要能够支持多模态的AI大模型部署,并且需要对未来融入进来的新模态留出部署空间。目前,应用于人形机器人的大模型包括图像识别模块、语音识别模块、文字转语音模块、对话系统模块、导航模块、多模态系统模块和强化学习模块等。核心芯片是这些模块的载体,对于上述模块,或者叫模态都需要能够支持,即便是汇总归结,核心芯片也需要能够完整支持视觉模块、导航模块、语言模块和决策模块这四大能力,这对核心芯片的算子丰富度提出了高要求。Menteebot发布之后,预计强化学习将上升为第五大基础模块,届时软件能力会不断增强,硬件冗余将成为一项重要的指标。

第二个就是执行单元如何强化AI能力,这就对MCUFPGA等部件提出了新要求。就以MCU来说,当前这一产品类别一个重要的发展方向就是:能够在MCU上部署和执行AI程序。实际上,产业界早就开始尝试将AI部署在尽可能小的控制系统上,不过这个过程中也有很多挑战。

首先要将AI模型部署在MCU上,就需要将这些模型转化为C/C++代码,这就需要对模型进行非常精准的量化,既要能够保证模型的能力,同时也要尽量避免浮点运算。这对MCU编译器也有很高的要求,因为量化之后代码要部署到MCU里,需要经过编译器。

其次,当MCU运行AI模型之后,不能够过度占用片上资源,也不能有太高的功耗。低功耗是至关重要的,因为在一个系统内,MCU器件的数量有很多,太高的功耗会影响系统整体的续航能力。

有人可能会说,MCU AI大可不必,但是要实现即时的AI效果,这是非常有必要的。

结语

Menteebot的发布堪称人形机器人行业的黑马,和电动Atlas一样让人震撼。在所有操作层都接入AI,这是一个先进的理念,也需要芯片作为核心硬件能够更好地应对,其中高性能计算芯片需要支持多模态,且强化学习模块预计将上升为核心模块;MCU AI对于即时性的提升是很有帮助的,但也很有挑战性。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    210

    文章

    28148

    浏览量

    206086
  • AI
    AI
    +关注

    关注

    87

    文章

    29928

    浏览量

    268243
  • 人形机器人
    +关注

    关注

    2

    文章

    415

    浏览量

    16469
收藏 人收藏

    评论

    相关推荐

    Atlas转型电驱,纯电+AI正在加速通用人形机器人落地

    机器人新版Atlas。这一事件标志着波士顿人形机器人液压传动路线向纯电的彻底转变。   同时,在四月末,北京人形机器人创新中心在北京经开区发
    的头像 发表于 05-03 01:00 5389次阅读
    Atlas转型电驱,纯电+<b class='flag-5'>AI</b>正在加速通用<b class='flag-5'>人形</b><b class='flag-5'>机器人</b>落地

    王耀南院士:AI大模型赋能人形机器人及未来趋势

    他以多个案例详细介绍了用AI大模型赋能具身智能人形机器人思路和方法,他提出未来在具身智能人形机器人
    的头像 发表于 11-08 11:03 413次阅读
    王耀南院士:<b class='flag-5'>AI</b>大模型赋能<b class='flag-5'>人形</b><b class='flag-5'>机器人</b>及未来趋势

    利用NVIDIA技术推动下一代AI机器人发展

    人形机器人到工厂,基于物理 AI 的工业系统正在通过训练、仿真和推理加速发展
    的头像 发表于 10-27 09:54 197次阅读

    人形机器人场景应用联盟正式成立

    日前,在“2024首届人形机器人场景应用峰会”上,人形机器人场景应用联盟正式宣告成立。
    的头像 发表于 08-19 11:17 607次阅读

    NVIDIA 加速人形机器人发展

    —SIGGRAPH— 当地时间 2024 年 7 月 29 日— 为加速全球人形机器人发展,NVIDIA 于今日宣布,为全球领先的机器人制造商、
    发表于 07-30 09:15 707次阅读
    NVIDIA 加速<b class='flag-5'>人形</b><b class='flag-5'>机器人</b><b class='flag-5'>发展</b>

    从市场角度简要解读“人形机器人

    能给我们大家带来各自想要的很大便利。加上现在大家发声的平台渠道很多;感觉到现在的社会:说的人越来越多,自然就做的(实际行动)时间越来越少!自从人机大战再次唤醒了人类人工智能机器人持续发展以来,应该来说全球投
    的头像 发表于 06-29 16:30 829次阅读

    从市场角度简要解读“人形机器人

    从市场角度简要解读“人形机器人”关于机器人,“人形机器人”应该是大家现阶段谈论较多的话题。正如一些新的客户或朋友知道我们在做
    的头像 发表于 06-29 08:14 319次阅读
    从市场角度简要解读“<b class='flag-5'>人形</b><b class='flag-5'>机器人</b>”

    为何要做人形机器人

    人形机器人在各个发展时期,致力于在“仿特征”上有一些突破。尽管有的人形
    发表于 04-09 10:54 513次阅读

    优必选宣布人形机器人Walker S接入百度文心大模型

    优必选宣布人形机器人Walker S接入百度文心大模型,共同探索中国AI大模型+人形机器人的应用
    的头像 发表于 04-07 10:17 842次阅读

    华为云在人形机器人领域展开合作

    华为云与人形机器人领域的创新企业乐聚机器人近日达成合作,共同致力于探索“华为盘古大模型+夸父人形机器人”的全新应用场景。这是华为云首次与
    的头像 发表于 03-25 10:49 574次阅读

    人形机器人成为车圈“新宠”?

    现在的人形机器人不仅形态更接近人类,而且具备更多的智慧。随着大型AI模型的不断推进,人工智能正在加速人形通用机器人的量产和落地。
    发表于 02-22 09:22 372次阅读
    <b class='flag-5'>人形</b><b class='flag-5'>机器人</b>成为车圈“新宠”?

    全面分析:人形机器人快速发展,哪些国产传感器将受益?(深度报告)

        传感器是人形机器人感知的关键,基于MEMS工艺的力控、触觉、惯性传感器有望充分受益。   ① 人形机器人将更重视感知
    的头像 发表于 02-21 09:53 920次阅读
    全面分析:<b class='flag-5'>人形</b><b class='flag-5'>机器人</b>快速<b class='flag-5'>发展</b>,哪些国产传感器将受益?(深度报告)

    人形机器人产业发展机遇与挑战并存

    随着人工智能时代的到来,“人形机器人+”正被视为未来数字化、智能化背景下,人工智能应用的终极赛道。首先来关注“人形机器人产业”。
    发表于 12-25 10:45 306次阅读

    高动态人形机器人“夸父”通过OpenHarmony 3.2 Release版本兼容性测评

    深圳开鸿数字产业发展有限公司(以下简称”深开鸿“)OpenHarmony生态建设能力和在新兴行业领域的技术创新实力,也标志着OpenHarmony在新兴行业领域又向前迈进了一步。 夸父人形机器人由深开
    发表于 12-20 09:31

    乐聚机器人成功交付首批源鸿蒙高动态人形机器人

    人形机器人是人工智能改造客观世界的载体,而稳定、高效、安全自主的机器人操作系统是链接机器人本体和人工智能的理想桥梁。
    发表于 12-06 10:23 506次阅读