0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

机器人以构建艺术装置存在哪些挑战

jf_pJlTbmA9 来源:jf_pJlTbmA9 作者:jf_pJlTbmA9 2023-08-01 15:00 次阅读

NVIDIA 机器人专家分享打造灵动有趣的机器人以构建艺术装置存在哪些挑战,同时她期待着展开自主机器领域的新篇章。

训练、测试以及为机器人编码并非易事。我们最近发布的 Isaac 平台承诺可以改变现状,克服种种困难。

没有人能比机器人专家 Madeline Gannon 更清楚这一点。过去一个月里,她一直待在匹兹堡周边波兰山中的研究工作室,潜心钻研机器人艺术装置。

她将主要研究精力放在 Manus 的首次亮相上。Manus 能够将 10 个工业臂与单个机器人大脑连接,展示人机交互的新前沿。

今天,世界经济论坛展览会在中国天津举办。她一直争分夺秒、全力以赴地开发软件和交互设计,就是为了能够在此展览会上准时为大家展示这些机器人臂灵动有趣的一面。数周以来,她每周都在仓库中投入 80 个小时,而面临的主要困难是:从机器人公司 ABB 租借两台机器人,然后使用这两台机器人模拟要在展览会上展示的全部 10 台机器人的交互情况。

Gannon 主要依靠模拟情况来创造与观众交互的场景。而且,在中国现场启动并运行 10 台机器之前,她并不确定这样做是否确实有效。

模拟实际操作中的机器人会面临一些挑战,这些挑战传统上已驱使机器人专家进行自定义编程(更不用说大型赌博和让人焦虑的事件),因为直到最近,软件还无法稳定可靠地运行。

然而,这仍然是行业中的一个关键问题,因为物流业务和仓库作业越来越依赖机器人,这些机器人具备越来越多的自主权,能够与人类协同配合。

“随着我们从机器人自动化过渡到机器人自主,利用 Manus 这样的艺术装置,人们有机会亲身体验未来人类如何与自主机器共存,”她说。

可以肯定的是,Gannon 为实现此次展示历尽艰辛,彰显了该行业大规模开发机器人技术的新动态。

机器人助手时代到来

其中大部分仍在改进。今年早些时候,我们发布了 Isaac Simulator,用于在虚拟环境中开发、测试和训练自主机器。上周,在 GTC Japan 上,我们宣布推出 Jetson AGX Xavier Devkit,以帮助开发者开发机器人和无人机等自主机器。

此解决方案将软件与硬件相结合,通过助力缩短开发周期来推动机器人革命。

“利用 Isaac,人们能够以更快的速度开发智能应用程序,”Gannon 说。“目前,我们正处于机器人技术的黄金时代。”

这并不是 Gannon 首次参加机器人竞技。去年,她还是卡内基·梅隆大学的博士研究生,她开发了一种交互式工业机器人臂,在伦敦设计博物馆展出。

机器人 Mimus 是个 2600 磅的巨人,专用于观察周围的环境。这款机器人被安置在观察区域,使用博物馆天花板中嵌入的传感器来观察和接近,甚至是跟随它觉得有趣的观众。

在天津世界经济论坛展出的 Manus 是她开发的第二个且更复杂的机器人装置,因为该装置需要使用自定义软件从头开始创建交互。

打造灵活有趣的Manus

打造 Manus 绝非易事。到达中国之后,在开始这次交互式展览之前,Gannon 只有 10 天时间在现场部署全部 10 个机器人。Manus 的机器人在 9 米高的基座上排成一排,并且使用有机玻璃包裹。在基座底部装有 12 个深度传感器,借此相互连接的机器人能够跟踪访问者的移动情况,并据此作出响应。

“这个项目需要处理大量视觉信息,这正是其大脑使用 NVIDIA GPU 的原因所在,”Gannon 说。

利用此视觉系统,Manus 可以自动移动以回应周围的人:如果 Manus 找到了有趣的人,随着其机器人目光紧随在目标人物周围,所有的 10 个机器人臂都会重新定向。

要为 Manus 创建交互设计,Gannon 需要为其机器人开发自定义通信协议和运动求解器,以及自定义人员感知、远程监控和人机交互设计软件。

她表示,直到现在还没有可靠的技术资源,可以与智能机器人配合完成非典型的任务。因此,她每创造一个新的机器人部件,都不得不做无谓的重复,浪费时间做无用功。

Mamus 软件堆栈的技术开发大约占用了三分之二的项目时间,只剩三分之一的时间可用于项目的核心内容,即人机交互设计。

未来机器人训练

利用 Jetson 实现计算机视觉并利用 Isaac Sim 训练机器人,有助于开发者在未来的类似项目中扭转这些比率。而且,它们非常适合开发和模拟大量企业用于仓库和物流操作的工业机器人。

Gannon 擅长针对这些障碍训练机器人,其开创性工作引起了广泛关注,而且多年来她一直被称为“机器人语者”或“机器人驯服者”。

她耸了耸肩。“现在,有了 Isaac,我想我们不再需要机器人语者了。”

责任编辑:彭菁

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2556

    文章

    51725

    浏览量

    758766
  • 机器人
    +关注

    关注

    212

    文章

    28907

    浏览量

    209644
  • NVIDIA
    +关注

    关注

    14

    文章

    5106

    浏览量

    104456
  • 虚拟环境
    +关注

    关注

    0

    文章

    28

    浏览量

    8986
收藏 人收藏

    评论

    相关推荐

    【书籍评测活动NO.58】ROS 2智能机器人开发实践

    仿真平台,RDK X3、RDK X5赋能生态产品——OriginBot智能机器人开源套件为原型讲解,手把手教读者从零构建一个完整的机器人系统。 内容架构 本书共有9章,分为三部分。
    发表于 03-03 14:18

    【「具身智能机器人系统」阅读体验】2.具身智能机器人的基础模块

    具身智能机器人的基础模块,这个是本书的第二部分内容,主要分为四个部分:机器人计算系统,自主机器人的感知系统,自主机器人的定位系统,自主机器人
    发表于 01-04 19:22

    《具身智能机器人系统》第10-13章阅读心得之具身智能机器人计算挑战

    阅读《具身智能机器人系统》第10-13章,我对具身智能机器人的工程实践有了全新认识。第10章从实时性角度剖析了机器人计算加速问题。机器人定位中的SLAM算法需要处理两个计算密集型任务:
    发表于 01-04 01:15

    【「具身智能机器人系统」阅读体验】+两本互为支持的书

    如何使用PyTorch进行数字图像处理,它借助摄像头来获取视频的图像信息,然后通过已有的图像识别框架模型经深度学习和优化达到更精准的识别结果,从而为进一步的执行处理提供数据支持和依据。而《具身智能机器人系统
    发表于 01-01 15:50

    【「具身智能机器人系统」阅读体验】2.具身智能机器人大模型

    近年来,人工智能领域的大模型技术在多个方向上取得了突破性的进展,特别是在机器人控制领域展现出了巨大的潜力。在“具身智能机器人大模型”部分,作者研究并探讨了大模型如何提升机器人的能力,大模型存在
    发表于 12-29 23:04

    【「具身智能机器人系统」阅读体验】1.初步理解具身智能

    现状和前沿研究,详细介绍大模型的构建方法、训练数据、模型架构和优化技术。 第4部分(第10章到第13章)深入探讨提升机器人计算实时性、算法安全性、系统可靠性及具身智能数据挑战的具身智能机器人
    发表于 12-28 21:12

    【「具身智能机器人系统」阅读体验】1.全书概览与第一章学习

    了解具身智能机器人相关的知识,我感到十分荣幸和幸运。 全书简介 本书循序渐进的方式展开,通过对具身智能机器人技术的全方位解析,帮助读者系统化地学习这一领域的核心知识。 首先在第一部分,介绍了具身智能
    发表于 12-27 14:50

    【「具身智能机器人系统」阅读体验】+数据在具身人工智能中的价值

    的数据集。例如,自主导航机器人需要处理大量环境数据,增强其路径规划和避障能力。此外,数据的精度直接影响机器人的性能;从事高精度任务的工业机器人需要极其精确的数据,其中微小的误差可能会
    发表于 12-24 00:33

    【「具身智能机器人系统」阅读体验】+初品的体验

    解决许多技术的和非技术的挑战,如提高智能体的自主性、处理复杂环境互动的能力及确保行为的伦理和安全性。 未来的研究需要将视觉、语音和其他传感技术与机器人技术相结合,探索更加先进的知识表示和记忆模块,利用强化学习进一步优化决策过程
    发表于 12-20 19:17

    《具身智能机器人系统》第1-6章阅读心得之具身智能机器人系统背景知识与基础模块

    要给AI这个聪明的“头脑”装上一副“身体”。这个“身体”可以是一部手机,可以是一台自动驾驶汽车。而人形机器人则是集各类核心尖端技术于一体的载体,是具身智能的代表产品。与传统的软件智能体不同,具身智能
    发表于 12-19 22:26

    开源项目!用ESP32做一个可爱的无用机器人

    巧妙设计的杠杆将开关推回“关”位置。这种玩具很常见,许多人已经制作并上传到YouTube上。 作者每年都会挑战自己制作一个技术产品,今年他决定制作这个复杂的项目——可爱无用机器人。这个机器人参考了日本
    发表于 09-03 09:34

    开源项目!用ESP32做一个可爱的无用机器人

    巧妙设计的杠杆将开关推回“关”位置。这种玩具很常见,许多人已经制作并上传到YouTube上。 作者每年都会挑战自己制作一个技术产品,今年他决定制作这个复杂的项目——可爱无用机器人。这个机器人参考了
    发表于 08-30 14:50

    Al大模型机器人

    和迭代来不断改进自身性能。它们可以从用户交互中学习并根据反馈进行调整,提高对话质量和准确性。可定制性与整合性: AI大模型机器人可以根据特定需求进行定制和整合,满足不同场景和应用的要求。它们可以与其
    发表于 07-05 08:52

    自动停车机器人,如何快速构建

    现场作业 ▲停车移动机器人构成 科聪停车机器人 解决方案 -KC SOLUTION 本方案中核心部分采用的是科聪通用移动机器人控制器,导航方式一般选择激光导航,用以实现行驶路径可灵活多变和高精度导航的需求。
    的头像 发表于 06-20 11:25 332次阅读
    自动停车<b class='flag-5'>机器人</b>,如何快速<b class='flag-5'>构建</b>?

    abb机器人系统密钥在哪

    ABB机器人系统密钥是ABB机器人系统中用于保护其知识产权和确保系统安全性的一种技术手段。本文将详细介绍ABB机器人系统密钥的相关知识,包括其定义、作用、获取方式、使用方法以及注意事项等。 一
    的头像 发表于 06-17 09:45 1572次阅读