0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

华为发明的机器人凝视追踪方法,提高了机器人的拟人化程度

姚小熊27 来源:爱集微 作者:爱集微 2020-10-12 13:45 次阅读

华为发明的机器人凝视追踪技术,通过显示模块来模拟真实的机器人面部输出,结合多种偏转角度测量方法,实现了平滑的凝视追踪效果,提高了机器人的拟人化程度。

集微网消息,在现代社会的家庭中,越来越多的父母不能时刻陪伴孩子,而此时可以使用智能机器人进行陪伴以及教育孩子。这种智能机器人可以与孩子进行交流,并且可以基于不同的对话内容学习、更新与孩子的交流方式,可以说非常的人性化。

拟人特性作为衡量机器人智能化的重要指标之一,在人机交互的过程中,目标跟随以及凝视跟踪行为的准确性则直接反映机器人的拟人化程度,技术人员往往通过提高机器人的拟人化程度来提高用户的使用体验。

而所谓的凝视追踪技术,就是在机器人和用户进行对话时捕捉用户的眼睛位置并进行凝视,因为人们在谈话时往往看着对方的眼睛,如果机器人也可以采用这样的技术,将会极大的提高其拟人化程度,并且带给用户极佳的交流体验。

为了实现这个目的,华为在5月8日申请了一项名为“一种机器人的控制方法、装置、机器人以及存储介质”的发明专利(申请号:202010382291.0),申请人为华为技术有限公司

根据该专利目前公开的资料,让我们一起来看看华为的这项凝视追踪技术吧。

华为发明的机器人凝视追踪方法,提高了机器人的拟人化程度

如上图,为该专利中发明的机器人示意图,其中包括具有模拟人形形态的a型机器人、模拟动物形态的b型机器人以及非生物形态的c型机器人,这些机器人虽然形状各异,但是均具有运动功能,可以进行移动以及旋转等运动操作,其具体控制方法的实现如下图所示。

华为发明的机器人凝视追踪方法,提高了机器人的拟人化程度

可以看到,控制机器人运动的过程分为三步,首先需要获取目标对象的位置信息,其次根据这个位置信息来控制机器人转动。这个相对位置可以通过自动识别或者手动设置来确定,它是机器人与目标对象之间的相对位置,例如正前方、右侧等,也可以是具体多少角度的偏转,例如+60度或者-120度等。

有了相对位置信息后,机器人会根据自身的初始角度以及目标对象的位姿确定目标偏转角度,例如人形机器人可以以其面部为正面。为了实现凝视追踪的目的,可以将目标偏转角度设置为机器人看向的方向,这样就可以使得机器人的视线对准目标对象,从而完成凝视追踪。

并且值得一提的是,该专利采用显示模块的输出画面来完成凝视,这相比于马达驱动的硬件凝视具有更高的响应度,利用这种模拟的凝视界面,可以很好的实现平滑凝视追踪效果。

华为发明的机器人凝视追踪方法,提高了机器人的拟人化程度

具体的应用案例如上图所示,这是专利中提供的目标偏转角度的获取示意图,左侧为机器人,右侧为真人,对于凝视追踪而言,最重要的就是将机器人的视线与目标对象的视线进行交汇,即处于同一平面内,因此机器人需要确定自身当前的视线方向以及目标对象的视线方法,并且可以基于两个视线方向确定偏转角度。

该专利提供了三种技术用于确定这个偏转角度:基于距离传感器、基于拍摄图像以及基于语音信号的方式。基于距离传感器的方法就是通过距离探测单元采集的距离值构建机器人所处场景下的深度图,基于深度图来确定当前场景包含的对象,并根据目标的轮廓线来确定目标对象。

基于拍摄图像的方法是通过轮廓识别算法提取该场景图像内包括的轮廓信息,并基于轮廓信息对场景图像进行划分,通过主体类型识别来确定目标对象。而基于语音信号的方法则是基于语音分析结果来确定是否有激活口令,通过口令来确定目标对象。

这三种方式都可以用于完成凝视追踪,并且可以利用多种方法进行组合的方式来提高凝视追踪的准确率。此外,基于拍摄图像的方法还需要对摄像模块上采集的图像进行校准,从而在后续的凝视追踪时,可以使得机器人的眼部视线偏移到目标对象的中心位置。

以上就是华为发明的机器人凝视追踪方法,通过确定机器人与目标之间的偏转角度,并不断调整显示模块的输出内容以及旋转部件来实现凝视追踪。此外,该技术基于三种确定偏转角度的方法,无需借助马达来驱动硬件,响应时间较短,不仅实现了平滑凝视追踪行为,也提高了机器人的拟人化程度。
责任编辑:YYX

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    210

    文章

    28053

    浏览量

    205731
  • 华为
    +关注

    关注

    215

    文章

    34223

    浏览量

    250828
收藏 人收藏

    评论

    相关推荐

    国内外部分人形机器人企业一览

    人形机器人的定义人形机器人是一种仿生机器人,指形状及尺寸与人体相似,能够仿人类运动、表情、互动及动作的机器人,并具有一定程度的认知和决策智能
    的头像 发表于 10-22 17:05 370次阅读
    国内外部分人形<b class='flag-5'>机器人</b>企业一览

    开源项目!用ESP32做一个可爱的无用机器人

    简介 作者在完成硕士论文答辩后,利用空闲时间制作了一个他一直想做的机器人——可爱无用机器人。 无用机器人原理是一个连接到开关的电机,通过逻辑门控制。当开关被推到“开”时,机器人启动
    发表于 09-03 09:34

    码垛机器人投产优势及选用方法

     码垛机器人自动化设备车间的投产带来了多方面的显著优势。‌首先,‌它大大提高了生产效率,‌能够在24小时内不间断地工作,‌且速度和精度远超人工,‌从而缩短了生产周期‌。‌其次,‌该设备显著降低了企业
    的头像 发表于 07-30 15:33 131次阅读

    Al大模型机器人

    和迭代来不断改进自身性能。它们可以从用户交互中学习并根据反馈进行调整,以提高对话质量和准确性。可定制性与整合性: AI大模型机器人可以根据特定需求进行定制和整合,以满足不同场景和应用的要求。它们可以与其
    发表于 07-05 08:52

    abb机器人home点设置方法

    ABB机器人的home点设置是机器人编程和操作中非常重要的一环,它关系到机器人的精度和稳定性。本文将详细介绍ABB机器人home点设置的方法
    的头像 发表于 06-17 09:27 2462次阅读

    基于FPGA EtherCAT的六自由度机器人视觉伺服控制设计

    和增强系统处理图像的实时性,本文提出了一种伊瑟特的六自由度机器人视觉伺服控制系统,将摄像头集成到基于 Zynq的伊瑟特主站上,提高了视觉伺服的实时性.经测试,该平台能够对视觉检测目标的变化做出及时的反应
    发表于 05-29 16:17

    其利天下技术·搭载无刷电机的扫地机器人的前景如何?

    大的吸力,有效清除各类污渍和颗粒物。同时,低噪音设计使得机器在工作时不会打扰到家庭成员的休息或工作。此外,无刷电机的寿命更长,减少了用户的维护成本,提高了产品的性价比。 2.扫地机器人智能化
    发表于 05-05 15:03

    华为云在人形机器人领域展开合作

    华为云与人形机器人领域的创新企业乐聚机器人近日达成合作,共同致力于探索“华为盘古大模型+夸父人形机器人”的全新应用场景。这是
    的头像 发表于 03-25 10:49 541次阅读

    华为云携手乐聚机器人,共探人形机器人智能新纪元

    近日,华为云计算技术有限公司与乐聚(深圳)机器人技术有限公司正式签署战略合作协议,标志着双方将共同开拓“华为盘古大模型+夸父人形机器人”的全新应用场景。此举不仅是
    的头像 发表于 03-25 10:17 518次阅读

    机器人焊接技术的应用与发展前景

    和更低的成本。今天创想焊缝跟踪系统小编和大家一起探讨机器人焊接技术的应用与发展前景。   一、机器人焊接技术的应用   机器人焊接技术的应用,使得焊接过程更加自动化、智能化,有效提高了
    的头像 发表于 01-25 14:10 1090次阅读
    <b class='flag-5'>机器人</b>焊接技术的应用与发展前景

    机器人会用到哪些传感器

    机器人会用到哪些传感器  机器人是一种能够自主行动并感知环境的自动化设备。为了实现这一目标,机器人通常需要使用各种不同类型和功能的传感器。这些传感器可以帮助机器人感知其周围的物理环境、
    的头像 发表于 01-03 15:59 2458次阅读

    LabVIEW的六轴工业机器人运动控制系统

    。LabVIEW的可视化编程环境和强大的数据处理能力,使得复杂的运动学算法和轨迹规划得以顺利实现,显著提高了工业机器人的控制精度和效率。 ​ 这是LabVIEW的一个功能介绍,更多的使用方法与开发案例,欢迎登录官网,了解更多信息
    发表于 12-21 20:03

    机器人实现开发自由,探索精密工艺的机器人关节模组

    机器人关节是作为机器人各个部件之间相互连接的节点,提供了必要的运动自由度。关节模组用其精确度和可靠性,确保了机器人在各个领域的高效率和高质量表现。一体化关节使得机器人能够模
    的头像 发表于 12-08 15:35 445次阅读

    机器人建模方法和组成

    URDF:机器人建模方法 ROS是机器人操作系统,当然要给机器人使用啦,不过在使用之前,还得让ROS认识下我们使用的机器人,如何把一个
    的头像 发表于 11-22 16:30 835次阅读
    <b class='flag-5'>机器人</b>建模<b class='flag-5'>方法</b>和组成

    机器人阻抗控制有几种方法

    在工业机器人中,阻抗控制是一种非常重要的控制方法,主要用于控制机器人的力和位。通过调整阻抗,机器人可以更好地适应不同的操作环境和任务需求。 阻抗控制的基本思路是:建立一个期望的
    的头像 发表于 11-08 18:08 1342次阅读
    <b class='flag-5'>机器人</b>阻抗控制有几种<b class='flag-5'>方法</b>