0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

华为发明的机器人凝视追踪方法,提高了机器人的拟人化程度

姚小熊27 来源:爱集微 作者:爱集微 2020-10-12 13:45 次阅读

华为发明的机器人凝视追踪技术,通过显示模块来模拟真实的机器人面部输出,结合多种偏转角度测量方法,实现了平滑的凝视追踪效果,提高了机器人的拟人化程度。

集微网消息,在现代社会的家庭中,越来越多的父母不能时刻陪伴孩子,而此时可以使用智能机器人进行陪伴以及教育孩子。这种智能机器人可以与孩子进行交流,并且可以基于不同的对话内容学习、更新与孩子的交流方式,可以说非常的人性化。

拟人特性作为衡量机器人智能化的重要指标之一,在人机交互的过程中,目标跟随以及凝视跟踪行为的准确性则直接反映机器人的拟人化程度,技术人员往往通过提高机器人的拟人化程度来提高用户的使用体验。

而所谓的凝视追踪技术,就是在机器人和用户进行对话时捕捉用户的眼睛位置并进行凝视,因为人们在谈话时往往看着对方的眼睛,如果机器人也可以采用这样的技术,将会极大的提高其拟人化程度,并且带给用户极佳的交流体验。

为了实现这个目的,华为在5月8日申请了一项名为“一种机器人的控制方法、装置、机器人以及存储介质”的发明专利(申请号:202010382291.0),申请人为华为技术有限公司

根据该专利目前公开的资料,让我们一起来看看华为的这项凝视追踪技术吧。

华为发明的机器人凝视追踪方法,提高了机器人的拟人化程度

如上图,为该专利中发明的机器人示意图,其中包括具有模拟人形形态的a型机器人、模拟动物形态的b型机器人以及非生物形态的c型机器人,这些机器人虽然形状各异,但是均具有运动功能,可以进行移动以及旋转等运动操作,其具体控制方法的实现如下图所示。

华为发明的机器人凝视追踪方法,提高了机器人的拟人化程度

可以看到,控制机器人运动的过程分为三步,首先需要获取目标对象的位置信息,其次根据这个位置信息来控制机器人转动。这个相对位置可以通过自动识别或者手动设置来确定,它是机器人与目标对象之间的相对位置,例如正前方、右侧等,也可以是具体多少角度的偏转,例如+60度或者-120度等。

有了相对位置信息后,机器人会根据自身的初始角度以及目标对象的位姿确定目标偏转角度,例如人形机器人可以以其面部为正面。为了实现凝视追踪的目的,可以将目标偏转角度设置为机器人看向的方向,这样就可以使得机器人的视线对准目标对象,从而完成凝视追踪。

并且值得一提的是,该专利采用显示模块的输出画面来完成凝视,这相比于马达驱动的硬件凝视具有更高的响应度,利用这种模拟的凝视界面,可以很好的实现平滑凝视追踪效果。

华为发明的机器人凝视追踪方法,提高了机器人的拟人化程度

具体的应用案例如上图所示,这是专利中提供的目标偏转角度的获取示意图,左侧为机器人,右侧为真人,对于凝视追踪而言,最重要的就是将机器人的视线与目标对象的视线进行交汇,即处于同一平面内,因此机器人需要确定自身当前的视线方向以及目标对象的视线方法,并且可以基于两个视线方向确定偏转角度。

该专利提供了三种技术用于确定这个偏转角度:基于距离传感器、基于拍摄图像以及基于语音信号的方式。基于距离传感器的方法就是通过距离探测单元采集的距离值构建机器人所处场景下的深度图,基于深度图来确定当前场景包含的对象,并根据目标的轮廓线来确定目标对象。

基于拍摄图像的方法是通过轮廓识别算法提取该场景图像内包括的轮廓信息,并基于轮廓信息对场景图像进行划分,通过主体类型识别来确定目标对象。而基于语音信号的方法则是基于语音分析结果来确定是否有激活口令,通过口令来确定目标对象。

这三种方式都可以用于完成凝视追踪,并且可以利用多种方法进行组合的方式来提高凝视追踪的准确率。此外,基于拍摄图像的方法还需要对摄像模块上采集的图像进行校准,从而在后续的凝视追踪时,可以使得机器人的眼部视线偏移到目标对象的中心位置。

以上就是华为发明的机器人凝视追踪方法,通过确定机器人与目标之间的偏转角度,并不断调整显示模块的输出内容以及旋转部件来实现凝视追踪。此外,该技术基于三种确定偏转角度的方法,无需借助马达来驱动硬件,响应时间较短,不仅实现了平滑凝视追踪行为,也提高了机器人的拟人化程度。
责任编辑:YYX

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    211

    文章

    28418

    浏览量

    207080
  • 华为
    +关注

    关注

    216

    文章

    34435

    浏览量

    251719
收藏 人收藏

    评论

    相关推荐

    《具身智能机器人系统》第7-9章阅读心得之具身智能机器人与大模型

    将自然语言理解与运动规划融为一体。这种端到端的方法使机器人能够直接从人类指令生成动作序列,大幅简化了控制流程。该项目的工作流程包含设计并封装一个人机器人函数库、编写清晰地描述提示词、在仿真环境中执行
    发表于 12-24 15:03

    【「具身智能机器人系统」阅读体验】+数据在具身人工智能中的价值

    机器人领域货币化的重要工具,在互联网领域,公司主要将用户数据用于定向广告和个性化内容。这种有针对性的方法不仅可以增加销售额,还可以提高用户参与度,从而导致更高的订阅费用或增加使用量。同时,在EAI领域
    发表于 12-24 00:33

    【「具身智能机器人系统」阅读体验】+初品的体验

    提高机器人的自适应性和自主性,赋能机器人在多种场景中的应用。例如在家庭自动化领域,具身智能机器人能够感知家庭成员的日常习惯和需求,自动执行清洁、整理或其他家务任务。它们通过观察家庭成员
    发表于 12-20 19:17

    《具身智能机器人系统》第1-6章阅读心得之具身智能机器人系统背景知识与基础模块

    关键路径:利用GNSS和IMU等传感器直接获取位置信息,同时通过摄像头、激光雷达获取环境距离信息反向推算位置。在数据处理环节,采用卡尔曼滤波器和最大后验估计方法融合多传感器数据,优化机器人位置和运动状态
    发表于 12-19 22:26

    从市场角度对机器人的基本解读

    自人工智能机器人发展至今,几乎都是从学术方面对机器人进行定义诠释。现今机器人市场化发展程度已逐步进入多领域不同场景的融合应用,对实际市场已经可以发挥一定的使用价值。为更快的增强
    的头像 发表于 12-07 01:06 234次阅读
    从市场角度对<b class='flag-5'>机器人</b>的基本解读

    鸿蒙机器人与鸿蒙开发板联动演示

    鸿蒙机器人与鸿蒙开发板联动演示,机器人的角色为迎宾机器人,开发板负责人宾客出现监听
    发表于 12-02 14:55

    国内外部分人形机器人企业一览

    人形机器人的定义人形机器人是一种仿生机器人,指形状及尺寸与人体相似,能够仿人类运动、表情、互动及动作的机器人,并具有一定程度的认知和决策智能
    的头像 发表于 10-22 17:05 677次阅读
    国内外部分人形<b class='flag-5'>机器人</b>企业一览

    开源项目!用ESP32做一个可爱的无用机器人

    简介 作者在完成硕士论文答辩后,利用空闲时间制作了一个他一直想做的机器人——可爱无用机器人。 无用机器人原理是一个连接到开关的电机,通过逻辑门控制。当开关被推到“开”时,机器人启动
    发表于 09-03 09:34

    码垛机器人投产优势及选用方法

     码垛机器人自动化设备车间的投产带来了多方面的显著优势。‌首先,‌它大大提高了生产效率,‌能够在24小时内不间断地工作,‌且速度和精度远超人工,‌从而缩短了生产周期‌。‌其次,‌该设备显著降低了企业
    的头像 发表于 07-30 15:33 180次阅读

    Al大模型机器人

    和迭代来不断改进自身性能。它们可以从用户交互中学习并根据反馈进行调整,以提高对话质量和准确性。可定制性与整合性: AI大模型机器人可以根据特定需求进行定制和整合,以满足不同场景和应用的要求。它们可以与其
    发表于 07-05 08:52

    基于FPGA EtherCAT的六自由度机器人视觉伺服控制设计

    和增强系统处理图像的实时性,本文提出了一种伊瑟特的六自由度机器人视觉伺服控制系统,将摄像头集成到基于 Zynq的伊瑟特主站上,提高了视觉伺服的实时性.经测试,该平台能够对视觉检测目标的变化做出及时的反应
    发表于 05-29 16:17

    其利天下技术·搭载无刷电机的扫地机器人的前景如何?

    大的吸力,有效清除各类污渍和颗粒物。同时,低噪音设计使得机器在工作时不会打扰到家庭成员的休息或工作。此外,无刷电机的寿命更长,减少了用户的维护成本,提高了产品的性价比。 2.扫地机器人智能化
    发表于 05-05 15:03

    华为云在人形机器人领域展开合作

    华为云与人形机器人领域的创新企业乐聚机器人近日达成合作,共同致力于探索“华为盘古大模型+夸父人形机器人”的全新应用场景。这是
    的头像 发表于 03-25 10:49 686次阅读

    华为云携手乐聚机器人,共探人形机器人智能新纪元

    近日,华为云计算技术有限公司与乐聚(深圳)机器人技术有限公司正式签署战略合作协议,标志着双方将共同开拓“华为盘古大模型+夸父人形机器人”的全新应用场景。此举不仅是
    的头像 发表于 03-25 10:17 637次阅读

    机器人焊接技术的应用与发展前景

    和更低的成本。今天创想焊缝跟踪系统小编和大家一起探讨机器人焊接技术的应用与发展前景。   一、机器人焊接技术的应用   机器人焊接技术的应用,使得焊接过程更加自动化、智能化,有效提高了
    的头像 发表于 01-25 14:10 1191次阅读
    <b class='flag-5'>机器人</b>焊接技术的应用与发展前景