0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

小凌派手势应用之原力控制星球大战BB-8机器人实例

科技绿洲 来源:凌智电子 作者:凌智电子 2022-05-12 10:30 次阅读

在上一篇文章中,分享了 小凌派隔空操作迪文COF智能屏 ,这次再给大家分享一个更有趣的智能手势应用----小凌派RK2206鸿蒙开发板赋予你原力,隔空控制星球大战BB-8机器人

在这篇文章中,你将会了解到如下的信息

人气超高的星球大战之BB-8机器人

控制BB-8机器人的服务工具

小凌派RK2206开发板之智能手势

小凌派之OpenHARMony 无线联网

小凌派之OpenHarmony MQTT连接

小凌派手势控制BB-8机器人

本文中,涉及到的代码全部开源,代码库如下:

BB-8 网页控制界面

星球大战BB-8机器人控制测试与转发工具

小凌派手势应用之原力控制星球大战BB-8机器人实例

人气超高的星球大战之BB-8机器人

星球大战系列电影之中,有两个少有的几乎出现于所有星球大战系列电影的角色,那就是R2-D2和C-3PO:

而在2015年的宇宙史诗电影《STAR WARS:原力觉醒》中登场的BB-8球型机器人,虽然是后辈,但其热度,快速赶超两位前辈,成为铁杆星战迷的最爱之一:

万万没想到,接手星球大战的迪斯尼,居然推出了同款玩具:

狠狠的掏了我这个老星战迷的腰包。如果上天再给我一次机会,我一定不会后悔第一时间抢到了BB-8机器人!!!

控制BB-8机器人的服务工具

通常情况下,要控制BB-8,需要使用专门的手机App,或者使用Sphero的开发工具。

operasoftware/bb8 实现了一个网页界面的基础控制功能,HonestQiao/bb8 在此基础上进行了完善,增加了方向键按键控制功能,并实现了WebSocket、MQTT支持,从而使得其他设备,可以通过WebSocket和MQTT,来间接控制BB-8。

进一步的,我开发了转发工具,为 HonestQiao/bb8 提供完整WEB运行环境,并对外提供TCP Socket、WebSocket、MQTT控制能力,任何能够使用TCP Socket、WebSocket、MQTT的设备、程序等,均可以控制BB-8。

关于该工具的具体使用,可以查看:星球大战BB-8机器人控制测试与转发工具

网页控制界面:

pYYBAGJ8cHyASZ69AAEFwYEzuYU337.png

指令转发界面:

poYBAGJ8cIWAOyamAACmWya7JFM007.png

最终,小凌派RK2206开发板将会通过MQTT,根据识别到的手势,发送对应的指令给BB-8,从而控制BB-8机器人。

,时长00:12

小凌派RK2206开发板之智能手势

关于开发板对智能手势的具体支持,可以查看: 小凌派-RK2206开发板E53模块开发——智能手势

poYBAGJ8cI6ASeqpAAGLaQBsNVs561.png

该智能手势扩展板能够识别的手势,有上下左右、靠近/离开、顺时针、逆时针、摆动。

其具体的代码,在 vendor / lockzhiner / rk2206 / samples / c6_e53_gesture_sensor 目录中,我们可以查看具体的处理细节:

poYBAGJ8cJaAHRmGAAGh8N_ob1w669.png

在该代码中,通过 e53_gs_get_gesture_state()接口函数,从手势传感器PAJ7620U2读取当前识别到的手势,然后输出,并点亮扩展板上对应的LED

在后续的代码中,将会基于上面的代码,使用上下左右控制BB-8的运动,使用靠近来变换BB-8的灯光颜色。

小凌派之OpenHarmony无线联网

在RK2206开发板OpenHarmony的samples中,没有直接提供WIFi连接的实例。

从 vendor / lockzhiner / rk2206 / samples / d1_iot_mqtt 中,我们可以得到对应的调用处理方式,实际上,只要下面一行代码,就会自动启用WiFi连接功能:

SetWifiModeOn();

该接口具体定义,在如下代码中:

poYBAGJ8cKaAe0pTAAFYsIMzj-Q374.png

我们还需要到该文件的头部,修改SSID和PASSWORD的定义,就是我们要连接的无线的名称和密码:

poYBAGJ8cLOAf9L3AAC1D42VfAY397.png

设置好对应的SSID和PASSWORD,在我们的代码中,调用SetWifiModeOn(),就能具有网络功能了。

小凌派之OpenHarmony MQTT连接

在 vendor / lockzhiner / rk2206 / samples / d1_iot_mqtt 中,我们可以了解到使用mqtt服务的细节:

pYYBAGJ8cMeAMIZuAAEqgo0CVX8376.png

在上述代码,我们重点关注如下的接口调用:

NetworkInit(&network):初始化网络句柄

NetworkConnect(&network, “192.168.0.107”, 1883):连接到mqtt服务端口

MQTTClientinit(&client, &network.。.):初始化MQTT CLient

MQTTConnect(&client, &data):开启MQTT服务

MQTTSubscribe(&client, “substopic”。..):订阅TOPIC,用于接收

MQTTPublish(&client, “IOT_MQTT”, &message):发布TOPIC,用于发送数据

通过这些接口,我们就能够使用MQTT服务来收发数据了。

在使用MQTT服务之前,我们需要先有mqtt服务端,通常有下面的两种方式:

使用EMQX提供的公共服务:一文了解主流在线公共 MQTT 服务器

自己建立,可以见参考 快速开始使用 EMQX

获得MQTT服务端后,我们可以使用如下的工具进行测试:

pYYBAGJ8cQqAGGzKAAChn-TpPOs068.png

其具体使用,可查看上述的 快速开始使用 EMQX。

配置并编译 vendor / lockzhiner / rk2206 / samples / d1_iot_mqtt 下载到开发板以后,我们可以在MQTT客户端,给 substopic 这个主题发送指令,开发板就会收到;同时,如果订阅 IOT_MQTT ,就能收到开发板发送出来的信息了。

小凌派手势控制BB-8机器人

在以上智能手势识别、WiFi联网、MQTT使用的基础上,我们就可以结合起来,进行BB-8的控制了。核心控制部分的代码如下:

pYYBAGJ8cRKAXbOUAAGkQhEwgyU253.png

在上述代码中,通过手势传感器,获得当前的手势,如果检测到了上下左右手势,就发送move指令;如果检测到了靠近手势,就发送color指令。

控制BB-8时,使用的MQTT的TOPIC为device/BB-8/command,可以通过MQTT客户端给该TOPIC发送指令,检查控制是否生效。

BB-8受控运动时,使用的是直角坐标系,以默认中心点(150,150)为基础在第一象限运动,发送移动后的坐标,其离中心点越远,则移动的速度越快,时间越长。

因此,根据识别到的手势,具体设置的情况如下:

上:x保持不变,y-=50,发送move指令

下:x保持不变,y+=50,发送move指令

左:y保持不变,x-=50,发送move指令

右:y保持不变,x+=50,发送move指令

靠近:灯光颜色索引c_idx++,发送color指令

详细的完整代码实例,可以查看:小凌派手势应用之原力控制星球大战BB-8机器人实例

通过以上的各项关联,我们就可以像星球大战中的绝地大师那样,使用原力,隔空御物,控制BB-8机器人啦。

审核编辑:彭静
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    211

    文章

    28437

    浏览量

    207174
  • 代码
    +关注

    关注

    30

    文章

    4789

    浏览量

    68638
  • 智能手势
    +关注

    关注

    0

    文章

    2

    浏览量

    9585
  • 小凌派
    +关注

    关注

    0

    文章

    27

    浏览量

    1205
收藏 人收藏

    评论

    相关推荐

    【「具身智能机器人系统」阅读体验】2.具身智能机器人大模型

    近年来,人工智能领域的大模型技术在多个方向上取得了突破性的进展,特别是在机器人控制领域展现出了巨大的潜力。在“具身智能机器人大模型”部分,作者研究并探讨了大模型如何提升机器人的能力,大
    发表于 12-29 23:04

    行业动态 | 星球大战走入现实?这项芯片技术取得突破

    麻省理工学院的研究人员开发出一种基于芯片的微型“牵引光束”,类似于电影《星球大战》中捕获千年隼号的光束,它有朝一日可以帮助生物学家和临床医生研究DNA、分类细胞和研究疾病机制。该设备体积小到可以放在
    的头像 发表于 11-14 01:08 277次阅读
    行业动态 | <b class='flag-5'>星球大战</b>走入现实?这项芯片技术取得突破

    基于导纳控制机器人拖动示教原理和实现步骤

    是关键因素。导纳控制系统应该能够在外部干扰和变化的情况下保持稳定,避免不稳定或振荡。      7.平衡:导纳控制力求维持平衡,
    的头像 发表于 10-23 15:52 243次阅读

    工业机器人控制方式有几种

    工业机器人控制方式多种多样,这些方式根据作业任务的不同而有所区别。主要可以分为以下几种:点位控制方式、连续轨迹控制方式、(力矩)
    的头像 发表于 09-04 09:31 955次阅读

    伺服控制机器人控制方式有哪些

    伺服控制机器人是一种高度精确的自动化设备,它能够执行复杂的任务,如精确定位、重复运动和控制。伺服控制系统是
    的头像 发表于 09-04 09:16 458次阅读

    柔性机器人和刚性机器人有什么区别?

    则由刚性杆及其关节连接构成,运动自由度相对较少。控制方式:柔性机器人通常采用基于和视觉感知的控制系统,而刚性机器人则主要采用编程
    的头像 发表于 08-16 10:17 551次阅读
    柔性<b class='flag-5'>机器人</b>和刚性<b class='flag-5'>机器人</b>有什么区别?

    Al大模型机器人

    金航标kinghelm萨科微slkor总经理宋仕强介绍说,萨科微Al大模型机器人有哪些的优势?萨科微AI大模型机器人由清华大学毕业的天才少年N博士和王博士团队开发,与同行相比具有许多优势:语言
    发表于 07-05 08:52

    如何使用PLC控制机器人

    随着工业自动化技术的飞速发展,机器人技术作为其中的重要组成部分,其应用范围日益广泛。在机器人控制系统中,PLC(Programmable Logic Controller,可编程逻辑控制
    的头像 发表于 06-17 10:50 1743次阅读

    工业机器人控制系统的基本组成有哪些

    机器人关节的角度位置。 速度传感器 :测量机器人关节的旋转速度。 /力矩传感器 :检测机器人末端执行器与环境的交互。 视觉传感器 :提供
    的头像 发表于 06-16 15:26 1950次阅读

    简述机器人控制系统的组成

    机器人控制系统是机器人技术的核心,它负责接收输入信号,处理信息,控制机器人的运动和执行任务。一个完整的
    的头像 发表于 06-16 15:14 1446次阅读

    基于FPGA EtherCAT的六自由度机器人视觉伺服控制设计

    概述 中国制造 2025 是中国政府实施制造强国战略的第一个十年行动纲领,是全面提升中国制造业发展质量和水平的重大战略部署,其中明确指出了围绕工业机器人创新技术的重要地位。目前工业机器人
    发表于 05-29 16:17

    基于飞嵌入式RK3568J核心板的工业机器人控制器应用方案

    加强和扩大现有市场份额,更要在细分市场中发掘新的增长动力,以适应更加激烈的市场竞争环境。 飞嵌入式作为一家专注嵌入式核心控制系统研发与制造的高新技术企业,经过多年的研发与积累,产品已广泛应用于机器人
    发表于 05-11 09:40

    基于飞嵌入式RK3568J核心板的工业机器人控制器应用方案

    嵌入式作为一家专注嵌入式核心控制系统研发与制造的高新技术企业,经过多年的研发与积累,产品已广泛应用于机器人控制系统当中。那么今天,我们就通过多轴工业
    的头像 发表于 04-19 15:24 1869次阅读
    基于飞<b class='flag-5'>凌</b>嵌入式RK3568J核心板的工业<b class='flag-5'>机器人</b><b class='flag-5'>控制</b>器应用方案

    用于AGV物流机器人的爱普生陀螺仪传感器XV7000系列:XV7001BB,XV7011BB

    适用于AGV物流机器人的爱普生陀螺仪传感器XV7000系列:XV7001BB,XV7011BB。以前我们都知道XV7001BB,XV7011BB
    的头像 发表于 04-02 13:53 537次阅读
    用于AGV物流<b class='flag-5'>机器人</b>的爱普生陀螺仪传感器XV7000系列:XV7001<b class='flag-5'>BB</b>,XV7011<b class='flag-5'>BB</b>

    基于树莓的四足喷水机器人设计

    今天小编给大家带来的是来自B-AROL-O团队带来的基于树莓的四足喷水机器人,该机器人可以在农场环境中自主导航,识别需要浇水的植物并自动浇水,视觉系统采用的是 Luxonis 的 OAK-D-Lite相机,可以在专用硬件上运行
    的头像 发表于 01-22 09:19 1918次阅读
    基于树莓<b class='flag-5'>派</b>的四足喷水<b class='flag-5'>机器人</b>设计