0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

浅析基于ZYNQ的激光雷达三维建模

FPGA技术江湖 来源:Xilinx开源社区 作者:岳恒;李志远;史 2021-11-16 14:59 次阅读

第一部分 设计概述

1.1 设计目的

近年来,机器学习无人驾驶等领域是十分热门的研究话题。在这些领域中,电脑对环境的感知十分重要。因此三维的环境重建是必然的趋势,方便我们实现虚拟世界与现实世界之间的交互。

在三维重建中,主流的方式有视觉和激光雷达两种。视觉技术的测距方法是基于三角的测距法,最大范围是 5-8m,并不适用于较大的空间,且这种方法受光线的影响很大。相比之下,激光雷达可以用于的场景更为广泛。

1.2 应用领域

三维建模的应用很广泛,例如无人机、无人驾驶汽车的即时避障,路径规划。同时也可以与机器视觉、3D 打印等技术也可以融合。在文物复刻和重建也是十分有意义的应用。本次设计的基于 ZYNQ 的激光雷达三维建模系统,可以深入目标环境, 进行点云采集,重建三维空间模型,测量等机器视觉方面的应用。

1.3 主要技术特点

首先,本系统采用 pcl 点云库中的 icp 算法,可将激光雷达返回的数据进行多次迭代计算,实现精确配准。

其次,本系统将激光雷达搭载在麦轮小车上,通过小车陀螺仪电机编码器,实时传输小车的位置和速度信息,通过坐标系变换可得到激光雷达的实时精准定位。

本设计可以对距离为 1~5m,盲区较少的室内物体进行实时的三维重建, 不易受光线的影响。激光雷达搭载在可远程控制的小车上,可以用于勘察人无法进入的环境。

1.4 关键性能指标

1.5 主要创新点

(1) 可通过移动 app 对小车进行远程控制;

(2) 算法基于 PCL 点云库;

(3) 通过 Icp 算法可达到实时数据配准;

(4) 利用 pynq 的 PL 模块对 icp 算法进行 HLS 加速。

第二部分 系统组成及功能说明

2.1 整体介绍

系统由激光雷达、基于 STM32 的麦轮小车 和 Xilinx 公司 PYNQ-Z2 组成的。其中激光雷达通过网口将采集到的点云数据传给 PYNQ-Z2,麦轮小车上搭载了电机编码器、陀螺仪和蓝牙模块。转向和移动可y由手机蓝牙程序控制。在运动过程中,将位移和姿态信息传递给 STM32 单片机,通过 UART 协议 STM32 将这些信息传递给 PYNQ-Z2,ZYNQ 根据位移和姿态信息计算出激光雷达的位移和姿态偏移。ZYNQ 根据姿态和位置信息的偏移将点云数据利用 ICP 算法拼接起来,拼接后用网口传出数据。

在本设计中,我们采用小车搭载激光雷达进行移动扫描,采集左、右和顶三面的信息进行重构。

2.2 各模块介绍

2.2.1 R-Fans-16 激光雷达

本系统中激光雷达采集采用的是 R-Fans-16 导航型雷达,它通过 16 线 360°扫描实现三维探测成像。基于高精度激光回波信号测量技术,R-Fans-16 具备测程远(探测能力最远达到 200m),测量精度高(测距精度优于 2cm),回波强度准确(目标反射回波强度达到 8 位)等技术特点,同时兼顾了俯仰方向的角度覆盖和角分辨率。运行激光雷达时,通过网口将实时点云数据传输给 PYNQ-Z2。

2.2.2 基于 STM32 的麦轮小车

在这个麦轮小车上搭载了 STM32 单片机,本次实验中,利用了小车上的陀螺仪、编码器和蓝牙。小车上的陀螺仪和电机编码器通过 SPI 协议将数据传给 STM32 单片机,单片机通过计算得到小车的姿态和轮胎转速,然后利用 UART 协议,以 115200 的波特率将数据循环实时发送给 ZYNQ。小车的移动和转向利用蓝牙远程控制。

2.2.3 坐标系转换

本设计中采用的是 R-Fans-16 导航型雷达,它采集的数据是建立在自身的坐标系之中的,三维重建的本质是将激光雷达坐标系中的数据转换为大地绝对坐标系,即球坐标系转化为直角坐标系。

球坐标系是一种利用球坐标(r,θ,φ)表示一个点 P 在三维空间的位置的三维正交坐标系。如图 2.2.1 所示,原点与点 P 之间的“径向距离”为 r,原点到点 P 的连线与正 z 轴之间的“极角”为 θ,原点到点 P 的连线在 xy 平面的投影线与 x 轴之间的“方位角”为 φ。

球坐标系与直角坐标系之间的公式转化如下:

在本设计中,以车启动时的坐标为绝对坐标系的坐标原点,此后在每圈激光雷达的数据期间,以激光雷达为坐标原点建立一个个子坐标系,并记录此刻激光雷达在初始绝对坐标系下的位移偏转量。

xyz 三个坐标轴的方向与激光雷达坐标系的轴方向一致。借助电机的编码器, 可测得激光雷达的水平平面移动速度和方向,即可得知激光雷达坐标系与绝对坐标之间的平移量;通过陀螺仪,可测得激光雷达的姿态角,以得知激光雷达坐标系与绝对坐标系之间的旋转量。借助以上测得的两个数值以及球坐标系与直角坐标系之间的转换公式,即可将激光雷达坐标系中的点映射到大地绝对坐标系中。

2.2.4 点云配准(ICP 算法)

ICP 算法配准就是要将两个不同坐标系下的点集,利用它们的几何特性匹配起来。需要求解目标点集和参考点集之间的刚体变换矩阵和平移矩阵,利用刚体变换矩阵作用在目标点集,使两个点集尽可能重合。对于目标点集 P 和参考点集 Q 来说,转换公式为:

05d813c4-458a-11ec-b939-dac502259ad0.png

上式不总是成立的,因此我们要最小化目标函数

求解 R 和 T 常用的方法有:SVD 和非线性优化。本设计中使用了 SVD 的方法。

ICP 算法问题通常转换为最小二乘最优解问题,将整个问题分为两部分,第一部分是第二部分的基础和输入。第一部分称为粗略配准或全局配准,粗略配准即通过计算两点集间的位姿,得出点集间的大致重合结果,为下一步的精确配准提供合适初值。第二部分称精确配准或局部配准,对两个距离足够接近的点集使用迭代优化策略以达到最终的配准结果。

第三部分 完成情况及性能参数

3.1 总述

本系统本设计完成了激光雷达的点云采集、 陀螺仪、编码器的姿态信息采 集。PYNQ-Z2 开发板的控制芯片 ZYNQ 使用的 PS-PL 设计极大地提高了系 统设计的便捷性、可行性,降低了系统的设计难度。PS-PL 主从设计在保留系 统设计的简易性同时提高了系统的运行速度和处理能力。PL 端 IP 核的设计极 大地加快了算法的计算速度。本设计的点云拼接部分通过 PL 端的 IP 核加速, 增强了拼接效果,成功地实现了实时三维重建的功能。

3.2 完成情况

在室内走廊中,我们摆放了一排桌子、一个消防灭火器,两侧分别为墙壁和 窗户。

每采集 200 帧作为一组数据,存入 pcd 文件,得到每组数据生成的原始图像如图 3.2.2 所示,图像右侧为摆放桌子一侧,可看到明显桌面和桌脚的细节,左侧较低侧为摆放的消防灭火器。

每相邻两组点云进行 icp 配准,得到完整的小车驶过走廊的三维模型。

图片右侧离散的小点云为走廊中的窗户投射到室外返回的激光,若走廊两侧都为墙面,则可返回得到完整的三维模型。

3.3 性能参数

激光雷达点云采集时距离越远分辨率越低,在有效探测距离内对物体的宽度和深度的测量误差取决于设备的稳定性(这里指激光雷达的抖动程度)。宽度测量误差在 2cm 内,倾斜物体的测量误差为 6cm,倾斜角度的误差为 4°。由于测量时小车自身会有轻微抖动,所以结果有一定的误差。

第四部分 总结

可扩展之处

(1)使用 python 编程。本次设计是 ZYNQ 上搭载了 Utunbu18.04,基于 C++ 语言的编程。使用过程中只能调用 C 语言基本的库中的函数以及 PCL 库函数, 显示并不方便,对使用者并不友好。可将 PCL 移植到 Jupyter 平台,利用 Python 更方便更快捷。

(2)全方位的立体扫描。对于搭载激光雷达的小车来说,只能扫描小车的 左、右和顶三面进行单向的扫描。想要扫描一个特定的物体,则无法了解其立体的信息,可以选择更灵活的搭载物,例如无人机。

作品来源:Xilinx开源社区,已授权,作者:岳恒;李志远;史巧雅。

编辑:jq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器学习
    +关注

    关注

    66

    文章

    8408

    浏览量

    132567
  • 激光雷达
    +关注

    关注

    968

    文章

    3969

    浏览量

    189830
  • Zynq
    +关注

    关注

    10

    文章

    609

    浏览量

    47175
  • PCL
    PCL
    +关注

    关注

    1

    文章

    34

    浏览量

    13674

原文标题:基于 ZYNQ 的激光雷达三维建模

文章出处:【微信号:HXSLH1010101010,微信公众号:FPGA技术江湖】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    三维扫描与建模的区别 三维扫描在工业中的应用

    三维扫描与建模的区别 三维扫描与建模是两种不同的技术,它们在操作过程、输出结果及应用领域上存在显著的区别。 操作过程 : 三维扫描 :主要通
    的头像 发表于 12-19 14:55 103次阅读

    激光雷达的工作原理和分类

    激光雷达是一种以发射激光束来探测目标位置、速度等特征量的雷达系统。 这个系统也可以通过扫描发射和接收装置来获取目标物体的三维形状,在不同角度发射和接收
    的头像 发表于 11-07 09:28 436次阅读
    <b class='flag-5'>激光雷达</b>的工作原理和分类

    激光雷达技术的基于深度学习的进步

    一、激光雷达技术概述 激光雷达技术是一种基于激光的遥感技术,通过发射激光脉冲并接收反射回来的光来测量物体的距离和速度。与传统的雷达技术相比,
    的头像 发表于 10-27 10:57 370次阅读

    激光雷达在农业中的创新应用

    生长的详细三维信息,这对于作物监测和管理至关重要。通过分析作物的冠层结构,农民可以评估作物的健康状况、生长速度和产量潜力。例如,激光雷达可以检测到作物密度的变化,这可能表明病虫害或营养缺乏的问题。 2. 土地测绘与规划 在农业
    的头像 发表于 10-27 10:54 445次阅读

    LIDAR激光雷达逆向建模能用到revit当中吗

    LIDAR激光雷达逆向建模是一种利用激光雷达技术获取物体表面数据,然后通过计算机软件进行建模的方法。在建筑行业中,这种方法可以用于建筑物的三维
    的头像 发表于 08-29 17:23 530次阅读

    激光雷达点云数据包含哪些信息

    )、环境监测、城市规划等领域。激光雷达点云数据是激光雷达系统收集到的一系列三维空间坐标点,包含了丰富的空间信息。本文将介绍激光雷达点云数据包含的信息。 空间坐标信息
    的头像 发表于 08-29 17:18 908次阅读

    泰来三维 三维激光扫描结合BIM在工厂扫描建模中的优势

    BIM技术是建设项目实施前的建筑信息模型搭建,三维激光扫描技术则是现实物体的三维信息数字化。BIM具有可视化、协调性、优化性、模拟性和可视图形的特点,而三维扫描仪获取的数据非常真实和准
    的头像 发表于 07-19 10:39 377次阅读

    cad如何进行三维建模

    三维建模是计算机辅助设计(CAD)中的一项重要技术,它可以帮助设计师在计算机上创建和编辑三维模型。本文将介绍如何使用CAD软件进行三维建模
    的头像 发表于 07-09 10:23 890次阅读

    爱普生IMU产品在激光雷达测绘中的应用

    随着雷达应用的快速发展,激光雷达测绘技术也迅速发展,它集成了激光测距系统、全球定位系统(GPS)和惯性导航系统种技术于一体。其中激光雷达
    的头像 发表于 06-26 10:51 425次阅读
    爱普生IMU产品在<b class='flag-5'>激光雷达</b>测绘中的应用

    激光距离选通三维成像技术研究进展综述

    随着人工智能(AI)时代的到来,同时获得反映目标辐射特性和纹理特征的高分辨率强度图像以及反映目标和所处场景的三维空间信息的稠密点云数据/三维图像的激光相机雷达技术已成为
    的头像 发表于 05-28 10:26 2963次阅读
    <b class='flag-5'>激光</b>距离选通<b class='flag-5'>三维</b>成像技术研究进展综述

    单光子激光雷达技术发展现状与趋势综述

    三维成像探测领域,主动式激光雷达被广泛应用于航空航天、自动驾驶、三维建模和环境监测等领域。
    的头像 发表于 05-23 09:30 1751次阅读
    单光子<b class='flag-5'>激光雷达</b>技术发展现状与趋势综述

    黑科技来袭!激光雷达在线监测装置,让输电线路运无忧

    输电线路激光雷达在线监测装置利用激光雷达扫描输电线路通道环境,获取线路三维点云数据,通过对点云数据的处理和分析,建立输电视场三维模型,可以实时监测线路及周边的状态变化,结合AI摄像机,
    的头像 发表于 05-17 10:19 570次阅读

    华为详细解读激光雷达

    来源:华为智能汽车解决方案,谢谢 编辑:感知芯视界 Link 激光雷达(LiDAR)作为智能驾驶系统的核心传感器,其三维环境重建能力为车辆提供了丰富而精确的环境信息,主动发光,不受黑夜光照条件
    的头像 发表于 03-15 10:19 631次阅读

    车载激光雷达到底安不安全?

    激光雷达(LiDAR)作为智能驾驶系统的核心传感器,其三维环境重建能力为车辆提供了丰富而精确的环境信息,主动发光,不受黑夜光照条件影响的特性
    的头像 发表于 03-08 09:41 2534次阅读
    车载<b class='flag-5'>激光雷达</b>到底安不安全?

    偏振成像激光雷达与短波红外复合光学接收系统设计与分析介绍

    三维成像激光雷达因具备主动照明、角度分辨率高、可探测距离信息等优势,被视为是被动遥感和微波雷达后的下一代技术产品,与传统被动传感器成像及微波雷达相比,
    的头像 发表于 01-05 10:29 1549次阅读
    偏振成像<b class='flag-5'>激光雷达</b>与短波红外复合光学接收系统设计与分析介绍