0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

基于结构光的高精度开源三维重建系统

3D视觉工坊 来源:arxiv2022 作者:汪皓东 2022-11-06 20:13 次阅读

许多面向建筑领域的机器人作业都需要获得高精度的三维表面信息以完成类似于自动水泥抛光汇总石膏喷涂等作业。然而,目前在市场上消费级深度相机并不能满足其毫米级的精度要求。本文中提出了一个基于结构光的解决方案SL sensor,能够达到5hz的发布频率的同时生成高保真的点云(基于PSP方法)。通过与其他深度相机的实验-Azure Kinetic和RealSencse L515,验证了其在精度和准确度方面均有较好的优势。为了使SL Sensor成为机器人应用实验平台,我们为其添加了一个运动补偿机制使得其能够在线性运动期间也能够正常工作(传统PSP方法仅在静态环境下能够使用)。通过场景实验表明SL Sensor 能够重建出高精度的石灰喷涂表面。

系统介绍

(一)硬件系统

c0dd0f62-5d26-11ed-a3b6-dac502259ad0.png

硬件系统结构 硬件系统包含两个工业CMOS彩色摄像头(1440×1080)和一个DLP投影仪(912×1140)。摄像机和投影仪是由Versavis板完成触发与时间同步。另外额外的IMU为未来的运动补偿策略做准备。其测量范围为设备前方0.3-1.0m的区域。

(二)软件系统

c0ff35d8-5d26-11ed-a3b6-dac502259ad0.png

软件系统结构 软件系统在机器人操作系统(ROS)的框架规范下编写,这确保了它可以轻松地与其他ROS社区的功能组件完成交互与集成。 整个三维重建流程分为四个节点,其在较有效率的零拷贝指针来传递进程之间的图像的同时保证了各个部分的模块性。部分Decoder与Triangular节点继承了SLStudio中的代码。

分析评估c0ad7ca2-5d26-11ed-a3b6-dac502259ad0.png

(一)静态精度测试

c134f650-5d26-11ed-a3b6-dac502259ad0.png

c14de0e8-5d26-11ed-a3b6-dac502259ad0.png

c19a3b50-5d26-11ed-a3b6-dac502259ad0.png

c1ae69cc-5d26-11ed-a3b6-dac502259ad0.png

(二)运动滑轨实验

c1c3fe4a-5d26-11ed-a3b6-dac502259ad0.png

c203482a-5d26-11ed-a3b6-dac502259ad0.png

(三)喷涂场景实验

c226d0d8-5d26-11ed-a3b6-dac502259ad0.png

c2666568-5d26-11ed-a3b6-dac502259ad0.png

c2b74d5c-5d26-11ed-a3b6-dac502259ad0.png

c2da4ac8-5d26-11ed-a3b6-dac502259ad0.png

总结c0ad7ca2-5d26-11ed-a3b6-dac502259ad0.png

在这项工作中,我们提出了一种结构光三维重建解决方案。与现有传感器解决方案相比,我们的SL Sensor集成了ROS中间件框架上的现有机器人软件,以定制化实现3D扫描。我们分别介绍了了软件架构、硬件设置和校准程序,并验证传感器达到毫米级精度。我们将其与常用的传感器进行了比较,实验结构表明我们的传感器达到了精细化施工应用的精度要求。之后我们验证了我们的运动补偿策略的有效性-在线性运动下高精度PSP扫描,并展示了我们的传感器在真实环境运动下根据实际情况进行模式切换的能力。未来的工作将扩展SL Sensor的扫描能力由线性运动到任意6自由度运动。可能的解决方案包括更稳健的运动补偿策略或自适应模式投影,当传感器处于静态并切换到当检测到运动时,另一种模式更能适应运动场景。此外,可能研究多方法点云配准以减少扫描过程中的错误积累,以获得更准确的点云合并结果。

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    209

    文章

    27431

    浏览量

    202465
  • 摄像机
    +关注

    关注

    3

    文章

    1467

    浏览量

    59252
  • 投影仪
    +关注

    关注

    4

    文章

    851

    浏览量

    42821

原文标题:SL-Sensor:基于结构光的高精度开源三维重建系统(arxiv2022)

文章出处:【微信号:3D视觉工坊,微信公众号:3D视觉工坊】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    泰来三维|三维扫描服务_三维扫描助力园区改造公园

    三维激光扫描仪利用激光反射测距原理,通过接受和返回的信号,获取点云三维空间坐标。这种测量方式可以无接触快速获取大型建筑三维空间数据,实现实体建筑的高精度数字化。 根据
    的头像 发表于 05-07 11:44 78次阅读
    泰来<b class='flag-5'>三维</b>|<b class='flag-5'>三维</b>扫描服务_<b class='flag-5'>三维</b>扫描助力园区改造公园

    奥比中与创想三维联合打造的高精度3D扫描仪正式发布

    4月9日,奥比中与战略合作伙伴创想三维联合打造的高精度3D扫描仪CR-Scan Otter、CR-Scan Raptor正式发布。
    的头像 发表于 04-12 09:06 259次阅读

    泰来三维| 高精度三维扫描技术助力地质标本资源数字化

    固定式蓝光三维扫描仪OptimScan 5M Plus,适应不同尺寸、形状的岩矿石标本高精度测量需求。可获取岩石标本表面高精细特征(裂缝、凹坑等)。
    的头像 发表于 04-02 15:28 204次阅读
    泰来<b class='flag-5'>三维</b>| <b class='flag-5'>高精度</b><b class='flag-5'>三维</b>扫描技术助力地质标本资源数字化

    泰来三维|文物三维扫描,文物三维模型怎样制作

    制作的呢,今天和大家聊聊,三维扫描技术文物三维扫描文物三维模型的建立。 1、数据采集与处理 工作流程 ➤原始三维数据采集 ➤原始图像数据采集 ➤文物
    的头像 发表于 03-12 11:10 219次阅读
    泰来<b class='flag-5'>三维</b>|文物<b class='flag-5'>三维</b>扫描,文物<b class='flag-5'>三维</b>模型怎样制作

    泰来三维| 高精度工业3D扫描助力模具检测和逆向设计“数字化”发展

    相应的,产品所需的模具结构也变得愈发复杂精密,传统检测方式和测绘工具很难满足些最新需求。高精度工业3D扫描技术的出现,通过获取工件完整的三维数据,为模具检测和逆向设计提供“数字化”破局之法。
    的头像 发表于 01-29 16:22 250次阅读
    泰来<b class='flag-5'>三维</b>| <b class='flag-5'>高精度</b>工业3D扫描助力模具检测和逆向设计“数字化”发展

    工业上常见的高精度主动式重建算法

    三维重建目前是最为炙手可热的领域。摄影测量或结构投影技术可以解决漫反射重建问题,但却无法有效应对镜面反射物体(如玻璃、积水、反光物体和汽车车身)等的
    发表于 01-05 10:46 233次阅读
    工业上常见的<b class='flag-5'>高精度</b>主动式<b class='flag-5'>重建</b>算法

    基于光学计算超表面的全光学目标识别和三维重建技术

    随着物体识别和三维(3D) 重建技术在各种逆向工程、人工智能、医疗诊断和工业生产领域变得必不可少,人们越来越关注与寻求可以简化处理的高效、更快的速度和更集成的方法。
    的头像 发表于 12-22 10:13 322次阅读
    基于光学计算超表面的全光学目标识别和<b class='flag-5'>三维重建</b>技术

    基于深度学习的三维重建技术

    多视图立体几何(Multi-View Stereo,MVS)是计算机视觉中重要的研究领域,也是迈入三维计算机视觉研究的重点问题。它通过利用多张互相重叠的图像恢复出原始三维场景的几何结构和纹理信息,是现实中拍摄照片的逆过程。
    的头像 发表于 12-04 10:08 706次阅读
    基于深度学习的<b class='flag-5'>三维重建</b>技术

    RayDF:实时渲染!基于射线的三维重建新方法

    在机器视觉和机器人领域的许多前沿应用中,学习准确且高效的三维形状表达是十分重要的。然而,现有的基于三维坐标的隐式表达在表示三维形状或是渲染二图像时,需要耗费昂贵的计算成本;
    的头像 发表于 11-17 16:23 497次阅读
    RayDF:实时渲染!基于射线的<b class='flag-5'>三维重建</b>新方法

    如何实现超高精度智能化全彩手持三维扫描

    全彩三维扫描仪是基于实时三维重建应用场景设计的高集成度易操作的手持式三维扫描系统,可实现0.03秒高速扫描并一键自动完成点云全局注册,去噪融合,无损网格化,补洞,曲率抽样生成STL标准
    的头像 发表于 10-16 15:58 427次阅读
    如何实现超<b class='flag-5'>高精度</b>智能化全彩手持<b class='flag-5'>三维</b>扫描

    基于光学成像的物体三维重建技术研究

    三维重建的一种重要方法,具有成本低、精度高等优点,因此越来越受到人们的关注和青睐。本文就基于光学成像的物体三维重建技术进行研究和探讨。
    的头像 发表于 09-15 09:29 627次阅读
    基于光学成像的物体<b class='flag-5'>三维重建</b>技术研究

    总结!三维点云基础知识

    该方法具体通过六个步骤实现:图像的采集、系统相机标定、特征模板匹配、图像处理、三维仿真匹配以及三维重建。首先,通过两个相机于不同位置对待测物体进行图像信息感知获取。然后根据角测量原理
    的头像 发表于 09-01 16:12 1544次阅读
    总结!<b class='flag-5'>三维</b>点云基础知识

    如何实现整个三维重建过程

    在计算机视觉中,三维重建是指根据单视图或者多视图的图像重建三维信息的过程。由于单视频的信息不完全,因此三维重建需要利用经验知识,而多视图的三维重建
    发表于 09-01 11:06 1307次阅读
    如何实现整个<b class='flag-5'>三维重建</b>过程

    三维重建结构编码方案研究

    接下来进入主题,正式介绍结构编码方案。结构三维重建按照所投影的图案一般可以分为以下类,点
    的头像 发表于 08-16 16:52 816次阅读
    <b class='flag-5'>三维重建</b>之<b class='flag-5'>结构</b><b class='flag-5'>光</b>编码方案研究

    泰来三维|文物古迹数字化保护_三维扫描墓塔

    三维激光扫描采用非接触式高速激光测量方式,主动获取数据,减少了人为对建筑的损坏。使用法如大空间高精度三维激光扫描仪,对法惠庵塔进行三维可视化激光扫描建模,获取点云
    的头像 发表于 07-10 13:30 518次阅读
    泰来<b class='flag-5'>三维</b>|文物古迹数字化保护_<b class='flag-5'>三维</b>扫描墓塔