0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Jetson 百万开发者故事 | Jetson 开发者突破百万,从 TK1 到 Orin 我都经历了啥

NVIDIA英伟达 来源:未知 2023-04-04 01:45 次阅读

苏州泛科特机器人公司 CTO & 知乎 UP 主袁博融硕士毕业于多特蒙德工业大学电气工程与信息技术专业,深耕机器人及自动化等领域,同时也是 NVIDIA 的忠实用户,在 Jetson 开发者突破百万这一里程碑时刻,袁博融老师分享了他使用 NVIDIA Jetson 进行开发的故事与经验。

初识 NVIDIA Jetson 平台

袁博融老师是在硕士毕业前才接触 NVIDIA Jetson 的。那时刚完成论文答辩,有了些空闲时间,便趁着教育优惠还没到期入手了一套NVIDIA Jetson TX1

袁博融老师表示一开始也没有明确的开发目标,只是当一个和树莓派差不多的实验平台进行操作。但使用下来,他发现 Jetson 的配置显然比树莓派好得多,有 GPU 和 CUDA,还有 Ubuntu 系统,可以做 ROS 开发。在这一使用阶段,他在 Jetson 上面安装了 Jupyter,主要是用 OpenAI Gym 跑强化学习,做 RealSense 相机的测试。那时候在 Jetson上装 librealsense 还需要重新编译内核,现在已经方便多了。在这块板子上他学会了使用TensorRT,见识到了其在 AI 应用上的潜力。后来有了 TX2 和 Jetson Nano,这块板子的使命就结束了。

NVIDIA 在 Jetson 系统上做了很长时间的积累。Jetson 所使用的 Tegra SoC,初代产品 Tegra APX 2500 在 2008 年就已经发布,甚至比 GeForce 100 系还早。而 Jetson 平台的第一代产品 TK1 则在此 6 年之后才推出。他后来还收藏了搭载 Tegra K1 的 Yellowstone 平板,其性能不输 Jetson Nano。

上图是谷歌为 Tango 项目所开发的套件,发布于 2014 年。除了性能强大之外,它还搭载了 IMU,鱼眼相机,以及基于结构光的深度相机。即便系统几年前已不再更新,现在仍能在上面运行最新版的 RTAB-Map,可作为 VSLAM 开发的参考。Tango 项目实际只持续了 5 年,但极大促进了移动设备在环境感知、3D 重建、室内导航及增强现实等领域的技术发展,也为之后的 ARCore 奠定了基础。

NVIDIA Jetson 平台

成为机器人开发的好帮手

最近一两年,袁老师和他的团队的开发主要基于 Jetson Nano 和 Xavier NX,这两款模块具有较高的性价比与相互兼容的引脚设计。袁老师在知乎专栏中也和大家分享了一些有意思的应用,比如自制 3D 相机和运行 AI 围棋,这些都得益于 Jetson 强大的通用算力。

另外由于其小尺寸低功耗和兼容引脚设计,甚至还能用来做一些更加不同寻常的应用。比如矽递科技推出了 Jetson Mate 载板,可以同时搭载 4 块 Jetson Nano 或 Xavier NX。于是他也使用 4 块 Xavier NX 搭建了一台 Jetson 集群,还在其中设法嵌入了一个小尺寸无线路由。借助这台集群,可以方便地进行很多技术试验,比如 K8S 和 MinIO,MPI 并行计算,还有 ROS2 的 DDS 通信测试。

be5da5ea-d246-11ed-bfe3-dac502259ad0.jpg

作为机器人开发者,为了方便进行 SLAM 开发和测试,袁老师和他的团队搭建了一套手持 SLAM 平台。上面搭载了 Livox 激光雷达、GigE 相机、GNSS 模块、电池和触摸屏,使用Xavier NX作为主控。Xavier NX 不仅可以满足整套 SLAM 系统的实时运算,还为传感器提供了 PTP 同步服务。

be748bde-d246-11ed-bfe3-dac502259ad0.jpg

袁老师及团队还在开发一款使用 Xavier NX 作为主控的托盘搬运机器人。与众不同的是,他们在这台机器人上使用 DreamVu 的 PAL 全景深度相机作为主传感器。值得一提的是,DreamVu 也是 NVIDIA 生态圈的合作伙伴之一。两个团队正在一起为托盘搬运机器人开发更好且更具性价比的感知方案。

be8fa982-d246-11ed-bfe3-dac502259ad0.jpg

使用单个 PAL 相机就能实现 360° 的水平感知与 110° 的垂直感知覆盖,消除了所有盲区,这是其它传感器所无法提供的。而其得以实现也离不开 NVIDIA Jetson 的算力支持。使用单块 Xavier NX,就可以实时完成图像矫正、深度估计、目标检测,以及可通行区域检测。

不可错过的 NVIDIA Jetson 平台

随着更多的开发者加入,以及大家对 Jetson 平台有了更深的了解,袁老师及团队还将进一步挖掘其潜力。Jetson 最独特的优势在于提供了强大的通用算力。在机器人领域除了 AI 算法,还有很多算法可以并行化,这些都可以在 Jetson 上使用 GPU 或专有电路加速。NVIDIA 也提供Isaac平台以方便进行机器人应用开发。当 Orin 平台带来更强算力后,机器人领域也可能出现新的技术革命,相信我们很快就能见证全新一代机器人的出现。

“作为一名早期开发者,很开心看到 Jetson 系列在这几年内飞速发展,成为边缘计算领域最具吸引力的平台,让开发者们的各种奇思妙想得以实现。”袁老师表达了自己对于 NVIDIA Jetson 平台迅速发展的祝贺。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    22

    文章

    3739

    浏览量

    90786

原文标题:Jetson 百万开发者故事 | Jetson 开发者突破百万,从 TK1 到 Orin 我都经历了啥

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    KaihongOS 4.1.2开发者预览版正式上线,诚邀开发者免费试用!

    深开鸿在2024开放原子开源生态大会上正式宣布KaihongOS4.1.2开发者预览版全面上线,并向全球开发者开放免费下载。作为KaihongOS不断创新与发展的重要里程碑,此次预览版为开发者提供
    的头像 发表于 09-28 08:07 291次阅读
    KaihongOS 4.1.2<b class='flag-5'>开发者</b>预览版正式上线,诚邀<b class='flag-5'>开发者</b>免费试用!

    KaihongOS 4.1.2开发者预览版正式上线,诚邀开发者免费试用!

    开发者提供独特的抢先体验机会,涵盖了原生应用开发、分布式能力、原子化服务等核心功能特性,助力开发者探索国产操作系统的更多可能性。 此次发布的预览版适配RK3568、RK3588、ES
    的头像 发表于 09-26 15:59 411次阅读

    NVIDIA将全球数百万开发者转变为生成式 AI 开发者

    来自 AI 生态系统各个领域的 150 余家合作伙伴嵌入了 NIM 推理微服务,将企业级 AI 应用的部署时间数周缩短至几分钟 NVIDIA 开发者计划会员可免费使用 NIM 来进行研究、开发
    的头像 发表于 06-03 18:21 989次阅读

    NVIDIA NIM 革命性地改变模型部署,将全球数百万开发者转变为生成式 AI 开发者

    来自 AI 生态系统各个领域的 150 余家合作伙伴嵌入了 NIM 推理微服务,将企业级 AI 应用的部署时间数周缩短至几分钟 NVIDIA 开发者计划会员可免费使用 NIM 来进行研究、开发
    发表于 06-03 09:12 210次阅读
    NVIDIA NIM 革命性地改变模型部署,将全球数<b class='flag-5'>百万</b><b class='flag-5'>开发者</b>转变为生成式 AI <b class='flag-5'>开发者</b>

    鸿蒙开发者预览版如何?

    、原生智能、原生互联,6大极致原生体验。 初步阅读了鸿蒙的源码后,基本上可以确定是全自研底座,已经看不到Android的身影。作为开发者,如果想往鸿蒙方向发展,就需要系统性学起。鸿蒙的知识体系如下
    发表于 02-17 21:54

    鸿蒙系统优缺点,能否作为开发者选择

    星河版已经是纯血鸿蒙,但是它的发展一些周期。生态圈的建立难度大,各大厂商加入鸿蒙原生开发需要时间累积。 鸿蒙开发人才空缺,由于鸿蒙作为一款新型的系统,程序员们都是0学起。所以市面上很少有鸿蒙
    发表于 02-16 21:00

    华为宣布HarmonyOS NEXT鸿蒙星河版开发者预览面向开发者开放申请

    华为宣布HarmonyOS NEXT鸿蒙星河版开发者预览面向开发者开放申请,这意味着鸿蒙生态进入第二阶段,将加速千行百业的应用鸿蒙化。
    的头像 发表于 01-29 16:42 1358次阅读
    华为宣布HarmonyOS NEXT鸿蒙星河版<b class='flag-5'>开发者</b>预览面向<b class='flag-5'>开发者</b>开放申请

    您有一份OpenHarmony开发者论坛2023年度总结,请查收~

    体验用户,并迅速在论坛开启 OpenHarmony 技术交流。 通过开发者们在论坛进行提问、答疑、分享技术文章、技术资料等方式为论坛沉淀丰富的 OpenHarmony 技术知识。 对此
    发表于 01-26 17:27

    有奖征文第一弹 | 携手百万开发者 共创 AI 新未来

    携手百万开发者,共创 AI 新未来 NVIDIA 百万中国开发者故事有奖征文 活动已于 12 月 14 日拉开帷幕。 现正在火热进行中! 超
    的头像 发表于 12-22 17:15 339次阅读
    有奖征文第一弹 | 携手<b class='flag-5'>百万</b><b class='flag-5'>开发者</b> 共创 AI 新未来

    有奖征文 | NVIDIA 携手中国百万开发者共创 AI 美好未来

    一个科技生态的建设与成熟, 需要历经时间的酝酿和发酵。 只有当生态中的“细胞”活跃起来时, 所构筑的生态才能一步步走向繁荣, 也才能不断结出新的果实, 甚至孕育出新的物种。 而开发者, 就如
    的头像 发表于 12-14 16:35 324次阅读

    开发者说】开发案例:使用canvas实现图表系列之折线图

    】,即可获得投稿渠道。期待你们的分享~ 由于对HarmonyOS的兴趣与开发需求,已经打卡学习ArkTS语言28天。在模拟开发历史项目的时候,会经常需要使用到图表这类样式展示,
    的头像 发表于 12-13 16:05 582次阅读
    【<b class='flag-5'>开发者</b>说】<b class='flag-5'>开发</b>案例:使用canvas实现图表系列之折线图

    欢迎加入飞腾派开发者社区,感谢每一位开发者

    ://bbs.elecfans.com/group_1708 飞腾派开发者社区部分内容截图 回顾合作历程,2023年开始,华秋 · 电子发烧友就与飞腾建立了密切的合作关系,双方团队共同努力,实现许多
    发表于 12-11 16:11

    TUYA开发者大会(苏州)盛大开幕,涂鸦智能携手全球开发者共建IoT新生态

    11月28日,TUYA开发者大会在苏州盛大举行,此次大会以“智融创新,智赋姑苏”为主题,涂鸦智能携手来自全球各地的品牌制造商、平台产品服务商、系统集成商、地产商以及人工智能企业等,为开发者们分享
    的头像 发表于 12-08 15:49 856次阅读
    TUYA<b class='flag-5'>开发者</b>大会(苏州)盛大开幕,涂鸦智能携手全球<b class='flag-5'>开发者</b>共建IoT新生态

    开发者说】开发案例分享:万能卡片也能用来玩游戏

    】,即可获得投稿渠道。期待你们的分享~ 一 前言 作为一名开发爱好讲,学习并进行HarmonyOS相关
    的头像 发表于 11-30 21:15 505次阅读
    【<b class='flag-5'>开发者</b>说】<b class='flag-5'>开发</b>案例分享:万能卡片也能用来玩游戏

    HarmonyOS NEXT让开发者快速上手媒体生态一致体验开发

    系统相机的效果好?”,“为什么的应用和其他的音乐一起发声要怎么处理” 以及“应该怎么做才能在系统的播控中心里可以看到?”等问题。对于开发者
    的头像 发表于 11-22 16:20 625次阅读
    HarmonyOS NEXT让<b class='flag-5'>开发者</b>快速上手媒体生态一致体验<b class='flag-5'>开发</b>