0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Jetson 百万开发者故事 | 让 AI 成为铁路客运站自动扶梯安全管控的关键

NVIDIA英伟达 来源:未知 2023-04-11 09:10 次阅读

铁路客运站必不可少的自动扶梯是旅客乘降的重要工具,具有客流量大、负荷满和运行时间长的特点。同时,自动扶梯的安全事关旅客生命安全与铁路企业声誉。媒体关注度高、社会影响大,是客运站安全管理的重点和难点。其中,行人摔倒、出入口拥挤、婴儿车违规上自动扶梯是最常见也最棘手的三类安全隐患。

现阶段,大部分客运站自动扶梯的安全管理以“人盯”的方式为主,由专门工作人员在旅客乘降的关键时间进行提醒和看护,以防止意外事故的发生,这大大消耗了车站的人力。因此,有必要通过信息化、智能化的手段,从客运站自动扶梯安全隐患分析、安全监控系统需求设计,及安全监控系统功能设计等方面,对铁路客运站自动扶梯的安全进行管控。

从防止事故发生开始做起

近年来基于深度学习机器视觉技术飞速发展,其广泛的使用场景、高效的运行效率和精准的识别率,得到了越来越多的关注。而行为识别作为近年计算机视觉领域的研究热点,为认识和理解人类运动和行为提供了一些新的方法,也为智能化监控乘客搭乘自动扶梯的行为提供了可行的思路。

来自中国铁路南宁局集团有限公司的一支年轻开发团队,在研发经理袁泉的带领下,正在进行铁路客运站自动扶梯智能安全管控关键技术研究。通过人工智能视频检测分析来防止事故的发生,以声光方式提醒搭乘电扶梯的旅客注意安全,从而达到尽最大可能降低伤害与损失的目的。

eeb582ee-d804-11ed-bfe3-dac502259ad0.jpg

中国铁路南宁局集团有限公司研发团队合影

具体的操作步骤如下:

  • 在客运站设置摄像头采集自动扶梯周围图像;

  • 在边缘设备上使用机器视觉算法对图像进行检测分析,重点捕捉行人摔倒、出入口拥挤,及婴儿车违规上自动扶梯等三类情况的图像;

  • 在客户端,对报警数据进行显示,同样用户也可以对报警区域进行自定义设置。

这样在保证监控准确性的同时,优化了机器视觉算法效率,节约了设备算力,也保证了系统运行的实时性和流畅性。

eeca606a-d804-11ed-bfe3-dac502259ad0.png

图 1 系统设计

在边缘计算设备的选择上,团队选择了联宝 LCFC EA-B310 加固式系统。该系统搭载了 NVIDIA Jetson Xavier NX 核心模块,能以 15W 的低功耗提供高达 21TOPS 的实时推理能力。不仅如此,该设备尺寸小巧,安装灵活,接口丰富, 具备灵活的扩展能力。同时利用本地云技术构建、部署和管理来自 NVIDIA NGC 的预训练 AI 模型。通过 LCFC IOT console 管理平台,充分利用容器化部署带来灵活和无缝的更新,可以全生命周期管理模型,确保快速上市和降低部署成本。

eee61f80-d804-11ed-bfe3-dac502259ad0.png

图2 联宝 LCFC EA-B310

利用 AI 技术降低“误报”几率

当前对于人体动作识别最常用的检测方法是基于人体骨骼关键点的方法,其特点是鲁棒性强、泛化性强,而且可以基于时序分析。“自动扶梯人员密度较高,不论是 Top-Down 还是 Down-Top 的人体关键点检测,都容易在人员较多或者相互遮挡的时候,出现关键点检测的混乱,”谈到项目的挑战,袁经理如是说,“另外,关键点检测的算力消耗也较大,在四路视频实时工作的情况下,FPS 较低,也不是很理想。”

经过团队的测试,最终选用的是分类模型,这样的模型能够捕捉到摔倒的人体和正常的人体特征上的区别。目前在自动扶梯出入口常见的摔倒姿势都能被准确捕捉,比如蹲下、坐下、躺下及趴下等。

“虽然使用分类模型能较为准确地判断摔倒,但是我们还是希望获得特定对象的跟踪 ID,以获得一些时序上的信息,目的就在于避免误报!”袁经理表示:“一个目标如果连续若干帧出现异常,我们才真正认为异常已经发生。这是避免误报的一种手段。”

团队最终选择在联宝 LCFC EA-B310 上使用 NVIDIA DeepStream 处理自动扶梯出入口处布置的四个摄像头读取的行人数据。通常情况下需要定制开发的软件来处理相机数据,不过通过 DeepStream 内置功能的优势,以及搭配 NVIDIA Jetson 产品,这个过程几乎没有摩擦。只需要配置好参数,就可以利用 DeepStream 内置的跟踪插件 Gst-nvtracker,方便快捷地获得特定对象的跟踪 ID。同时,利用 DeepStream 提供的 Gst-nvdsanalytics 插件,可以轻松对 ROI 区域进行智能分析 。在正常的情况下,四路摄像头可达到 15fps。

“实时性选择跳帧处理后可以达到 25fps,”袁泉说:“我们对这个结果还是十分满意的!”

为了防止系统崩溃或者车站断电之后现场人员手足无措,团队还特意设置了重启功能,可以让边缘计算设备开机,自动运行安全监控系统。

软件和 AI 模型的更新通常需要数周时间完成,但是研发团队使用 NVIDIA 平台显著加快了开发时间,确保了开发和部署流程的快速性,更重要的是,能够在现场环境中测试软件,确保准确性和 FPS 符合解决方案的要求。

对 NVIDIA Jetson 开发者们的建议

袁经理表示:“NVIDIA Jetson 设备提供了强大的计算能力,但如果代码没有充分利用设备的功能,可能会导致性能瓶颈。因此,建议开发者们学习优化代码的一些技巧,以实现更好的性能。这包括使用 GPU 加速、减少数据传输和内存使用、使用并行计算等技术。此外,在进行商业化部署的时候,需要实施错误处理和故障排除机制,以确保应用程序的可靠性和稳定性。”


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    22

    文章

    3770

    浏览量

    90991

原文标题:Jetson 百万开发者故事 | 让 AI 成为铁路客运站自动扶梯安全管控的关键

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    NVIDIA发布小巧高性价比的Jetson Orin Nano Super开发者套件

    NVIDIA近期推出了一款全新的生成式AI超级计算机——Jetson Orin Nano Super开发者套件。这款开发者套件以其小巧的尺寸和高性价比吸引了广泛关注。
    的头像 发表于 12-19 11:28 302次阅读

    云端AI开发者工具怎么用

    云端AI开发者工具通常包括代码编辑器、模型训练平台、自动化测试工具、代码管理工具等。这些工具不仅降低了AI开发的门槛,还极大地提高了
    的头像 发表于 12-05 13:31 112次阅读

    Arm推出GitHub平台AI工具,简化开发者AI应用开发部署流程

    软件提供了无缝的开发体验。 GitHub Actions、原生 GitHub 运行器和基于 Arm 平台的 AI 框架相结合,帮助全球 2,000 万开发者简化 AI 应用
    的头像 发表于 10-31 18:51 1979次阅读

    多项AI新成果发布,涂鸦智能引领全球开发者共绘GenAI发展蓝图

    的全新启发。【TUYA全球开发者大会(苏州)外展区】AI更懂用户搭载AI大模型的「小智管家」正式开启内测随着家居场景中智能设备数量的逐年增长以及呈现的产品多样化发
    的头像 发表于 09-27 10:00 525次阅读
    多项<b class='flag-5'>AI</b>新成果发布,涂鸦智能引领全球<b class='flag-5'>开发者</b>共绘GenAI发展蓝图

    NVIDIA将全球数百万开发者转变为生成式 AI 开发者

    来自 AI 生态系统各个领域的 150 余家合作伙伴嵌入了 NIM 推理微服务,将企业级 AI 应用的部署时间从数周缩短至几分钟 NVIDIA 开发者计划会员可免费使用 NIM 来进行研究、
    的头像 发表于 06-03 18:21 1023次阅读

    NVIDIA NIM 革命性地改变模型部署,将全球数百万开发者转变为生成式 AI 开发者

    来自 AI 生态系统各个领域的 150 余家合作伙伴嵌入了 NIM 推理微服务,将企业级 AI 应用的部署时间从数周缩短至几分钟 NVIDIA 开发者计划会员可免费使用 NIM 来进行研究、
    发表于 06-03 09:12 225次阅读
    NVIDIA NIM 革命性地改变模型部署,将全球数<b class='flag-5'>百万</b><b class='flag-5'>开发者</b>转变为生成式 <b class='flag-5'>AI</b> <b class='flag-5'>开发者</b>

    2024 TUYA全球开发者大会盛大启幕,Cube AI大模型重磅首发!

    AI浪潮席卷全球的当下,把握时代脉搏,全面拥抱生成式AI成为共识。面对AI带来的无限可能,开发者们纷纷投身其中,积极探寻
    的头像 发表于 05-31 08:15 350次阅读
    2024 TUYA全球<b class='flag-5'>开发者</b>大会盛大启幕,Cube <b class='flag-5'>AI</b>大模型重磅首发!

    2024 TUYA全球开发者大会盛大启幕,Cube AI大模型重磅首发!

    2024 TUYA全球开发者大会上,重磅推出AI大模型、AI开发工具、AI小程序开发基座等重量级
    发表于 05-30 09:13 224次阅读
    2024 TUYA全球<b class='flag-5'>开发者</b>大会盛大启幕,Cube <b class='flag-5'>AI</b>大模型重磅首发!

    Create 2024百度AI开发者大会 带来了哪些新技术?

    发表了主题为“人人都是开发者”的主旨演讲。他强调了AI正在掀起一场创造力革命,并预测未来开发应用将变得像拍摄短视频一样简单,人人都可以成为开发者
    发表于 04-17 09:55 1375次阅读
    Create 2024百度<b class='flag-5'>AI</b><b class='flag-5'>开发者</b>大会 带来了哪些新技术?

    Create2024百度AI开发者大会深圳开幕

    Create2024百度AI开发者大会深圳开幕 4月16日至17日,以“创造未来(Create the Future)”为主题的百度Create AI开发者大会在深圳国际会展中心(宝安
    的头像 发表于 04-16 15:13 863次阅读
    Create2024百度<b class='flag-5'>AI</b><b class='flag-5'>开发者</b>大会深圳开幕

    开发者手机 AI - 目标识别 demo

    功能简介 该应用是在Openharmony 4.0系统上开发的一个目标识别的AI应用,旨在从上到下打通Openharmony AI子系统,展示Openharmony系统的AI能力,并为
    发表于 04-11 16:14

    机智云开发者中心:移动APP应用开发更智能化

    在移动应用市场的蓬勃发展中,开发者们面临着不断提高效率和创新的挑战。为了帮助开发者更好地实现移动应用开发的目标,机智云物联网的新版开发者中心,通过
    的头像 发表于 03-26 16:45 335次阅读
    机智云<b class='flag-5'>开发者</b>中心:<b class='flag-5'>让</b>移动APP应用<b class='flag-5'>开发</b>更智能化

    鸿蒙开发者预览版如何?

    在24年的华为鸿蒙发布会中表示。预览版已经向开发者开放申请,首批支持的机型有三款分别为华为 Mate 60、华为Mate 60 Pro、华为Mate X5。 其HarmonyOS NEXT去除
    发表于 02-17 21:54

    您有一份OpenHarmony开发者论坛2023年度总结,请查收~

    2023 年 11 月,OpenHarmony 开发者论坛 1.0 版本正式上线。 感谢各位开发者对 OpenHarmony 的大力支持和热爱,成为 OpenHarmony 开发者论坛
    发表于 01-26 17:27

    HarmonyOS SDK,助力开发者打造焕然一新的鸿蒙原生应用

    提供 AI 基础能力、AI 控件、意图框架分层开放,使能应用原生智能;系统领域中一系列安全控件,为可信的开发和运行环境筑基,丰富的通信服务
    发表于 01-19 10:31