0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Jetson 百万开发者故事 | NVIDIA Jetson 如何成为可移动智能脑机交互平台

NVIDIA英伟达 来源:未知 2023-03-10 23:10 次阅读

脑机交互技术是探索大脑功能,治疗大脑疾病的重要手段,目前已经被广泛应用于脑信息解码、脑控、脑疾病生物标记物检测、脑功能监测及脑疾病干预等多个方面。为了推动脑机交互技术的智能化发展,为脑科学研究及脑疾病诊治提供新技术,复旦大学类脑人工智能科学与技术研究院副院长王守岩教授团队开创性地应用NVIDIA Jetson 边缘计算平台,打造了可移动智能脑机交互平台,并应用该平台进行了一系列脑疾病相关的科学及转化研究。

王守岩教授和他的课题组团队

NVIDIA Jetson 软硬件赋能

脑机交互技术如虎添翼

为了满足脑机交互技术的智能化需求,平台负责人李岩博士将目光放在了NVIDIA Jetson Nano身上。“我们要打造的是一个具备可移动、高实时性、易拓展的智能脑机交互平台,NVIDIA Jetson Nano 套件在硬件及软件支持上都是非常合适的选择。”李岩博士说。

很快,团队就利用 NVIDIA Jetson Nano 套件构建了一个原型机,其核心结构主要包含三个模块:Jetson Nano Kit、有线电生理信号采集模块以及有线电刺激模块。模块与模块之间通过有线连接的方式集成,在系统响应层面能够实现毫秒级别的实时性。

06788800-bf54-11ed-bfe3-dac502259ad0.png

脑机平台的原型

整个原型机以 NVIDIA Jetson Nano 边缘计算芯片为计算核心,基于 L4T 系统搭建了实时处理的软件框架,该框架具备应用 NVIDIA 加速神经网络推理工具的能力,例如 TensorRT。

除了支持深度学习通用框架的编码和模型加速能力外, Jetson Nano 平台还包含了丰富的外设接口,包括 SPI、UARTUSB 等,非常适合控制多种不同类型的外设,结合不同的外设,使得该原型机能够拓展控制更多的外部设备,从而使得平台具备多维信号感知和刺激能力。目前,该平台支持多通道的人体电生理信号(脑电、心电、肌电)、运动信号(旋转角、加速度、转速)及姿势(视频监测)的多维度信息采集能力,具备高速在线数字信号处理及推理人工智能模型的计算能力,以及控制声光电设备对人体进行刺激的治疗能力。

“由于可以便捷地利用 NVIDIA Jetson 的软硬件资源,我们的平台能够快速兼容新的信号感知和刺激输出硬件,使得平台的应用拓展更加顺利,进一步推动平台的应用转化。”平台软件框架负责人聂英男博士说道。

智能脑机交互平台初显锋芒

为帕金森病的诊断、监护和治疗提供帮助

随着我国社会老龄化程度的加深,与年龄密切相关的脑疾病患者呈上升趋势,而帕金森病就是一种常见的神经系统变性疾病,在老年人群中多发。该疾病在全人群中的患病率约为 0.3%,但患病率有会随年龄的增高而增加的趋势,在 65 岁以上的老年人群中,帕金森病的患病率为 1-2%,而在 85 岁以上人群其患病率增加到了 3-5%。

“帕金森病首发症状通常是一侧肢体的震颤或活动笨拙,进而累及对侧肢体。临床上主要表现为静止性震颤、运动迟缓、肌强直和姿势步态障碍。患者往往需要忍受极大的生理和心理上的痛苦。”李岩博士介绍说,“对帕金森病运动症状的量化评估、监护及新疗法研究,会在改善病人生活质量和缓解社会压力方面发挥巨大的作用。”

目前,智能脑机交互的原型机可以实现运动行为记录、基于脑电信号的注意力分析、基于肌电信号的运动姿态判别、模拟神经振荡信号分类任务,以及基于帕金森大鼠深部脑电信号的闭环神经治疗任务。

在日常监护方面,平台通过视频和运动传感,分析病人在生活中的异常姿势状态,在可能出现的危害人身安全的情境下进行报警或联系病人家属等操作,尽可能保护病人的正常生活,避免疾病带来的进一步损伤。

在新疗法研究方面,平台通过实时分析病人的脑电信号,在特定的疾病相关的信号特征出现后给予电刺激治疗,形成一种闭环的治疗方式。“大脑深部脑电信号中的神经振荡活动是反应帕金森病的重要标记物,我们模拟了 beta(13-30Hz)振荡信号的状态分类任务,” 李岩博士介绍:“为了保证分类的实时性,我们使用了NVIDIA TensorRT加速了 CNN 网络,速度提升了 6 倍左右。”

与 NVIDIA Jetson 系列共同成长

随着云计算网络通信以及智能终端的发展,智能边缘计算平台必将融入到这种新型模式下,实现长时间的大数据分析、个性化建模、病程预测、干预等任务,以更好的计算效率、体系化的数据处理以保证高精度、高效率的个性化建模及预测。

我们很高兴成为 NVIDIA Jetson 百万开发者的一员,非常感谢 NVIDIA 人工智能中心、中国教育领域合作团队持续的有力支持,使得我们有可能将前沿技术转化应用到脑科学研究中,未来我们将集成更强大的 Jetson 计算核心,目前已经在Jetson AGX Orin上进行整体软件框架的调试。我们希望平台可以面向更多的脑功能探索和脑疾病展开应用,服务于神经科学家、临床医生,为脑疾病特别是老龄化相关的脑疾病的监护、评估和治疗发展提供助力!”王守岩教授说。

王守岩教授在“脑科学与类脑研究”重大项目、科技部国家重点研发计划、上海市科技重大专项等国家和上海市科研项目的支持下,带领人工智能算法、智能电子、临床神经生理等科学家团队加速推动以人工智能算法、移动边缘计算为核心的脑机交互神经调控技术在临床的转化应用。

像王守岩教授及团队一样的开发者朋友们可以免费报名参加 GTC 的Jetson 边缘 AI 开发者日活动。NVIDIA 专家将在活动上介绍最新的 Jetson 硬件、软件和合作伙伴。内容包括:

  • 使用 NVIDIA Jetson 软件加速边缘 AI 的开发

https://www.nvidia.cn/gtc-global/session-catalog/?tab.catalogallsessionstab=16566177511100015Kus&search=Jetson#/session/1675122992275001FUuE

  • 使用 NVIDIA Jetson Orin 平台提升边缘 AI 和机器人技术水平

https://www.nvidia.cn/gtc-global/session-catalog/?tab.catalogallsessionstab=16566177511100015Kus&search=Jetson#/session/1668040615028001N01j

  • 使用 NVIDIA Nsight 开发者工具充分发挥 Jetson Orin 的作用

https://www.nvidia.cn/gtc-global/session-catalog/?tab.catalogallsessionstab=16566177511100015Kus&search=Jetson#/session/1675124636163001GyIr

  • 使用 NVIDIA Jetson 生态系统加快产品上市速度

https://www.nvidia.cn/gtc-global/session-catalog/?tab.catalogallsessionstab=16566177511100015Kus&search=Jetson#/session/1675125146374001Sj7X

另外,GTC 期间更有一场以 Jetson 平台为主题的专家交流分会届时参加者可以与 NVIDIA 嵌入式平台工程师开展深度问答。这场互动交流会提供了一个独家机会,让您可以团队或个人形式与 NVIDIA 产品幕后人员见面,答疑解惑。活动席位有限,先到先得。

复制链接粘贴至浏览器进行注册:

https://www.nvidia.cn/gtc-global/session-catalog/?tab.catalogallsessionstab=16566177511100015Kus&search=Jetson#/session/1670472065129001rf2z

如果您想要更加深入地了解如何利用 NVIDIA 技术助力医疗健康领域,也欢迎加入GTC23 医疗健康与生命科学精选会议:

https://www.nvidia.cn/gtc-global/sessions/healthcare-life-sciences/?ncid=so-wech-481805

//

Jetson “百万开发者”有奖征集活动正在火热进行中。作为 Jetson “百万开发者”的一员,感谢您陪伴 Jetson 走过的开发之路。无论是企业、工程师、发烧友还是学生,我们相信每一位开发者都和 Jetson 有着不一样的故事。快来参与有奖征集活动,说出您与 Jetson 的故事,无论是开发创造的经典案例,还是学习构建的心得体验,都欢迎您畅所欲言,更有惊喜好礼等您拿!

推荐阅读

Jetson 开发者破百万,快来说出你的开发故事吧

点击 “阅读原文” 或扫描下方海报二维码,即可免费注册 GTC23,在 3 月 24 日 听 OpenAI 联合创始人与 NVIDIA 创始人的炉边谈话,将由 NVIDIA 专家主持,配中文讲解和实时答疑,一起看 AI 的现状和未来!

06d45c16-bf54-11ed-bfe3-dac502259ad0.jpg


原文标题:Jetson 百万开发者故事 | NVIDIA Jetson 如何成为可移动智能脑机交互平台

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    22

    文章

    3720

    浏览量

    90665

原文标题:Jetson 百万开发者故事 | NVIDIA Jetson 如何成为可移动智能脑机交互平台

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    使用机器学习和NVIDIA Jetson边缘AI和机器人平台打造机器人导盲犬

    Selin Alara Ornek 是一名富有远见的高中生。她使用机器学习和 NVIDIA Jetson 边缘 AI 和机器人平台,为视障人士打造了机器人导盲犬。 该项目名为 IC4U
    的头像 发表于 11-08 10:05 155次阅读

    NVIDIA JetPack 6.0版本的关键功能

    NVIDIA JetPack SDK 支持 NVIDIA Jetson 模块,为构建端到端加速 AI 应用提供全面的解决方案。JetPack 6 通过微服务和一系列新功能,扩展了 Jetson
    的头像 发表于 09-09 10:18 296次阅读
    <b class='flag-5'>NVIDIA</b> JetPack 6.0版本的关键功能

    NVIDIA将全球数百万开发者转变为生成式 AI 开发者

    来自 AI 生态系统各个领域的 150 余家合作伙伴嵌入了 NIM 推理微服务,将企业级 AI 应用的部署时间从数周缩短至几分钟 NVIDIA 开发者计划会员可免费使用 NIM 来进行研究、开发
    的头像 发表于 06-03 18:21 966次阅读

    NVIDIA NIM 革命性地改变模型部署,将全球数百万开发者转变为生成式 AI 开发者

    来自 AI 生态系统各个领域的 150 余家合作伙伴嵌入了 NIM 推理微服务,将企业级 AI 应用的部署时间从数周缩短至几分钟 NVIDIA 开发者计划会员可免费使用 NIM 来进行研究、开发
    发表于 06-03 09:12 206次阅读
    <b class='flag-5'>NVIDIA</b> NIM 革命性地改变模型部署,将全球数<b class='flag-5'>百万</b><b class='flag-5'>开发者</b>转变为生成式 AI <b class='flag-5'>开发者</b>

    Nvidia Jetson Nano + CYW55573/AWXB327MA-PUR M.2无法使用操作系统内置的网络管理器管理Wi-Fi如何解决?

    我们使用的是 Nvidia Jetson Nano + CYW55573/AWXB327MA-PUR M.2 ,请参阅 Nvidia Jetson 与英飞凌 AIROC Wi-Fi 6
    发表于 05-23 06:47

    机智云开发者中心:让移动APP应用开发智能

    智能化和高效。   新版本开发者中心的介绍 机智云物联网新版本开发者中心是一款专为开发者设计的一体化开发工具,旨在提供更
    的头像 发表于 03-26 16:45 304次阅读
    机智云<b class='flag-5'>开发者</b>中心:让<b class='flag-5'>移动</b>APP应用<b class='flag-5'>开发</b>更<b class='flag-5'>智能</b>化

    NVIDIA Jetson为嵌入式计算领域探索AI可能

    自动化业务流程、通过数据分析获得洞察力、与客户和员工互动……如今 AI 正在大幅提高生产力,推动竞争优势。NVIDIA Jetson 是适用于自主机器和其他嵌入式应用的先进平台,具有出色的 AI 性能,
    的头像 发表于 01-25 17:03 487次阅读
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Jetson</b>为嵌入式计算领域探索AI可能

    FPGA模拟MIPI相机接入Jetson方案

    视觉相机是机器智能/自动化的关键,NVIDIA Jetson支持多个合作伙伴的Camera,这些相机包括USB、以太网、MIPI等接口的相机。
    的头像 发表于 01-04 09:51 2155次阅读
    FPGA模拟MIPI相机接入<b class='flag-5'>Jetson</b>方案

    涂鸦开发者平台支持三方 IoT 平台平滑迁移部署

    近期,大量开发者在问询如何迁移至涂鸦IoT开发者平台。如何保障原先平台上的存量设备和业务的正常运作?如何选择新的安全、稳定、灵活、可控的云平台
    的头像 发表于 12-30 08:15 926次阅读
    涂鸦<b class='flag-5'>开发者</b><b class='flag-5'>平台</b>支持三方 IoT <b class='flag-5'>平台</b>平滑迁移部署

    有奖征文第一弹 | 携手百万开发者 共创 AI 新未来

    携手百万开发者,共创 AI 新未来 NVIDIA 百万中国开发者故事有奖征文 活动已于 12 月
    的头像 发表于 12-22 17:15 331次阅读
    有奖征文第一弹 | 携手<b class='flag-5'>百万</b><b class='flag-5'>开发者</b> 共创 AI 新未来

    有奖征文 | NVIDIA 携手中国百万开发者共创 AI 美好未来

    同那些最活跃的“细胞”, 是激活和繁荣生态的关键因子。 今天,中国已有超过 100 万开发者注册并使用 NVIDIA 产品及解决方案,这距离 2016 年 NVIDIA 开发者社区官方
    的头像 发表于 12-14 16:35 318次阅读

    NVIDIA Jetson 的嵌入式系统AI应用

    在这个平台上可以使用多个不同的芯片 ,案例的主角是AIMobile AIM Edge Ncox,一款基于NVIDIA Jetson Orin NX的小型被动冷却嵌入式系统。该系统具有6-8个Arm内核和
    发表于 12-11 17:37 519次阅读

    欢迎加入飞腾派开发者社区,感谢每一位开发者

    板紧密地结合在一起,为开发者提供了一个展示和分享自己才华的平台。 基于此次合作,飞腾(广州)技术有限公司给华秋 · 电子发烧友发来了感谢信,这是对此次合作的充分肯定! 来自飞腾派项目组的感谢信
    发表于 12-11 16:11

    NVIDIA再出手!加速开发边缘AI应用,迎接生成式AI新纪元

    NVIDIA 近日宣布,对适用于边缘 AI 和机器人的 NVIDIA Jetson 平台上的两个框架进行大规模扩展。NVIDIA Isaac
    的头像 发表于 11-23 17:31 1017次阅读
    <b class='flag-5'>NVIDIA</b>再出手!加速<b class='flag-5'>开发</b>边缘AI应用,迎接生成式AI新纪元

    在线研讨会 | 在 Jetson 上使用 Metropolis API 和微服务加速边缘人工智能开发

      API 和微服务集合具备强大功能,能够帮助开发者们加快在 NVIDIA Jetson 平台开发和部署视觉 AI 的速度,使用时从数年缩
    的头像 发表于 11-10 17:35 254次阅读
    在线研讨会 | 在 <b class='flag-5'>Jetson</b> 上使用 Metropolis API 和微服务加速边缘人工<b class='flag-5'>智能开发</b>