案例简介
国讯芯微(NIIC)专注于自主实时操作系统和 EtherCAT 协议栈的研发与应用十余年,汇聚了一批业内顶尖的工程师和科研人员,始终致力于为智能制造输出自主可控核心技术产品。
国讯芯微的具身智能控制平台 NSPIC-R006NP 具备强大的 GPU 和 CPU 计算能力,内置 NECRO 硬实时操作系统,适配 Ubuntubase 系统,并通过 EtherCAT 多主站 NIIC EtherCAT Master 2.0 将控制逻辑与机器人或系统的物理特性紧密结合,能够实时处理复杂的机器人控制任务。该平台支持多种设备的接口,具有丰富的软件开发工具和生态资源,便于开发者进行定制化开发和优化。
在具身智能中的挑战
传统异构方案
目前绝大多数人形机器人企业都在采用传统 X86+AI 芯片的具身智能控制平台。然而,这其中存在显著的缺点和痛点。网络延迟问题会导致机器人实时响应能力受限,影响手眼协调等复杂任务执行。其次,RT-Linux 系统的不稳定性和 EtherCAT 协议栈的潜在问题会使得多程序运行时抖动大,运动控制不稳定,从而增加了运行风险。再者,X86 与 AI 芯片间的协同工作十分复杂,系统整合难度大,性能下降和延时增加,难以满足全身多关节高性能控制需求。这些痛点限制了机器人在复杂环境中的应用,尤其是在实时可靠性和端到端升级方面。因此,保持系统同构性,实现无缝衔接和高效协作成为人形机器人企业的迫切需求。
NIIC 新型单一 SOC 平台
国讯芯微是目前全球极少数能够在 AI SOC 平台上植入高性能实时操作系统和运动控制平台的企业,NSPIC-R006NP 具身智能控制平台在解决传统 X86+AI 芯片控制平台问题方面取得了显著的进步,通过将感知、识别和决策过程融合在一个一体化的系统中,并利用 NECRO 实时操作系统的多进程和多线程功能,成功实现了 nS 级别的交互速度,相较于传统 X86+AI 芯片控制器的 mS 级别交互速度,这无疑是一个巨大的提升。
NVIDIA 与国讯芯微携手共创
高效人形机器人控制解决方案
新型平台架构
多模态感知的使用使得机器人能够获取更加丰富和准确的环境信息,而基于 GPU(大脑智能决策)的识别过程则能够迅速对这些信息进行处理和分析。CPU(小脑)负责运动控制,能够根据识别结果迅速做出反应,再利用 NECRO 实时操作系统的多进程和多线程功能,最后成功实现纳秒级别的交互速度。这种一体化的设计不仅提高了系统的实时性和响应速度,还有助于减少数据传输延迟和网络稳定性问题。由于所有过程都在一个系统中完成,有效降低了整合性的挑战,使得整个系统更加稳定和可靠。
强大的 AI 计算能力
NSPIC-R006NP 具身智能控制平台基于 NVIDIA AGX Orin 64GB SOC,高达 275 TOPS 的 AI 算力,能够实现 13B-70B 的大模型推演。
为了进一步提升 AI 性能,NSPIC-R006NP 特别利用了 NVIDIA CUDA 和先进的 AI 大模型技术,能够在短时间内完成大量高性能、高精度的目标识别、图像处理和分析任务,极大地提升了人形机器控制器的感知和决策能力。
核心软件:
实时操作系统 NECRO
人形机器人所有的数据采集、数据训练必须高速同步,如果采集到的视觉是 1 秒之前的数据,而雷达却是 5 秒之后的数据,那么大模型的训练就失去了意义。而实时操作系统所带来的价值,就是保证大模型的训练建立在相同的时间基础上,所有的多模态感知采集和计算都是时间精准的,能够向训练服务器推送相同时间轴的同步数据,这样才能完成 transformer,才能真正实现端到端。
国讯芯微 100% 自主研发的 NECRO 囚牛实时操作系统作为管理整个信号传递的核心组件,微秒级操作系统抖动、纳秒级中断响应速度,这样强力的性能能够确保信号在系统中的高效、准确传递,为机器人的实时感知、决策和执行提供坚实基础。Cyclictest 最大值不超过 2uS,在满载、满 CPU、满内存、满 IO、满存储、满内存压力之下,最大值不超过 10uS,从而实现最佳的整体性能。
EC 抖动 4uS 以内
在开发过程中,国讯芯微严格遵循 AGX 芯片手册和全寄存器手册的规范,确保系统的稳定性和兼容性,成功地将 NECRO 囚牛内核移植到 Orin 系列上,并为其量身打造了相应的板级支持包(BSP)。
核心软件:EtherCAT 多主站同步
在具身智能控制中,ETherCAT 通信确保了机器人能够快速、准确地执行决策,实现全身关节的协同运动。
国讯芯微自主知识产权 EtherCAT 多主站 NIIC EtherCAT Master 2.0 正是如此,可以有效减少数据传输的延迟和抖动。NIIC EtherCAT Master 2.0 能够确保每个主站独立工作,最小控制周期都为 125uS,多主站之间可以实现 nS 级数据同步。可将双手、双腿、头与躯干等所有的传感器分配到不同的主站中,以 125uS 的 2 次方倍数控制周期同相位高速协同。
多模态生态
国讯芯微打通了多模态生态中的各个环节,在这个生态中,国讯芯微以 AGX 作为核心控制,不仅整合了尖端的硬件组件,如关节、灵巧手、全 GMSL 视觉系统,还配备了雷达、环形六麦听觉传感器、电子皮肤、触摸传感器以及唇语识别摄像头等,为机器人提供了全方位的感知和交互能力。可打包支持提供给人形机器人企业,无需再进行软件 SDK 适配、多方采购等繁琐的适配工作。
NSPIC-R006NP 通过实时同步采集的高质量数据集,然后利用视觉-语言模型 VLM 进行数据处理或分析,并将该模型或其输出结果加载到 AGX 的 GPU 上,以实现快速推理或计算。同时,NSPIC-R006NP还提供 Isaac Sim 仿真平台上的 NSPIC-R006NP 控制器仿真模型,帮助客户在复杂环境中测试和优化算法,加速机器人和 AI 系统的开发。
关于端到端的加速,国讯芯微认为高质量数据集的实时并发采集,能够有机会在更少的真实物理世界参数模型下加速完成大模型的训练,并减少推理模型的容量,而且人形机器人并非是个全才,也和人类一样有分工,未来的具身不会是一个通用就能解决一切问题,而是各类应用集的 7B/8B 模型的集群,根据不同场景切换,因此如果可以将特定场景的 7B/8B 模型在 AGX 内以 30-40 Tokens/S 来推理,是有可能直接推理出全身动力学和轨迹规划的,也就是 MBC 将是通过 transformer 架构由 GPU 推出来的最优解,同时结合 CPU 已经成熟积累的 WPC 算法,实现更好的行为预测和执行。国讯芯微的目标是如何在现有软硬件架构下把硬件利用率发挥到极致。同时,成本也是人形机器人能否快速进入市场的核心要素。
NVIDIA 推动国讯芯微
人形机器人控制器技术升级
“做最好的控制器架构,让算法和工艺有最肥沃的土壤,服务于大家是我们的核心理念。”国讯芯微联合创始人兼 CTO 蒋琛表示。
NVIDIA AGX Orin 64GB 提供了丰富的开发工具和资源,为 NSPIC-R006NP 提供了领先的 AI 计算能力和运动控制能力,使得开发者能够更快速、更高效地开发出高性能的人形机器人产品,有助于企业缩短研发周期,降低研发成本,帮助国讯芯微控制器在市场上获得更强的竞争力,保证实现人形机器人控制最优方案。
人形机器人作为下一个 AI 浪潮,未来产业化落地将创造大量的控制器需求;控制器相比执行器更为“无形”,但对机器人本体的表现起到至关重要的作用,且长期的发展迭代可能成为拉开距离的关键点,是各家公司的核心技术。
国讯芯微(NIIC)在国产实时操作系统和软 PLC 运动控制行业扎根十多年,始终致力于为智能制造输出自主化可控核心技术产品。
公司研发自主化 NOM 系列产品,并结合自主研发的工业实时操作系统 NECRO 和 NECRO SUPER STUDIO 软 PLC IDE 构成了一套完整的控制系统平台产品,为智能制造领域提供实时操作系统 SDK、IDE 工具链和完整的自动化、运动控制解决方案。
国讯芯微于 2023 年研发了全国首款具身智能控制平台 NSPIC-R006NP,实现大小脑端到端协同控制,先后荣获“Leaderobot 2024 年度人形机器人核心驱动奖”、“2024 年人形机器人供应链优质企业”。
*本文中图片来源于国讯芯微,若您有任何疑问或需要使用本文中图片,请联系国讯芯微。
NVIDIA 初创加速计划
国讯芯微(NIIC)是 NVIDIA 初创加速计划 (NVIDIA Inception) 会员企业。 NVIDIA 初创加速计划为免费会员制,旨在培养颠覆行业格局的优秀创业公司。该计划联合国内外知名的风投机构、创业孵化器、创业加速器、行业合作伙伴以及科技创业媒体等,打造创业加速生态系统。能够提供产品折扣、技术支持、市场宣传、融资对接、业务推荐等一系列服务,加速创业公司的发展。
-
机器人
+关注
关注
211文章
28328浏览量
206824 -
NVIDIA
+关注
关注
14文章
4967浏览量
102916 -
操作系统
+关注
关注
37文章
6776浏览量
123257
原文标题:初创加速计划 | 基于 NVIDIA Jetson 平台,国讯芯微实现大小脑端到端协同控制
文章出处:【微信号:NVIDIA-Enterprise,微信公众号:NVIDIA英伟达企业解决方案】欢迎添加关注!文章转载请注明出处。
发布评论请先 登录
相关推荐
评论