网易首页 > 网易号 > 正文 申请入驻

基于 NVIDIA Jetson 平台,国讯芯微实现大小脑端到端协同控制

0
分享至

案例简介

国讯芯微(NIIC)专注于自主实时操作系统和 EtherCAT 协议栈的研发与应用十余年,汇聚了一批业内顶尖的工程师和科研人员,始终致力于为智能制造输出自主可控核心技术产品。

国讯芯微的具身智能控制平台 NSPIC-R006NP 具备强大的 GPU 和 CPU 计算能力,内置 NECRO 硬实时操作系统,适配 Ubuntubase 系统,并通过 EtherCAT 多主站 NIIC EtherCAT Master 2.0 将控制逻辑与机器人或系统的物理特性紧密结合,能够实时处理复杂的机器人控制任务。该平台支持多种设备的接口,具有丰富的软件开发工具和生态资源,便于开发者进行定制化开发和优化。

本案例主要应用到NVIDIA AGX Orin 64GB

X86+AI 芯片控制平台

在具身智能中的挑战

传统异构方案

目前绝大多数人形机器人企业都在采用传统 X86+AI 芯片的具身智能控制平台。然而,这其中存在显著的缺点和痛点。网络延迟问题会导致机器人实时响应能力受限,影响手眼协调等复杂任务执行。其次,RT-Linux 系统的不稳定性和 EtherCAT 协议栈的潜在问题会使得多程序运行时抖动大,运动控制不稳定,从而增加了运行风险。再者,X86 与 AI 芯片间的协同工作十分复杂,系统整合难度大,性能下降和延时增加,难以满足全身多关节高性能控制需求。这些痛点限制了机器人在复杂环境中的应用,尤其是在实时可靠性和端到端升级方面。因此,保持系统同构性,实现无缝衔接和高效协作成为人形机器人企业的迫切需求。

NIIC 新型单一 SOC 平台

国讯芯微是目前全球极少数能够在 AI SOC 平台上植入高性能实时操作系统和运动控制平台的企业,NSPIC-R006NP 具身智能控制平台在解决传统 X86+AI 芯片控制平台问题方面取得了显著的进步,通过将感知、识别和决策过程融合在一个一体化的系统中,并利用 NECRO 实时操作系统的多进程和多线程功能,成功实现了 nS 级别的交互速度,相较于传统 X86+AI 芯片控制器的 mS 级别交互速度,这无疑是一个巨大的提升。

NVIDIA 与国讯芯微携手共创

高效人形机器人控制解决方案

新型平台架构

多模态感知的使用使得机器人能够获取更加丰富和准确的环境信息,而基于 GPU(大脑智能决策)的识别过程则能够迅速对这些信息进行处理和分析。CPU(小脑 )负责运动控制,能够根据识别结果迅速做出反应,再利用 NECRO 实时操作系统的多进程和多线程功能,最后成功实现纳秒级别的交互速度。这种一体化的设计不仅提高了系统的实时性和响应速度,还有助于减少数据传输延迟和网络稳定性问题。由于所有过程都在一个系统中完成,有效降低了整合性的挑战,使得整个系统更加稳定和可靠。

强大的 AI 计算能力

NSPIC-R006NP 具身智能控制平台基于 NVIDIA AGX Orin 64GB SOC,高达 275 TOPS 的 AI 算力,能够实现 13B-70B 的大模型推演。

为了进一步提升 AI 性能,NSPIC-R006NP 特别利用了NVIDIA CUDA和先进的 AI 大模型技术,能够在短时间内完成大量高性能、高精度的目标识别、图像处理和分析任务,极大地提升了人形机器控制器的感知和决策能力。

核心软件:

实时操作系统 NECRO

人形机器人所有的数据采集、数据训练必须高速同步,如果采集到的视觉是 1 秒之前的数据,而雷达却是 5 秒之后的数据,那么大模型的训练就失去了意义。而实时操作系统所带来的价值,就是保证大模型的训练建立在相同的时间基础上,所有的多模态感知采集和计算都是时间精准的,能够向训练服务器推送相同时间轴的同步数据,这样才能完成 transformer,才能真正实现端到端。

国讯芯微 100% 自主研发的 NECRO 囚牛实时操作系统作为管理整个信号传递的核心组件,微秒级操作系统抖动、纳秒级中断响应速度,这样强力的性能能够确保信号在系统中的高效、准确传递,为机器人的实时感知、决策和执行提供坚实基础。Cyclictest 最大值不超过 2uS,在满载、满 CPU、满内存、满 IO、满存储、满内存压力之下,最大值不超过 10uS,从而实现最佳的整体性能。

EC 抖动 4uS 以内

在开发过程中,国讯芯微严格遵循 AGX 芯片手册和全寄存器手册的规范,确保系统的稳定性和兼容性,成功地将 NECRO 囚牛内核移植到 Orin 系列上,并为其量身打造了相应的板级支持包(BSP)。

核心软件:EtherCAT 多主站同步

在具身智能控制中,ETherCAT 通信确保了机器人能够快速、准确地执行决策,实现全身关节的协同运动。

国讯芯微自主知识产权 EtherCAT 多主站 NIIC EtherCAT Master 2.0 正是如此,可以有效减少数据传输的延迟和抖动。NIIC EtherCAT Master 2.0 能够确保每个主站独立工作,最小控制周期都为 125uS,多主站之间可以实现 nS 级数据同步。可将双手、双腿、头与躯干等所有的传感器分配到不同的主站中,以 125uS 的 2 次方倍数控制周期同相位高速协同。

多模态生态

国讯芯微打通了多模态生态中的各个环节,在这个生态中,国讯芯微以 AGX 作为核心控制,不仅整合了尖端的硬件组件,如关节、灵巧手、全 GMSL 视觉系统,还配备了雷达、环形六麦听觉传感器、电子皮肤、触摸传感器以及唇语识别摄像头等,为机器人提供了全方位的感知和交互能力。可打包支持提供给人形机器人企业,无需再进行软件 SDK 适配、多方采购等繁琐的适配工作。

NSPIC-R006NP 通过实时同步采集的高质量数据集,然后利用视觉-语言模型 VLM 进行数据处理或分析,并将该模型或其输出结果加载到 AGX 的 GPU 上,以实现快速推理或计算。同时,NSPIC-R006NP 还提供Isaac Sim仿真平台上的 NSPIC-R006NP 控制器仿真模型,帮助客户在复杂环境中测试和优化算法,加速机器人和 AI 系统的开发。

关于端到端的加速,国讯芯微认为高质量数据集的实时并发采集,能够有机会在更少的真实物理世界参数模型下加速完成大模型的训练,并减少推理模型的容量,而且人形机器人并非是个全才,也和人类一样有分工,未来的具身不会是一个通用就能解决一切问题,而是各类应用集的 7B/8B 模型的集群,根据不同场景切换,因此如果可以将特定场景的 7B/8B 模型在 AGX 内以 30-40 Tokens/S 来推理,是有可能直接推理出全身动力学和轨迹规划的,也就是 MBC 将是通过 transformer 架构由 GPU 推出来的最优解,同时结合 CPU 已经成熟积累的 WPC 算法,实现更好的行为预测和执行。国讯芯微的目标是如何在现有软硬件架构下把硬件利用率发挥到极致。同时,成本也是人形机器人能否快速进入市场的核心要素。

NVIDIA 推动国讯芯微

人形机器人控制器技术升级

“做最好的控制器架构,让算法和工艺有最肥沃的土壤,服务于大家是我们的核心理念。”国讯芯微联合创始人兼 CTO 蒋琛表示。

NVIDIA AGX Orin 64GB 提供了丰富的开发工具和资源,为 NSPIC-R006NP 提供了领先的 AI 计算能力和运动控制能力,使得开发者能够更快速、更高效地开发出高性能的人形机器人产品,有助于企业缩短研发周期,降低研发成本,帮助国讯芯微控制器在市场上获得更强的竞争力,保证实现人形机器人控制最优方案。

人形机器人作为下一个 AI 浪潮,未来产业化落地将创造大量的控制器需求;控制器相比执行器更为“无形”,但对机器人本体的表现起到至关重要的作用,且长期的发展迭代可能成为拉开距离的关键点,是各家公司的核心技术。

国讯芯微(NIIC)在国产实时操作系统和软 PLC 运动控制行业扎根十多年,始终致力于为智能制造输出自主化可控核心技术产品。

公司研发自主化 NOM 系列产品,并结合自主研发的工业实时操作系统 NECRO 和 NECRO SUPER STUDIO 软 PLC IDE 构成了一套完整的控制系统平台产品,为智能制造领域提供实时操作系统 SDK、IDE 工具链和完整的自动化、运动控制解决方案。

国讯芯微于 2023 年研发了全国首款具身智能控制平台 NSPIC-R006NP,实现大小脑端到端协同控制,先后荣获“Leaderobot 2024 年度人形机器人核心驱动奖”、“2024 年人形机器人供应链优质企业”。

*本文中图片来源于国讯芯微,若您有任何疑问或需要使用本文中图片,请联系国讯芯微。

NVIDIA 初创加速计划

国讯芯微(NIIC)是 NVIDIA 初创加速计划 (NVIDIA Inception) 会员企业。

NVIDIA 初创加速计划为免费会员制,旨在培养颠覆行业格局的优秀创业公司。该计划联合国内外知名的风投机构、创业孵化器、创业加速器、行业合作伙伴以及科技创业媒体等,打造创业加速生态系统。能够提供产品折扣、技术支持、市场宣传、融资对接、业务推荐等一系列服务,加速创业公司的发展。

想获得 NVIDIA 初创加速生态助力?扫描下方二维码,仅需一分钟填写意向申请表单,获得快速联系。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
冲着颜值和肉体,看完了Netflix的狗血新剧

冲着颜值和肉体,看完了Netflix的狗血新剧

来看美剧
2026-01-22 20:22:59
给大家发钱了,退休人员养老金提高2%,企业、个人都有贴息福利

给大家发钱了,退休人员养老金提高2%,企业、个人都有贴息福利

恪守原则和底线
2026-01-22 06:05:05
官方出手了!吴磊床照事件再升级,何猷君被曝出轨,赵露思被牵连

官方出手了!吴磊床照事件再升级,何猷君被曝出轨,赵露思被牵连

查尔菲的笔记
2026-01-20 16:05:51
河北孟村杀妻案二审判决书已送达,孩子抚养权官司已启动

河北孟村杀妻案二审判决书已送达,孩子抚养权官司已启动

九方鱼论
2026-01-22 13:10:54
同样是不敌中国队,看看澳大利亚、乌兹别克斯坦、越南都怎么说

同样是不敌中国队,看看澳大利亚、乌兹别克斯坦、越南都怎么说

不写散文诗
2026-01-22 19:44:04
王朔说:“中国有一个怪象:家里越是穷的,亲戚之间只在过年走动

王朔说:“中国有一个怪象:家里越是穷的,亲戚之间只在过年走动

深度报
2026-01-20 22:15:41
中日开战可能性增大,但收场太难,若真动手,中方估计半步都不退

中日开战可能性增大,但收场太难,若真动手,中方估计半步都不退

百态人间
2026-01-03 16:42:15
属鸡人注意:这两个姓氏的人是你的“福星”,和他们深交可助你

属鸡人注意:这两个姓氏的人是你的“福星”,和他们深交可助你

卡西莫多的故事
2026-01-22 09:41:15
连续两场三盘过关!大坂直美晋级澳网第3轮,赛后握手闹不愉快

连续两场三盘过关!大坂直美晋级澳网第3轮,赛后握手闹不愉快

全景体育V
2026-01-22 18:47:33
医生警告:不要买!不要吃!里面含有硼砂,危害健康,别害自己

医生警告:不要买!不要吃!里面含有硼砂,危害健康,别害自己

谁将主宰未来
2026-01-21 20:02:38
亿元大奖没了?中国彩票重磅调整

亿元大奖没了?中国彩票重磅调整

中国新闻周刊
2026-01-20 17:59:16
“让我睡一次,不然死给你看!”17岁少年持刀,威胁舅妈发生关系

“让我睡一次,不然死给你看!”17岁少年持刀,威胁舅妈发生关系

有书
2026-01-09 21:30:59
从千年名茶到化学试剂:我们的茶叶怎么了?

从千年名茶到化学试剂:我们的茶叶怎么了?

富贵说
2026-01-21 11:19:58
泡泡玛特新品“电子木鱼”出圈,隐藏款被炒到超300元,溢价超两倍!

泡泡玛特新品“电子木鱼”出圈,隐藏款被炒到超300元,溢价超两倍!

华尔街见闻官方
2026-01-22 20:11:42
人民日报四评“贾罗之争”:不是拉偏架

人民日报四评“贾罗之争”:不是拉偏架

黑企鹅观察
2026-01-22 14:26:56
女明星的“妈妈臀”上热搜,网友吵翻了!医生:适度的小肚腩和臀部脂肪是健康的

女明星的“妈妈臀”上热搜,网友吵翻了!医生:适度的小肚腩和臀部脂肪是健康的

极目新闻
2026-01-21 15:48:28
维多利亚「臭脸瞪媳妇」影片疯传! 她杀人眼神超恐怖:气氛尴尬

维多利亚「臭脸瞪媳妇」影片疯传! 她杀人眼神超恐怖:气氛尴尬

ETtoday星光云
2026-01-21 13:30:16
霸气,马刺队文班亚马向其他全明星球员发出挑战:全力以赴

霸气,马刺队文班亚马向其他全明星球员发出挑战:全力以赴

好火子
2026-01-23 01:14:35
一场追悼会,戳穿向华强夫妇在香港的真实地位,原来李连杰没说谎

一场追悼会,戳穿向华强夫妇在香港的真实地位,原来李连杰没说谎

凡知
2026-01-21 17:14:40
苍天已死,新局当立!达沃斯炸锅:加拿大翻脸,反美这次是真的。

苍天已死,新局当立!达沃斯炸锅:加拿大翻脸,反美这次是真的。

花心电影
2026-01-23 02:15:09
2026-01-23 02:44:49
NVIDIA英伟达中国 incentive-icons
NVIDIA英伟达中国
英伟达(中国)官方账号
3370文章数 1438关注度
往期回顾 全部

科技要闻

几千亿只是开胃菜,AI基建还得再砸几万亿

头条要闻

“和平委员会”签约国家名单公布 西欧国家无一参加

头条要闻

“和平委员会”签约国家名单公布 西欧国家无一参加

体育要闻

跑个步而已,他们在燃什么?

娱乐要闻

车银优赚800亿 涉嫌逃税200亿!

财经要闻

西贝拿到“救命钱”,然后呢

汽车要闻

配备多块娱乐屏 极氪8X内饰曝光

态度原创

家居
房产
旅游
艺术
公开课

家居要闻

法式风情 南洋中古居

房产要闻

开年王炸!四重政策红利加码,广州置业窗口期迈入倒计时!

旅游要闻

降温也能赏花海?上海这里太懂浪漫

艺术要闻

265米!中集集团全球总部开工,大楼如一幅“山水画”

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版