网易首页 > 网易号 > 正文 申请入驻

训练效率提升3.5倍!京东云率先支持具身智能千卡开源训练框架

0
分享至

近日,京东云JoyBuilder模型开发平台迎来全新升级,成功支撑业界顶尖模型GR00T N1.5的千卡训练,成为行业首家支持具身智能千卡级LeRobot开源训练框架的AI开发平台,且训练效率较开源社区版本提升3.5倍。基于软硬件深度调优和算法层面的突破,大幅提升了模型训练效率与稳定性,1亿+数据的千卡训练时间从15小时缩短至22分钟,加速具身智能迈向规模化落地。


1、JoyBuilder三大优势,全面加速具身智能模型训练

近年来,具身智能成为AI领域的重要研究方向,但训练一个高效的具身模型,需要同步处理图像、文本和连续动作信号等众多环节,在工程落地方面存在着数据供给读取慢、算力效率低下,以及数据预处理和存储I/O与GPU计算等多个环节未能有效协同产生的性能瓶颈,是具身智能从实验室走向规模化落地的最大挑战。

围绕具身智能模型训练,京东云AI Infra及相关团队基于JoyBuilder模型研发平台进行了全栈优化:

在具身数据链路优化方面,通过重构具身数据预处理与加载流程,JoyBuilder平台实现CPU数据处理与GPU计算异步执行,减少等待时间。针对海量具身小数据文件,自研的高性能并行文件系统云海JPFS通过分布式元数据管理与智能预取,支持高并发访问。在1024卡集群上,读取带宽超过400GB/s,保障数据持续高速供给。

在具身模型计算优化方面,针对主流开源的VLA(视觉-语言-动作)模型的计算特点从Attention层、Token裁剪和训练后量化等多方位极致优化,全方位提升模型的训练效率。

在具身模型基础设施方面:通过搭建3.2T RDMA后端网络,基于多轨道优化、拓扑感知调度与智能震荡抑制,保障千卡间集合通信的高吞吐与低延迟,并在单点故障时快速恢复,支持长周期训练稳定运行。同时,基于云原生的AI数据湖优化了数据调度与流水线,提升端到端处理效率。

2、行业首家支持具身模型千卡级开源训练框架

具身智能的发展依赖于算法、数据、算力及基础设施的系统化协同,京东云JoyBuilder模型开发平台,基于在全链路数据处理、模型计算效率和AI基础设施等的全面优化,支持业界当前最主流的LeRobot训练数据最新协议,并成为行业首家支持具身模型千卡级开源训练框架的AI开发平台。

首先,支持业界最广泛的训练数据新协议。早期LeRobot V2.1数据协议采用“单 episode 单文件”设计,大规模样本训练时,海量小文件易导致数据加载瓶颈和存储压力。京东云JoyBuilder平台支持一键升级至“多 episode 合并分片”的V3协议,同时解决原生框架训练过程中数据链路低效问题,经过并行流水线和高效索引查询优化,将训练数据供给速度提升超10倍,显著提升云侧算力利用率和训练效率,满足大规模分布式训练需求。

其次,作为行业首家支持具身模型千卡级的开源训练框架的AI开发平台,京东云JoyBuilder基于开源LeRobot框架,首次实现GR00T模型的千卡分布式高效训练,训练效率较开源社区版本提升3.5倍,1亿+数据千卡训练时间从15小时缩短至22分钟、提速40倍,大幅降低了千卡训练的使用门槛与运行成本。


第三,基于对主流开源具身VLA模型效率的极致优化,采用动态计算优化,引入变长Flash-Attention与Data Packing技术、训练提速188%;仅对有效token进行计算,减少填充带来的算力损耗,Token裁剪优化训练提速165%以上;使用训练后细粒度FP8量化,在基本保持模型精度前提下,将权重压缩超过36%、提速140%以上。

当前,基于京东集团复杂场景实践,京东云已经构建了一站式大模型产品矩阵,从底层的智算基础设施,到中间层的模型服务和工具,再到上层的Agent应用开发,支持具身智能企业快速部署大模型及AI应用,共同推动机器人更好地理解和服务物理世界,开启人机协作的新篇章。

本文源自:金融界资讯

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
2026 日本高中学费全免,定住外中国籍小孩和留学生除外!专家:助长排外主义!

2026 日本高中学费全免,定住外中国籍小孩和留学生除外!专家:助长排外主义!

东京在线
2026-01-04 20:20:35
曼联更衣室分裂!12人不满高层+声援阿莫林 4000万红星嘲讽惹众怒

曼联更衣室分裂!12人不满高层+声援阿莫林 4000万红星嘲讽惹众怒

我爱英超
2026-01-06 07:44:48
巴拿马总统:已正式通知中国,退出一带一路计划,中方送出4个字

巴拿马总统:已正式通知中国,退出一带一路计划,中方送出4个字

瞳哥视界
2026-01-05 21:48:45
汕头13岁男孩被烫伤休克去世 多部门回应

汕头13岁男孩被烫伤休克去世 多部门回应

看看新闻Knews
2026-01-06 12:33:17
为什么国家已经明牌了要拉股市,但是很多人还是不相信慢牛来了?

为什么国家已经明牌了要拉股市,但是很多人还是不相信慢牛来了?

小白鸽财经
2026-01-06 07:05:03
新生儿预测腰斩,但生育率远未触底

新生儿预测腰斩,但生育率远未触底

大川东山再起
2026-01-06 10:33:24
建筑工人摇晃围栏喊“要出去吃饭”;知情人:限制外出吃饭要求在食堂吃;中建一局:情况已上报

建筑工人摇晃围栏喊“要出去吃饭”;知情人:限制外出吃饭要求在食堂吃;中建一局:情况已上报

大风新闻
2026-01-05 19:47:03
影后辛芷蕾,这张照片摄影师得加鸡腿,抓拍的太到位了

影后辛芷蕾,这张照片摄影师得加鸡腿,抓拍的太到位了

徐帮阳
2025-12-23 18:33:38
“最美新生儿”火了,似乎在娘胎整容化妆一般,全网都想沾喜气

“最美新生儿”火了,似乎在娘胎整容化妆一般,全网都想沾喜气

菁妈育儿
2026-01-03 12:44:30
马杜罗:不认罪!委内瑞拉下令抓内鬼!

马杜罗:不认罪!委内瑞拉下令抓内鬼!

中国基金报
2026-01-06 07:52:07
闹大了!日媒:电车渗透率已超50%,中国汽车是不是应该反思?​

闹大了!日媒:电车渗透率已超50%,中国汽车是不是应该反思?​

阿纂看事
2026-01-05 16:05:20
2026年1月1日刚过,不少人去医院开药就发现规矩变了

2026年1月1日刚过,不少人去医院开药就发现规矩变了

百态人间
2026-01-06 05:00:03
雷军等小米高管评论区被冲后!徐洁云回应投放大熊:向米粉道歉…

雷军等小米高管评论区被冲后!徐洁云回应投放大熊:向米粉道歉…

柴狗夫斯基
2026-01-06 08:26:06
中国民众呼声高涨:既然美国能活捉马杜罗,大陆为何不抓赖清德?

中国民众呼声高涨:既然美国能活捉马杜罗,大陆为何不抓赖清德?

博览历史
2026-01-04 18:50:59
36年前陈宝国主演的盗墓恐怖片!尺度大到少儿不宜

36年前陈宝国主演的盗墓恐怖片!尺度大到少儿不宜

释凡电影
2025-08-14 09:33:19
黄鹤楼景区应修北门?建议来了

黄鹤楼景区应修北门?建议来了

极目新闻
2026-01-06 10:23:04
黄宗泽哭着拿双料视帝,27年TVB生涯,10次提名终于熬出头

黄宗泽哭着拿双料视帝,27年TVB生涯,10次提名终于熬出头

手工制作阿歼
2026-01-06 09:42:26
落难将军香港求生记:从中将到码头苦力的十年

落难将军香港求生记:从中将到码头苦力的十年

比利
2026-01-04 10:14:15
工信部、央视点名!新国标车让人“无车可骑”?商家:价格贵700元

工信部、央视点名!新国标车让人“无车可骑”?商家:价格贵700元

朝子亥
2026-01-05 19:45:03
高峰也没想到,他当年抛弃的儿子,如今开始给那英争光了

高峰也没想到,他当年抛弃的儿子,如今开始给那英争光了

趣文说娱
2026-01-04 16:34:24
2026-01-06 15:20:49
金融界 incentive-icons
金融界
投资者信赖的财经金融门户网站
9194706文章数 545658关注度
往期回顾 全部

科技要闻

速看!黄仁勋万字实录:甩出"物理AI"王牌

头条要闻

美媒:大批美军机突然飞往欧洲 主要型号为C-17运输机

头条要闻

美媒:大批美军机突然飞往欧洲 主要型号为C-17运输机

体育要闻

从NBA最菜首发控卫,到NBA最强乔治

娱乐要闻

朱媛媛遗作《小城大事》定档1月10日

财经要闻

丁一凡:中美进入相对稳定的竞争共存期

汽车要闻

让智驾能看懂真实世界 英伟达发布开源Alpamayo平台

态度原创

艺术
家居
本地
教育
游戏

艺术要闻

2026马年赵孟頫高清集字春联大放送,收藏备用!

家居要闻

引光之宅 地下室也有生机

本地新闻

云游内蒙|初见呼和浩特,古今交融的北疆都会

教育要闻

高中英语怎么样快速提分,初中完形一般错2个,进入高中错6个打底

《燕云》重磅性能优化公布 开封皇宫NPC超3000人!

无障碍浏览 进入关怀版