网易首页 > 网易号 > 正文 申请入驻

训练效率提升3.5倍!京东云率先支持具身智能千卡开源训练框架

0
分享至

近日,京东云JoyBuilder模型开发平台迎来全新升级,成功支撑业界顶尖模型GR00T N1.5的千卡训练,成为行业内率先支持具身智能千卡级LeRobot开源训练框架的AI开发平台,且训练效率较开源社区版本提升3.5倍。基于软硬件深度调优和算法层面的突破,大幅提升了模型训练效率与稳定性,1亿+数据的千卡训练时间从15小时缩短至22分钟,加速具身智能迈向规模化落地。



1、JoyBuilder三大优势,全面加速具身智能模型训练

近年来,具身智能成为AI领域的重要研究方向,但训练一个高效的具身模型,需要同步处理图像、文本和连续动作信号等众多环节,在工程落地方面存在着数据供给读取慢、算力效率低下,以及数据预处理和存储I/O与GPU计算等多个环节未能有效协同产生的性能瓶颈,是具身智能从实验室走向规模化落地的最大挑战。

围绕具身智能模型训练,京东云AI Infra及相关团队基于JoyBuilder模型研发平台进行了全栈优化:

在具身数据链路优化方面,通过重构具身数据预处理与加载流程,JoyBuilder平台实现CPU数据处理与GPU计算异步执行,减少等待时间。针对海量具身小数据文件,自研的高性能并行文件系统云海JPFS通过分布式元数据管理与智能预取,支持高并发访问。在1024卡集群上,读取带宽超过400GB/s,保障数据持续高速供给。

在具身模型计算优化方面,针对主流开源的VLA(视觉-语言-动作)模型的计算特点从Attention层、Token裁剪和训练后量化等多方位极致优化,全方位提升模型的训练效率。

在具身模型基础设施方面:通过搭建3.2T RDMA后端网络,基于多轨道优化、拓扑感知调度与智能震荡抑制,保障千卡间集合通信的高吞吐与低延迟,并在单点故障时快速恢复,支持长周期训练稳定运行。同时,基于云原生的AI数据湖优化了数据调度与流水线,提升端到端处理效率。

2、行业内率先支持具身模型千卡级开源训练框架

具身智能的发展依赖于算法、数据、算力及基础设施的系统化协同,京东云JoyBuilder模型开发平台,基于在全链路数据处理、模型计算效率和AI基础设施等的全面优化,支持业界当前最主流的LeRobot训练数据最新协议,并成为行业内率先支持具身模型千卡级开源训练框架的AI开发平台。

首先,支持业界最广泛的训练数据新协议。早期LeRobot V2.1数据协议采用“单episode单文件”设计,大规模样本训练时,海量小文件易导致数据加载瓶颈和存储压力。京东云JoyBuilder平台支持一键升级至“多episode合并分片”的V3协议,同时解决原生框架训练过程中数据链路低效问题,经过并行流水线和高效索引查询优化,将训练数据供给速度提升超10倍,显著提升云侧算力利用率和训练效率,满足大规模分布式训练需求。

其次,作为行业内率先支持具身模型千卡级的开源训练框架的AI开发平台,京东云JoyBuilder基于开源LeRobot框架,首次实现GR00T模型的千卡分布式高效训练,训练效率较开源社区版本提升3.5倍,1亿+数据千卡训练时间从15小时缩短至22分钟、提速40倍,大幅降低了千卡训练的使用门槛与运行成本。



第三,基于对主流开源具身VLA模型效率的极致优化,采用动态计算优化,引入变长Flash-Attention与Data Packing技术、训练提速188%;仅对有效token进行计算,减少填充带来的算力损耗,Token裁剪优化训练提速165%以上;使用训练后细粒度FP8量化,在基本保持模型精度前提下,将权重压缩超过36%、提速140%以上。

当前,基于京东集团复杂场景实践,京东云已经构建了一站式大模型产品矩阵,从底层的智算基础设施,到中间层的模型服务和工具,再到上层的Agent应用开发,支持具身智能企业快速部署大模型及AI应用,共同推动机器人更好地理解和服务物理世界,开启人机协作的新篇章。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
美司令曾警告:若大陆武力收台,美军将摧毁中方火箭军和核武库!

美司令曾警告:若大陆武力收台,美军将摧毁中方火箭军和核武库!

壹知眠羊
2025-12-21 07:15:19
前国脚定居西班牙多年,卖5套房花费1000万,如今没有工作吃老本

前国脚定居西班牙多年,卖5套房花费1000万,如今没有工作吃老本

素衣读史
2025-12-30 18:06:27
1952年深夜,志愿军战士全都熟睡时,一战士因入党睡不着立下奇功

1952年深夜,志愿军战士全都熟睡时,一战士因入党睡不着立下奇功

抽象派大师
2026-01-08 07:13:15
分手8年,胖到认不出的coco自曝私密事,89岁谢贤还要为风流买单

分手8年,胖到认不出的coco自曝私密事,89岁谢贤还要为风流买单

好贤观史记
2026-01-06 15:20:16
有人预测:从2026年开始,存款超过50万以上家庭,会面对三大问题

有人预测:从2026年开始,存款超过50万以上家庭,会面对三大问题

蜉蝣说
2025-12-31 11:03:55
钱再多有啥用!“展昭”何家劲的现状,给所有老年男性提了个醒

钱再多有啥用!“展昭”何家劲的现状,给所有老年男性提了个醒

阿笎评论哥
2026-01-08 06:40:37
美媒:中国洲际隐身轰炸机高清照首次亮相。远超B21

美媒:中国洲际隐身轰炸机高清照首次亮相。远超B21

世家宝
2026-01-07 11:59:10
14周连跌,俄罗斯油价暴跌至36美元/桶

14周连跌,俄罗斯油价暴跌至36美元/桶

桂系007
2026-01-07 23:47:14
越闹越大!南京博物院事件可怕的不是拍卖,关键人物疑似浮出水面

越闹越大!南京博物院事件可怕的不是拍卖,关键人物疑似浮出水面

开心快乐火火
2025-12-27 09:12:35
古天乐《寻秦记》口碑爆棚,影片为何惨遭删减超过30分钟

古天乐《寻秦记》口碑爆棚,影片为何惨遭删减超过30分钟

千信齐飞
2026-01-06 02:03:15
守不住,阿森纳连续20次联赛对利物浦每场都失球

守不住,阿森纳连续20次联赛对利物浦每场都失球

懂球帝
2026-01-08 22:09:15
沙特给C罗开的价码,一句话:离谱到让普通人怀疑人生。

沙特给C罗开的价码,一句话:离谱到让普通人怀疑人生。

南权先生
2025-12-31 15:59:56
长城汽车正式取消“大小周”,全面落实双休制度,员工:刚开始听到消息,以为是谣言不敢信

长城汽车正式取消“大小周”,全面落实双休制度,员工:刚开始听到消息,以为是谣言不敢信

大风新闻
2026-01-06 16:58:03
97岁田华现状曝光,和小孙子相依为命,住破旧老房子,日子清贫

97岁田华现状曝光,和小孙子相依为命,住破旧老房子,日子清贫

以茶带书
2025-12-02 18:11:43
1月8日俄乌:特朗普开 “绿灯”,俄单日损失创2026年新高

1月8日俄乌:特朗普开 “绿灯”,俄单日损失创2026年新高

山河路口
2026-01-08 18:15:34
芬兰公司宣布量产全球首款全固态电池,5分钟可充满,能量密度400Wh/kg

芬兰公司宣布量产全球首款全固态电池,5分钟可充满,能量密度400Wh/kg

金融界
2026-01-06 14:03:20
2026年湖南厅级第一虎:湖南省农村信用社联合社党委副书记、主任蒋俊文被查

2026年湖南厅级第一虎:湖南省农村信用社联合社党委副书记、主任蒋俊文被查

新浪财经
2026-01-08 17:19:50
包养情人无数,玩老婆闺蜜,娶初中同学女儿为妻,孙道存有多荒唐

包养情人无数,玩老婆闺蜜,娶初中同学女儿为妻,孙道存有多荒唐

瓜汁橘长Dr
2026-01-06 10:11:41
齐达内执掌曼联的终极 B 计划:钦点 4 大巨星 竟暗藏利物浦功勋

齐达内执掌曼联的终极 B 计划:钦点 4 大巨星 竟暗藏利物浦功勋

澜归序
2026-01-08 04:41:17
最年轻的Win11,被24岁的WinXP吊打了?六代系统同台“对决”,Win11几乎全线垫底……

最年轻的Win11,被24岁的WinXP吊打了?六代系统同台“对决”,Win11几乎全线垫底……

CSDN
2026-01-08 18:13:36
2026-01-09 01:04:49
中国经济网 incentive-icons
中国经济网
国家重点新闻网站
45591文章数 474404关注度
往期回顾 全部

科技要闻

智谱拿下“全球大模型第一股”,凭什么

头条要闻

19岁小伙在柬疑被16万转卖 与母亲视频时按"酒窝"求救

头条要闻

19岁小伙在柬疑被16万转卖 与母亲视频时按"酒窝"求救

体育要闻

世乒赛银牌得主,说自己梦里都是孙颖莎

娱乐要闻

抗战剧《马背摇篮》首播,获观众好评

财经要闻

微软CTO韦青:未来人类会花钱"戒手机"

汽车要闻

从量变到"智"变 吉利在CES打出了五张牌

态度原创

亲子
游戏
旅游
教育
公开课

亲子要闻

家长注意了!这7件事别再孩子面前做!

山寨《黑神话》续作上架 PS 商店 / 《GTA 6》或第三次跳票

旅游要闻

美翻了!深圳一地铁口惊现浪漫果冻海

教育要闻

高二不救,基本原地告别高考

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版