网易首页 > 网易号 > 正文 申请入驻

训练效率提升3.5倍!京东云率先支持具身智能千卡开源训练框架

0
分享至

近日,京东云JoyBuilder模型开发平台迎来全新升级,成功支撑业界顶尖模型GR00T N1.5的千卡训练,成为行业内率先支持具身智能千卡级LeRobot开源训练框架的AI开发平台,且训练效率较开源社区版本提升3.5倍。基于软硬件深度调优和算法层面的突破,大幅提升了模型训练效率与稳定性,1亿+数据的千卡训练时间从15小时缩短至22分钟,加速具身智能迈向规模化落地。



1、JoyBuilder三大优势,全面加速具身智能模型训练

近年来,具身智能成为AI领域的重要研究方向,但训练一个高效的具身模型,需要同步处理图像、文本和连续动作信号等众多环节,在工程落地方面存在着数据供给读取慢、算力效率低下,以及数据预处理和存储I/O与GPU计算等多个环节未能有效协同产生的性能瓶颈,是具身智能从实验室走向规模化落地的最大挑战。

围绕具身智能模型训练,京东云AI Infra及相关团队基于JoyBuilder模型研发平台进行了全栈优化:

在具身数据链路优化方面,通过重构具身数据预处理与加载流程,JoyBuilder平台实现CPU数据处理与GPU计算异步执行,减少等待时间。针对海量具身小数据文件,自研的高性能并行文件系统云海JPFS通过分布式元数据管理与智能预取,支持高并发访问。在1024卡集群上,读取带宽超过400GB/s,保障数据持续高速供给。

在具身模型计算优化方面,针对主流开源的VLA(视觉-语言-动作)模型的计算特点从Attention层、Token裁剪和训练后量化等多方位极致优化,全方位提升模型的训练效率。

在具身模型基础设施方面:通过搭建3.2T RDMA后端网络,基于多轨道优化、拓扑感知调度与智能震荡抑制,保障千卡间集合通信的高吞吐与低延迟,并在单点故障时快速恢复,支持长周期训练稳定运行。同时,基于云原生的AI数据湖优化了数据调度与流水线,提升端到端处理效率。

2、行业内率先支持具身模型千卡级开源训练框架

具身智能的发展依赖于算法、数据、算力及基础设施的系统化协同,京东云JoyBuilder模型开发平台,基于在全链路数据处理、模型计算效率和AI基础设施等的全面优化,支持业界当前最主流的LeRobot训练数据最新协议,并成为行业内率先支持具身模型千卡级开源训练框架的AI开发平台。

首先,支持业界最广泛的训练数据新协议。早期LeRobot V2.1数据协议采用“单episode单文件”设计,大规模样本训练时,海量小文件易导致数据加载瓶颈和存储压力。京东云JoyBuilder平台支持一键升级至“多episode合并分片”的V3协议,同时解决原生框架训练过程中数据链路低效问题,经过并行流水线和高效索引查询优化,将训练数据供给速度提升超10倍,显著提升云侧算力利用率和训练效率,满足大规模分布式训练需求。

其次,作为行业内率先支持具身模型千卡级的开源训练框架的AI开发平台,京东云JoyBuilder基于开源LeRobot框架,首次实现GR00T模型的千卡分布式高效训练,训练效率较开源社区版本提升3.5倍,1亿+数据千卡训练时间从15小时缩短至22分钟、提速40倍,大幅降低了千卡训练的使用门槛与运行成本。



第三,基于对主流开源具身VLA模型效率的极致优化,采用动态计算优化,引入变长Flash-Attention与Data Packing技术、训练提速188%;仅对有效token进行计算,减少填充带来的算力损耗,Token裁剪优化训练提速165%以上;使用训练后细粒度FP8量化,在基本保持模型精度前提下,将权重压缩超过36%、提速140%以上。

当前,基于京东集团复杂场景实践,京东云已经构建了一站式大模型产品矩阵,从底层的智算基础设施,到中间层的模型服务和工具,再到上层的Agent应用开发,支持具身智能企业快速部署大模型及AI应用,共同推动机器人更好地理解和服务物理世界,开启人机协作的新篇章。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
美军突袭动用神秘武器曝光,能使人“鼻子流血或吐血”

美军突袭动用神秘武器曝光,能使人“鼻子流血或吐血”

扬子晚报
2026-01-15 22:00:33
玄学提醒:尽量不要跟身边任何人,分享这4件事!

玄学提醒:尽量不要跟身边任何人,分享这4件事!

神奇故事
2025-12-27 23:46:18
只拿绿卡不行!美国双人滑全国冠军被禁止代表美国出战冬奥

只拿绿卡不行!美国双人滑全国冠军被禁止代表美国出战冬奥

华人生活网
2026-01-16 04:57:29
时隔2年半回归?32岁冠军级前腰重返中超!与意甲队解约 下家浮现

时隔2年半回归?32岁冠军级前腰重返中超!与意甲队解约 下家浮现

我爱英超
2026-01-16 19:49:19
3个七旬老人坦言:家有长寿老人,未必是福气,有可能是劫难

3个七旬老人坦言:家有长寿老人,未必是福气,有可能是劫难

惟来
2026-01-15 20:16:30
男生考上北大被父亲暴打,走投无路报警,才知父亲真实身份

男生考上北大被父亲暴打,走投无路报警,才知父亲真实身份

纸鸢奇谭
2024-10-02 19:26:12
2012年,广东老板参加宴请后失踪,13年后托梦妻子:车库里找我

2012年,广东老板参加宴请后失踪,13年后托梦妻子:车库里找我

农村情感故事
2025-12-06 07:32:53
笑死:亚洲杯惊现戏剧性点球,约旦门将乐极生悲2秒内经历天堂地狱

笑死:亚洲杯惊现戏剧性点球,约旦门将乐极生悲2秒内经历天堂地狱

侧身凌空斩
2026-01-17 01:44:17
3-0爆大冷!国乒小将横扫奥运季军,替莎头复仇,王励勤没看错人

3-0爆大冷!国乒小将横扫奥运季军,替莎头复仇,王励勤没看错人

体育就你秀
2026-01-17 00:15:23
3:0速胜!陈俊菘化身张本克星,多哈再燃复仇烽火

3:0速胜!陈俊菘化身张本克星,多哈再燃复仇烽火

阿晞体育
2026-01-16 13:26:11
南华寺百岁高僧:人死后基本都投身畜生道,活人进入轮回永不超生

南华寺百岁高僧:人死后基本都投身畜生道,活人进入轮回永不超生

纸鸢奇谭
2025-01-17 14:30:03
随着日本5-3翻盘,越南3-2绝杀,U23亚洲杯4强定2席:西亚队团灭

随着日本5-3翻盘,越南3-2绝杀,U23亚洲杯4强定2席:西亚队团灭

侃球熊弟
2026-01-17 02:22:18
江西一狱警被蒙面男子当街捅死,凶手:你知道这6年我怎么过的吗

江西一狱警被蒙面男子当街捅死,凶手:你知道这6年我怎么过的吗

万年历史老号
2026-01-15 01:55:52
1936 年被俘国民党中将走完长征,到延安后伟人挥手让他回去

1936 年被俘国民党中将走完长征,到延安后伟人挥手让他回去

唠叨说历史
2026-01-12 14:59:24
广东省启动2026年独生子女奖励:发放标准、条件、材料,看看!

广东省启动2026年独生子女奖励:发放标准、条件、材料,看看!

虎哥闲聊
2026-01-16 09:06:17
徐帆回应离婚5个月,冯小刚近况曝光,内心早已看透一切

徐帆回应离婚5个月,冯小刚近况曝光,内心早已看透一切

来科点谱
2026-01-14 08:57:48
贾国龙“下战书”要求道歉,罗永浩承认冷冻西蓝花“成本更高” 一颗西蓝花如何实现价值飞跃?

贾国龙“下战书”要求道歉,罗永浩承认冷冻西蓝花“成本更高” 一颗西蓝花如何实现价值飞跃?

每日经济新闻
2026-01-16 22:15:07
1月吃它胜过牛羊肉,一年也就吃一次,再贵也要舍得,健脾养胃

1月吃它胜过牛羊肉,一年也就吃一次,再贵也要舍得,健脾养胃

阿龙美食记
2026-01-03 16:15:11
演员朱珠疑似塌房?照片流出,惊呆网友!

演员朱珠疑似塌房?照片流出,惊呆网友!

大眼妹妹
2025-12-15 10:39:19
本想续约于帕的同时免签格伊,德天空:拜仁震惊于曼城的行动

本想续约于帕的同时免签格伊,德天空:拜仁震惊于曼城的行动

懂球帝
2026-01-17 02:27:03
2026-01-17 05:51:00
中国经济网 incentive-icons
中国经济网
国家重点新闻网站
46316文章数 474421关注度
往期回顾 全部

科技要闻

贾国龙与罗永浩被禁言,微博CEO回应

头条要闻

罗永浩、贾国龙微博账号均被禁言

头条要闻

罗永浩、贾国龙微博账号均被禁言

体育要闻

全队身价=登贝莱,他们凭什么领跑法甲?

娱乐要闻

李湘翻车,早就有迹可循!

财经要闻

清流|酒店商家在携程和美团之间沦为炮灰

汽车要闻

方程豹品牌销量突破30万辆 2026年还将推出轿跑系列

态度原创

本地
游戏
家居
健康
亲子

本地新闻

云游内蒙|黄沙与碧波撞色,乌海天生会“混搭”

十三年后,《逆战:未来》想为所有逆行者们找回青春"/> 主站 商城 论坛 自运营 登录 注册 十三年后,《逆战:未来》想为所有逆行者们找回青春 廉颇 2...

家居要闻

岁月柔情 现代品质轻奢

血常规3项异常,是身体警报!

亲子要闻

精神科医生:家长的“为你好”也可能对孩子造成创伤

无障碍浏览 进入关怀版