网易首页 > 网易号 > 正文 申请入驻

100W+帧具身实机数据 乐聚首个人形科研训练场!开箱即用一站式!

0
分享至

在一汽工厂的某车间内,夸父人形机器人正执行装箱、搬运及分拣等自动化作业任务。据悉,该车间为一汽工厂首条人形机器人自动化验证作业产线,多台夸父机器人在工作区域内协同作业,秩序井然,这是夸父人形科研训练场首批验证试点场景。

本次发布的人形科研训练场涵盖100W+帧具身实机数据,覆盖六大场景,二十种常见物体,配合高性能机器人本体、主流开源模型、丰富的训练解决方案、完善的采集工具链。使开发者有效降低研发门槛,专注模型算法研究,进一步提升研发效率。

▍人形科研训练场四大基础架构核心功能解析

乐聚人形机器人训练场核心模块分为训练层、持久存储层、数据层和设备层四个核心模块,在训练层中,系统利用算力GPU资源,通过Torch Cuda进行高效计算。基础模型算法模块包含扩散策略、act等。

持久存储层主要负责数据集的管理,包括数据集的查询、修改、重修和聚合,以及数据集的描述和模型超参数的存储。数据存储在数据储存库中,提供访问接口和地址。

数据层负责数据的采集和保存,包括数据格式转换、数据清洗和数据封装,最终生成*.bag格式的数据包。数据采集分为遥操作采集和端侧操作采集,遥操作采集在运用时进行,端侧操作采集则包括集中采集、运行采集以及视觉、触觉和关节数据的采集。

设备层包括VR动作捕捉设备,用于遥操作数据映射、ik/重定向,以及多个机器人组成的端侧操作系统,负责模型编排和动作组合。此外,设备层还包含NVIDIA的GPU硬件,提供强大的计算能力支持。整个系统架构通过各层的协同工作,实现了从数据采集、模型训练到实际应用的完整流程。

▍双平台x275 Tops算力 支持两款人形采集本体

在采集本体方面,乐聚支持两种异构机器人形态,分别为Kuavo 4pro Max全尺寸人形机器人和Kuavo LB轮臂式人形机器人。这两种机器人形态可覆盖多个场景,且支持多机器人平台协同作业。同时,机器人配备夹爪或多指灵巧手,以满足模仿学习、多任务策略训练等研究需求。

为确保数据的高效处理,机器人搭载了NVIDIA Jetson AGX Orin开发套件。该套件包含Jetson AGX Orin模组,拥有高达275 TOPS的算力,运行于NVIDIA AI软件堆栈。

配置使机器人能够在边缘端执行复杂计算任务,如数据处理、模型推理等,进而大大提升了数据采集和处理的效率,为后续模型训练和算法优化提供了高质量的研究基础。

▍100W+帧具身实机数据 涵盖六大场景 二十种常见物体

为构建人形机器人技术开放生态,乐聚推出了行业领先的全栈开源解决方案,该方案涵盖大规模多模态数据集、标准化训练框架与部署工具链。

大规模多模态开源数据集是本次发布的人形科研训练场的重要组成部分。此数据集聚焦于多场景人形机器人具身智能训练,提供高精度、多模态的机器人交互数据。

数据集覆盖了两类机器人平台、六种任务场景以及二十种常见物体类别,例如工具、箱体、零部件、海绵、餐盘等,包含超过1000000条真实世界的示教轨迹。

这些数据通过高精度VR遥操作系统采集,完整记录了多视角视觉信息、本体感知状态以及语言任务描述,可支持模仿学习、视觉语言动作模型(VLA)及世界模型训练等多种应用场景。

场景应用方面,科研版数据集包含了工业操作与日常任务中的多种关键任务场景,如扫码识别、物品称重、装箱、搬运、分拣、清洁等。该数据集通过标准化流程采集多维度数据,涵盖关节状态数据、控制数据、左右眼广角视觉数据、左右手局部操作数据,以及灵巧手和夹爪的状态数据与控制数据等。

目前科研版数据集已收集超过100万帧实机数据,为模型训练和算法优化提供了丰富的样本资源。

在标准化方面,该技术方案采用LeRobotDatasetV2这一标准化数据格式,同时配套提供了一系列开源的先进算法训练框架。这些框架兼容乐聚生态下的训练脚本,如Diffusion Policy、ACT等,且已在Kuavo系列人形机器人上完成任务验证。

需要指出的是,方案提供的Kuavo IL机器人模仿学习框架集成了多种先进模仿学习方法。该框架支持多种数据格式转换,以满足不同的训练需求,并提供灵活的模型训练和部署方式,既支持单机训练,也支持分布式训练,还能在多种机器人平台上进行模型部署。此外,部署工具链与数据采集系统共享统一的代码库,从而确保了从策略训练到硬件部署的无缝衔接。

目前,该方案已支持桌面级的双手操作任务,例如抓取放置、称重、容器操作等,同时也能够处理多物体交互、长时程任务等复杂场景。其应用范围覆盖家居、工业、零售等多个领域中的物品操作。开发者能够以低成本的方式扩展训练数据,并验证策略的有效性,这进一步降低了人形机器人具身技术的研发门槛。

▍可进行端云协同大规模训练

本次发布的乐聚人形科研训练场整合了InsightOS端侧操作系统与云端平台,方便开发者进行端云协同大规模训练。

端侧操作系统InsightOS是专为通用人形机器人设计的,着重强调灵活性与泛化能力。该系统支持语义决策与现场任务自装配,能够为机器人的操作提供智能化支持。

云端平台兼容包括华为云、金山云在内的多个AI算力平台。其基于华为云八爪鱼(Octopus)开发平台构建人形机器人数据闭环,提供从数据采集、模型训练到应用部署的全流程支持。该平台整合了数据标注、仿真验证等模块,开发者无需从头搭建复杂的具身智能开发体系,即可快速开展算法训练,专注于模型优化与应用创新。

▍结语与未来:

本次发布的乐聚人形训练场科研版以夸父高性能本体为基础,结合数据采集工具链,涵盖从数据训练到模型部署的全流程,为开发者提供全栈式解决方案。该方案进一步降低了开发者的准入门槛,使普通开发者能够更轻松地开展工作,专注于算法研发,实现真正意义上的开箱即用。乐聚表示,目前科研版操作技能库与具身智能数据集仍在持续更新,未来训练场将能够适配更多落地应用场景,实现从科研到工业场景的赋能。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
RAV4荣放全系混动卖12.9万,丰田这把玩得有点狠

RAV4荣放全系混动卖12.9万,丰田这把玩得有点狠

侃故事的阿庆
2026-05-23 13:09:44
俄军痛失400平方公里:乌军发动大反攻,俄军战损超过14万人

俄军痛失400平方公里:乌军发动大反攻,俄军战损超过14万人

面包夹知识
2026-05-23 20:25:20
2026款奔驰GLS700曝光 内饰优化 配4.0T双擎

2026款奔驰GLS700曝光 内饰优化 配4.0T双擎

沙雕小琳琳
2026-05-23 13:00:18
要打?奉陪到底!中方出手,拒绝收回港口租约,澳防长咬死装委屈

要打?奉陪到底!中方出手,拒绝收回港口租约,澳防长咬死装委屈

激情与荣耀并存
2026-05-25 11:16:33
外媒:中国J-16挂8枚PL-15,令美日欧恐慌

外媒:中国J-16挂8枚PL-15,令美日欧恐慌

世家宝
2026-05-25 19:54:48
黄瓜立大功?医生发现:经常吃黄瓜的人,不出半年,或有4大改善

黄瓜立大功?医生发现:经常吃黄瓜的人,不出半年,或有4大改善

芹姐说生活
2026-05-09 21:08:03
海口警方捣毁一电动自行车非法改装犯罪团伙,13名涉案人员被当场抓获

海口警方捣毁一电动自行车非法改装犯罪团伙,13名涉案人员被当场抓获

环球网资讯
2026-05-25 13:57:28
秦海璐问刘浩存:下次我找你拍戏,零片酬行吗?刘浩存回应显情商

秦海璐问刘浩存:下次我找你拍戏,零片酬行吗?刘浩存回应显情商

枫尘余往逝
2026-05-24 18:45:55
炸裂!耿同学暂停打假以后,舆论再次聚焦到了他那位美女导师

炸裂!耿同学暂停打假以后,舆论再次聚焦到了他那位美女导师

小鋭有话说
2026-05-24 12:00:29
小鹏高管:小鹏可能是唯一欢迎特斯拉FSD入华的车企

小鹏高管:小鹏可能是唯一欢迎特斯拉FSD入华的车企

CNMO科技
2026-05-24 11:46:04
人在做天在看!单场83分却落选最佳阵容,阿德巴约成NBA超级笑话

人在做天在看!单场83分却落选最佳阵容,阿德巴约成NBA超级笑话

仰卧撑FTUer
2026-05-25 09:55:07
突发重磅!美国绿卡政策巨变!在美外籍人士,需回国申请绿卡

突发重磅!美国绿卡政策巨变!在美外籍人士,需回国申请绿卡

阿芒娱乐说
2026-05-25 18:31:13
新华社:留神峪煤矿曾被列入全国灾害严重生产煤矿名单,但过往罚单为何没能阻挡这次惨痛事故

新华社:留神峪煤矿曾被列入全国灾害严重生产煤矿名单,但过往罚单为何没能阻挡这次惨痛事故

澎湃新闻
2026-05-24 14:01:02
2只金手镯不翼而飞!新娘索赔21万余元;婚庆公司:交给了一个黑裤子阿姨保管,以为她是亲戚

2只金手镯不翼而飞!新娘索赔21万余元;婚庆公司:交给了一个黑裤子阿姨保管,以为她是亲戚

上海约饭局
2026-05-24 17:21:25
国防部一声炸雷,把憋了整整55年的窗户纸彻底捅破了!

国防部一声炸雷,把憋了整整55年的窗户纸彻底捅破了!

回京历史梦
2026-05-23 16:28:18
哪个瞬间你突然觉得读书很有用?网友的一树梨花压海棠让人破防了

哪个瞬间你突然觉得读书很有用?网友的一树梨花压海棠让人破防了

夜深爱杂谈
2026-05-22 20:48:07
招商局集团:坚决拥护党中央决定

招商局集团:坚决拥护党中央决定

新京报
2026-05-24 08:40:30
相伴27年!朝阳知名超市即将闭店!网友留言泪目~

相伴27年!朝阳知名超市即将闭店!网友留言泪目~

朝阳通
2026-05-25 14:26:58
晋中战役,徐向前得知敌军副司令竟是日军少将,当即下令将其击毙

晋中战役,徐向前得知敌军副司令竟是日军少将,当即下令将其击毙

兴趣知识
2026-05-25 16:36:52
心脏决定寿命!建议:别太节俭,多吃这3种食物,让心脏变年轻

心脏决定寿命!建议:别太节俭,多吃这3种食物,让心脏变年轻

阿龙美食记
2026-03-23 20:16:13
2026-05-25 20:47:00
机器人大讲堂 incentive-icons
机器人大讲堂
立德机器人平台,是一个集媒体品牌、智库咨询、投资孵化、引智招商为一体的机器人垂直领域服务平台
6615文章数 4585关注度
往期回顾 全部

科技要闻

华为:没有先进光刻机也能造出高端芯片

头条要闻

牛弹琴:伊朗现在哭笑不得 美官员让伊别理特朗普推文

头条要闻

牛弹琴:伊朗现在哭笑不得 美官员让伊别理特朗普推文

体育要闻

如果不好好守门,他可能早就继承家业了

娱乐要闻

李晨郑恺跑男停宣:12年元老被边缘化

财经要闻

起底煤矿“暗面”:假整改、假数据

汽车要闻

启境GT7定档5月29日预售 提供三电机版本

态度原创

游戏
数码
健康
旅游
公开课

战马官宣《天国拯救》新作!2027至2028财年发售

数码要闻

TRYX将推处理器一体式水冷散热器新品HOLO,支持全息视效

几百块一瓶的外泌体精华,涂脸上是“智商税”吗?

旅游要闻

3小时直飞直达!这个盛夏奔赴延吉沉浸式感受天然氧吧

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版