网易首页 > 网易号 > 正文 申请入驻

小米开源Xiaomi-Robotics-U0:首创一个模型“通吃”四类生成任务,开启具身训练数据规模化生产

0
分享至

  7月15日,小米正式发布并开源具身领域首个统一生成模型Xiaomi-Robotics-U0(下称“U0”)。

  U0拥有380亿参数,首次将多项具身世界建模能力与通用图像生成能力统一到一套多模态自回归架构中,为机器人训练数据的生成、迁移和扩增提供统一底座。已有真机数据可以直接换物体、换光照、换背景,无需重新采集;真机难以触达的危险、极端、长尾场景,也可以直接生成。

  在由清华大学、北京大学等机构联合打造的具身智能权威评测基准WorldArena上,U0获得73.64分,综合性能排名全球第—。真机测试显示,经过U0生成的数据训练后,机器人即使到了从未见过的环境,也能更好地完成任务,平均完成进度提升26.3%。

  U0的开源为行业提供了一座统一、可控、高效的“具身数据工厂”,将进一步推动机器人训练数据从分散生成走向规模化生产,推动机器人训练效率及规模化落地。


  WorldArena 榜单,UNIS 为 Xiaomi-Robotics-U0 匿名评测代号(榜单时间2026年7月15日),在全球共126个模型中位列第—

  统一四类生成任务,搭起「具身数据」工厂

  机器人训练需要大量包含场景、物体、动作和空间关系的数据,但真实世界的数据采集成本高、周期长,也很难覆盖不同光照、背景、物体组合和机器人本体。

  过去,不同类型的数据通常需要不同模型分别生成。U0首次将通用图像生成能力与具身世界建模能力统一到一套多模态自回归架构中,覆盖四类核心任务:

  • 具身场景生成:根据文本描述,为指定机器人生成桌面、厨房、仓库等环境下的多视角初始观测;

  • 具身迁移:将已有机器人轨迹迁移至新环境,在改变光照、背景、材质或物体的同时,保持机械臂姿态、动作轨迹和场景布局一致;

  • 机器人交互视频生成:根据初始观测和操作指令生成后续视频,兼顾动作连贯性和物理一致性;

  • 通用文生图与图像编辑:保留通用视觉生成与编辑能力,将互联网视觉知识迁移到具身智能任务中,扩充训练数据的场景和物体类型。


  四类能力贯通了“生成场景—迁移轨迹—扩展环境—生成交互过程”的数据生产链路,使U0成为一座统一、可控、高效的“具身数据工厂”。

  真机测试进一步验证了生成数据的实际价值。在陌生光照、未知背景等分布外场景中,使用U0生成的数据训练机器人后,任务完成进度平均提升26.3%。

  也就是说,使用U0生产的数据训练后,即使换到训练阶段从未见过的环境,机器人也能更稳定地完成任务,而环境泛化能力正是机器人从实验室走向开放世界、实现规模化应用必须突破的关键瓶颈。

  可控性大幅领先GPT-Image2.0,造可用具身数据

  给机器人「造」数据,和普通的 AI 画图有本质区别:画面不仅要逼真,更要与真实采集的动作轨迹严格对齐——同一个物体在不同相机视角下的位置必须几何一致,机械臂的姿态不能因为换了背景而错位,否则生成的数据无法用于训练。

  为此,U0提出五维解耦结构化控制范式,将机器人工作场景拆分为工作台布局、操作物体、无关物体、光照和背景五个维度。每个维度都可以通过自然语言独立调整,修改前景、背景或光照的同时,尽量保持机械臂姿态、空间结构及多视角关系不变。

  在WorldArena评测中,U0综合排名第—,指令遵循、交互质量和视角一致性三个子项也全部位列第—;可控性得分达到91.60,3D准确性达到92.04。

  在包含300个不同难度样本的对比测试中,U0在深度一致性、结构保真和语义对齐三个维度均大幅领先GPT-Image-2.0,后者虽然能够生成符合文字描述的画面,但在跨视角场景中更容易出现物体错位、空间畸变或机械臂姿态变化,进而影响数据与原始轨迹的对应关系。



  这意味着,U0的优势不只是“把画面生成得更像”,更是让机器人动作、空间关系和多视角观测保持一致,使生成数据真正具备训练价值。

  7.5分钟到5.44秒,数据生成效率提升 82.9 倍

  大规模生产具身数据,除了要求生成结果准确,还必须解决速度和成本问题。

  U0提出 FlashAR+ 高速推理加速方案,结合对角并行解码与高效的缓存调度技术,能够将一张可用高清训练图片(1024×1024分辨率)的生成时间从原来的7.5分钟(450.77秒)极限压缩至5.44秒,效率提升82.9倍。

  这一效率提升,为具身训练数据的低成本、规模化生产提供了工程基础。机器人训练团队因而能够在更短时间内,批量生成覆盖不同背景、光照、物体和机型的训练数据。随着U0开源,具身数据也有望从依赖大量人工采集,进一步走向可控、高效的批量生产。


  Xiaomi-Robotics-U0 的代码与模型权重已全面开源:

  • 项目主页:https://robotics.xiaomi.com/xiaomi-robotics-u0.html

  • 代码仓库:https://github.com/XiaomiRobotics/Xiaomi-Robotics-U0

  • 模型权重:https://huggingface.co/collections/XiaomiRobotics/xiaomi-robotics-u0

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
90岁焦晃现状:日抽五包烟穿纸尿裤,与小30岁妻子住破旧小区

90岁焦晃现状:日抽五包烟穿纸尿裤,与小30岁妻子住破旧小区

梦醉为红颜一笑
2026-07-13 14:19:04
九寨沟湖水靠染色才呈现蓝色?官方辟谣并详解斑斓水色成因

九寨沟湖水靠染色才呈现蓝色?官方辟谣并详解斑斓水色成因

澎湃新闻
2026-07-16 13:38:09
89岁拾荒老人遭女子持拖把殴打,一路人飞奔上前将女子一把推开,目击者:施暴者无视劝阻多次击打老人头部,当地警方已介入

89岁拾荒老人遭女子持拖把殴打,一路人飞奔上前将女子一把推开,目击者:施暴者无视劝阻多次击打老人头部,当地警方已介入

扬子晚报
2026-07-16 20:24:39
黄岩岛填岛声音一出,菲律宾连应激都不敢,生怕中方真的说到做到

黄岩岛填岛声音一出,菲律宾连应激都不敢,生怕中方真的说到做到

石江月
2026-07-15 17:08:50
平均每30人就有1人爆仓!韩国股市暴涨暴跌,借钱炒股的散户快疯了

平均每30人就有1人爆仓!韩国股市暴涨暴跌,借钱炒股的散户快疯了

时代周报
2026-07-16 15:51:15
一对中国夫妇在印尼浮潜时溺亡,当地警方称2人下水时“未穿救生衣也无人监管”,目前仍在调查此事;水下救援画面曝光

一对中国夫妇在印尼浮潜时溺亡,当地警方称2人下水时“未穿救生衣也无人监管”,目前仍在调查此事;水下救援画面曝光

大象新闻
2026-07-16 18:06:06
乌克兰击沉俄罗斯“伊祖姆鲁德”号军舰!报8年前之仇

乌克兰击沉俄罗斯“伊祖姆鲁德”号军舰!报8年前之仇

项鹏飞
2026-07-15 16:41:54
资深中介预判:不出7年,无电梯步梯老小区出现这4种现状

资深中介预判:不出7年,无电梯步梯老小区出现这4种现状

坠入二次元的海洋
2026-07-15 11:55:23
人伦大乱正在毁掉无数中国家庭:3种乱象就在日常,拖垮一家人

人伦大乱正在毁掉无数中国家庭:3种乱象就在日常,拖垮一家人

阿凯销售场
2026-07-04 15:35:28
梅西:我去年才决定参加世界杯!准备了一年 很少有人能踢三届决赛

梅西:我去年才决定参加世界杯!准备了一年 很少有人能踢三届决赛

念洲
2026-07-16 09:14:15
穆帅眼光封神!6000 万新援世界杯打服法国,皇马这买卖血赚

穆帅眼光封神!6000 万新援世界杯打服法国,皇马这买卖血赚

澜归序
2026-07-16 00:29:46
小米扔出9.5GB“巨无霸”更新!安卓17驾到,但新功能呢?

小米扔出9.5GB“巨无霸”更新!安卓17驾到,但新功能呢?

小蜜情感说
2026-07-16 10:33:06
官媒曝光韩红真实籍贯,不是西藏和北京,原来她和成龙是同类人

官媒曝光韩红真实籍贯,不是西藏和北京,原来她和成龙是同类人

调侃国际观点
2026-06-29 04:45:48
女子花200万包养情夫,2021年让情夫考研提升气质,情夫杀她和娃

女子花200万包养情夫,2021年让情夫考研提升气质,情夫杀她和娃

汉史趣闻
2026-07-14 10:26:06
39岁仍在掌控比赛!劳塔罗:梅西一个眼神,我就懂他所有战术思路

39岁仍在掌控比赛!劳塔罗:梅西一个眼神,我就懂他所有战术思路

体育闲话说
2026-07-16 07:26:08
83年飞行员王学成叛逃台湾,邓丽君慰问时耳语一句后被强行支走

83年飞行员王学成叛逃台湾,邓丽君慰问时耳语一句后被强行支走

鉴史录
2026-05-24 15:48:49
恒大歌舞团宣告破产,内部照流出,令人咂舌

恒大歌舞团宣告破产,内部照流出,令人咂舌

新浪财经
2026-07-15 21:43:00
世界杯验货啦!1.5亿欧,奥利塞被高估,幸亏皇马连试探都没有

世界杯验货啦!1.5亿欧,奥利塞被高估,幸亏皇马连试探都没有

体育世界
2026-07-15 20:36:43
彻查!信号强烈!中央升级反腐“天网”!

彻查!信号强烈!中央升级反腐“天网”!

职场资深秘书
2026-07-16 19:58:08
美记:即使伦纳德被联盟处以禁赛处罚,猛龙也不会放弃跟快船做交易

美记:即使伦纳德被联盟处以禁赛处罚,猛龙也不会放弃跟快船做交易

移动挡拆
2026-07-16 18:52:44
2026-07-16 21:52:49
泡泡网 incentive-icons
泡泡网
新科技 购鲜活
40268文章数 64662关注度
往期回顾 全部

科技要闻

苹果AI终于要来了:还能追上华为豆包们吗

头条要闻

扎波罗热核电站总工遭袭身亡 被指或改变俄乌冲突性质

头条要闻

扎波罗热核电站总工遭袭身亡 被指或改变俄乌冲突性质

体育要闻

逆天6后卫神阵,图赫尔活活坑死英格兰

娱乐要闻

天下无不散宴席!白鹿官宣告别欢娱

财经要闻

韩国股市暴涨暴跌 借钱炒股的散户快疯了

汽车要闻

智己LS9全系标配线控转向 权益价31.98万元起

态度原创

教育
时尚
旅游
手机
本地

教育要闻

首年统招均分600+,位次全线挺进万名大关!这9所新高中有何来头?

Miu系穿搭过时了?现在最火的穿搭竟然是——!

旅游要闻

京津冀精品旅游列车计划启动,推出31趟专列

手机要闻

行业首款骁龙阔折叠!三星Galaxy Z Fold8完整规格泄露

本地新闻

人生必去清单:那达慕大会开嗨!

无障碍浏览 进入关怀版