网易首页 > 网易号 > 正文 申请入驻

刚刚,最佳VLA模型GigaBrain-0开源:世界模型驱动10倍数据,真机碾压SOTA

0
分享至

新智元报道

编辑:犀牛

【新智元导读】国内首个利用世界模型生成数据实现真机泛化的端到端VLA具身基础模型GigaBrain-0重磅发布。

近日,在湖北武汉东湖高新区,极佳视界湖北人形机器人创新中心完成战略合作签约,并联合发布端到端VLA「具身基础模型」GigaBrain-0

这是国内首个利用「世界模型」生成数据实现真机泛化的视觉-语言-动作(VLA)基础模型,旨在通过世界模型为中心,无论在数据侧还是模型侧,彻底改变通用机器人大脑的开发方式

GigaBrain-0拥有当前最先进的VLA模型架构,同时支持图像、点云、文本、本体状态的输入,输出结构化的任务规划和运动规划,并在大规模的数据上完成预训练,可以实现更精准的移动导航和长序列的复杂操作。

搭配极佳视界自研「世界模型平台GigaWorld」,构建最完整的具身数据体系,可以快速实现多种本体上复杂的机器人移动操作任务。后续GigaBrain-0将全面开源。

项目链接:https://gigabrain0.github.io/

论文链接:https://arxiv.org/pdf/2510.19430

01 核心算法架构升级

针对当前机器人操作中的精准度不足和推理能力不足的问题,GigaBrain-0重点提升了3D空间感知能力和结构化的推理能力,通过引入这两项关键能力,GigaBrain-0可以完成更精准的移动导航和更长序列的复杂操作,具备更强泛化性,全球首次通过一脑多形、一段式端到端全身控制模型、一镜到底完成衣物整理类复杂、柔性、长程移动操作任务!

1. 3D空间感知能力:加入Depth输入,更精准的移动导航

GigaBrain-0通过加入深度信息的输入,提升了物体3D位置和空间3D布局的感知能力,这两点对于精确的双臂操作和精确的移动导航至关重要。

2. 结构化推理能力:更稳定的长程、复杂任务表现

GigaBrain-0通过引入子目标拆解和机械臂末端轨迹输出,改进了自身在开放场景中的任务规划和运动规划能力,极大提升了复杂、长程任务的成功率:

  • 子目标拆解:模型在推理过程中,可以同时输出子任务的自然语言描述,让GigaBrain-0对于长程任务的分解更合理。

  • 末端轨迹输出:模型在推理过程中,增加了机械臂末端执行器运动路径在图像平面上2D投影的输出,增强GigaBrain-0整体的全局动作规划能力。

02 全球首个「世界模型」驱动的

最全数据体系

世界模型无论在数据侧还是模型侧,对于具身智能都有极其关键的价值。极佳视界通过「世界模型」为中心,打造了全球首个最全具身智能数据体系,具体包括:

  • Sim2Real Transfer Data: 利用Isaac Sim等仿真环境合成多样化的机器人操作数据,通过GigaWorld的Sim2Real变换,实现逼真的外观渲染,同时保留原始场景几何和动作语义。

  • Real2Real Transfer Data: 将真实世界机器人采集的视频重新渲染成外观几何上不同但物理上合理的变体,通过文本提示来控制前景及背景的材质、表面纹理、光照条件,同时保持机器人动作和交互的一致性。这有效地将真实数据的多样性提高了约10倍。

  • View Transfer Data: 利用GigaWorld的3D空间场景重建能力,将单个真实采集的数据片段生成新视角的数据片段。

  • Video Generation Data: GigaWorld可以根据单个输入图像和不同的文本提示生成多样化的具身机器人操作视频,并通过逆动力学模型推断出相应的机器人动作序列,合成训练数据。

  • Human Transfer Data: 通过视频变换和运动学重定向,将大规模第一人称视频中的人手替换为机械臂,生成稳定且可由机器人执行的动作序列。

我们在多个任务上验证了世界模型生成数据对于具身机器人真机操作任务的价值,结果表明通过增加世界模型生成的数据进行预训练和后训练,GigaBrain-0的真机操作成功率可以持续提升,并且全球首次实现了连续柔性复杂长程操作的开放世界泛化

同时,通过混合世界模型生产的数据和真机采集数据,GigaBrain-0可以快速完成特定本体上的任务适配和泛化。

通过「世界模型」驱动的具身最全数据体系,极佳视界将持续迭代具身大模型,加速走向物理世界通用智能

03 高效的一脑多形跨本体适配

极佳视界联合湖北人形机器人创新中心共同完成大规模预训练数据的采集,数据覆盖了工业、商业、办公、家居、实验室这5类场景,细分为超市、酒店大堂、咖啡店、奶茶店、便利店、餐厅、仓库搬运、工业流水线、茶水间、住宅、公寓家居、会议室、办公室工位、实验室这14个具体场景。

结合场景丰富的预训练数据和先进的模型架构,GigaBrain-0拥有优秀的任务规划能力,进一步借助「极佳世界模型平台」,极佳视界可以在不同的本体上快速实现复杂的机器人操作任务。

极佳视界联合湖北人形机器人创新中心,全球首次基于高集成度人形机器人本体,一镜到底实现实时、长程、复杂、柔性操作

接下来双方将有更深入的合作。

04 实验结果

GigaBrain-0通过真实机器人实验进行了评估,包括灵巧操作任务(如叠衣服、整理卷纸)、长程任务(如收拾桌面、倒饮料)和移动操作任务(如搬运箱子、拾取衣物)。

实验结果表明,GigaBrain-0的成功率显著优于现有SOTA方法。

关于极佳

极佳视界专注「世界模型平台 x 具身基础模型」双轮闭环走向物理世界通用智能

在「世界模型」方向,极佳视界是国内技术创新和产业落地的领跑者,相关产品技术广泛应用于自动驾驶、具身智能、内容创作等相关方向。

在「具身大脑」方向,极佳视界通过全球领先的「世界模型平台」提供大规模高质量闭环数据,相比纯真机数据训练效率提升1-2个数量级以上,同时真机效果达到国内领先。

极佳视界由黄冠博士带领团队于2023年创立,是国内第一家专注「世界模型 x 具身大脑」方向的科技公司

公司核心团队包括清华、北大、中科院、中科大、WashU、CMU等全球知名院校顶尖研究人员,以及来自微软、三星、地平线、百度、博世、NBC环球影业等全球知名企业高管,核心团队兼具业内领先的研究能力和大规模的产业落地经验。

极佳视界是国内少有在「世界模型」和「具身大脑」方向都拥有世界级综合实力的团队,在自动驾驶世界模型方向已经和多个头部主机厂达成签约合作,在具身世界模型、具身大脑等方向已经和多个具身本体、终端公司达成签约合作,应用于科研、教育、展览、数据采集、工业、服务、家庭等多个场景。

极佳视界致力通过「世界模型平台 x 具身基础模型」,创造物理世界通用智能。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
富商密春雷背负9亿欠款,原配金晶早早抽身保住自身利益,董卿父亲晚年感慨:最后悔把女儿嫁给密春雷

富商密春雷背负9亿欠款,原配金晶早早抽身保住自身利益,董卿父亲晚年感慨:最后悔把女儿嫁给密春雷

磊子讲史
2026-07-13 11:10:59
英国新首相正式敲定!8年前访华念念不忘,对华态度彻底不一样了

英国新首相正式敲定!8年前访华念念不忘,对华态度彻底不一样了

兰妮搞笑分享
2026-07-19 09:26:46
人事调我当保安月薪6万变3千,下午门禁全瘫痪,总裁怒问谁调走的

人事调我当保安月薪6万变3千,下午门禁全瘫痪,总裁怒问谁调走的

千秋文化
2026-07-17 18:55:21
40岁保姆:拿着雇主的高工资提供特殊服务,老公得知后和我离婚了

40岁保姆:拿着雇主的高工资提供特殊服务,老公得知后和我离婚了

孢木情感
2026-07-18 15:11:38
曼城哭晕!穆里尼奥重磅挖人!世界杯真核铁心加盟皇马

曼城哭晕!穆里尼奥重磅挖人!世界杯真核铁心加盟皇马

澜归序
2026-07-19 04:18:32
首日票房超3.5亿,“蜘蛛侠”新片爆了,《功夫女足》全球冠军丢了

首日票房超3.5亿,“蜘蛛侠”新片爆了,《功夫女足》全球冠军丢了

影视高原说
2026-07-19 12:15:27
阿根廷拥有一大优势,西班牙真比不了!世界杯决赛没悬念了?

阿根廷拥有一大优势,西班牙真比不了!世界杯决赛没悬念了?

小鞄搞笑解说
2026-07-19 08:35:59
向太曝施南生临终细节,她临走前还留了礼物,原来我们错怪了徐克

向太曝施南生临终细节,她临走前还留了礼物,原来我们错怪了徐克

悄悄史话
2026-07-19 20:23:39
冉莹颖让邹市明敬酒,邹市明当场黑脸引热议

冉莹颖让邹市明敬酒,邹市明当场黑脸引热议

情感大头说说
2026-07-19 15:45:17
徐克医院崩溃痛哭?施南生一分钱都没留给他,上亿遗产或早有去处

徐克医院崩溃痛哭?施南生一分钱都没留给他,上亿遗产或早有去处

李橑在北漂
2026-07-19 21:58:55
浓眉为新赛季定下两大目标:自己打满82场常规赛 奇才拿40+胜场

浓眉为新赛季定下两大目标:自己打满82场常规赛 奇才拿40+胜场

罗说NBA
2026-07-19 05:33:28
1954年,14000多名志愿军战俘拒绝回国,扭头去了台湾,30年后他们以台商身份回乡,却在父母坟前一句话也说不出来

1954年,14000多名志愿军战俘拒绝回国,扭头去了台湾,30年后他们以台商身份回乡,却在父母坟前一句话也说不出来

磊子讲史
2026-07-15 16:49:26
留洋青训球员谈申思:不仅教会我踢球,更影响了我价值观和选择

留洋青训球员谈申思:不仅教会我踢球,更影响了我价值观和选择

砚底沉香
2026-07-19 09:41:12
180名议员喊打喊杀,穆杰塔巴要真动手,第一个垮的是伊朗自己

180名议员喊打喊杀,穆杰塔巴要真动手,第一个垮的是伊朗自己

半壁胭脂色
2026-07-19 02:46:50
曼晚:曼城6人将缺席社区盾,罗德里、奥莱利、格伊、谢尔基在列

曼晚:曼城6人将缺席社区盾,罗德里、奥莱利、格伊、谢尔基在列

云隐南山
2026-07-19 21:34:38
张仲景晚年悟出养生真谛,重在疏通经络而非补气,三处部位尤为关键

张仲景晚年悟出养生真谛,重在疏通经络而非补气,三处部位尤为关键

磊子讲史
2026-07-15 17:38:44
越少越好?丰田承认新款RAV4屏幕玩过火,中国车主竟也要物理按键

越少越好?丰田承认新款RAV4屏幕玩过火,中国车主竟也要物理按键

温柔且自由
2026-07-18 01:58:24
还是做好准备吧,一美元只能兑换5.5元人民币时代,或许终会到来

还是做好准备吧,一美元只能兑换5.5元人民币时代,或许终会到来

阅识
2026-01-31 15:32:50
好心收留罪犯亲戚,一家五口惨遭杀害,2010年内蒙临河灭门案纪实

好心收留罪犯亲戚,一家五口惨遭杀害,2010年内蒙临河灭门案纪实

易玄
2026-07-19 12:03:52
2026最惨基民:先亏30%,调仓后再亏20%,完美躲过科技牛扎进周期熊,接住暴跌大踩踏

2026最惨基民:先亏30%,调仓后再亏20%,完美躲过科技牛扎进周期熊,接住暴跌大踩踏

新浪财经
2026-07-19 09:08:38
2026-07-19 22:48:49
新智元 incentive-icons
新智元
AI产业主平台领航智能+时代
15733文章数 66962关注度
往期回顾 全部

科技要闻

Kimi K3单项登顶 整体落后前沿模型2-3个月

头条要闻

外媒:匈牙利总统被总理"逼迫"离职 系欧尔班政治盟友

头条要闻

外媒:匈牙利总统被总理"逼迫"离职 系欧尔班政治盟友

体育要闻

世界杯决赛,从“澡盆德比”500年前讲起

娱乐要闻

王侃因病逝世 两年前与父亲牛犇同台

财经要闻

任泽平VIP会员自称爆仓巨亏千万

汽车要闻

把中国超跑卖到英国,比亚迪正在被世界看见

态度原创

本地
家居
旅游
数码
公开课

本地新闻

十年了,为什么鬼怪CP还能让人美美嗑上?

家居要闻

2026建博会(广州) 公装联探展交流活动

旅游要闻

大理4个夜游好去处!

数码要闻

盈通RTX 5060也换芯了!GB206变GB205:大芯面积暴涨45%散热更稳

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版