网易首页 > 网易号 > 正文 申请入驻

英伟达把8个AI和8台机器人关在一起,它们学会了自己做实验

0
分享至



如果未来的机器人实验室里没有人类研究员,会发生什么?

今天,英伟达高级研究科学家、具身智能负责人 Jim Fan 公布了一个名为 “ENPIRE ”的新项目。在这个实验室里,8 个 AI coding agent 与 8 台机器人组成了一支“科研团队”:它们自己设计实验、自己修改代码、自己验证结果,并持续优化机器人策略,而人类研究员只负责设定目标和观察结果。


图|ENPIRE 机器人实验平台(来源:NVIDIA)

8 个实验单元上,各自配备了两条 6 自由度 YAM 机械臂、一台 Intel RealSense 深度摄像头,以及一台搭载单块 NVIDIA RTX 5090 显卡(32GB 显存)的工作站。所有训练、推理和 agent 运行均在本地完成,没有依赖共享计算集群。

研究团队同时测试了 Codex、Claude Code 和 Kimi Code 三种 coding agent。在模拟环境中三者都能够完成任务,但在真实机器人上的表现存在明显差异,其中 Codex 整体表现最好,达到目标成功率所需时间最短。

Jim Fan 将其称为“AutoResearch(自动科研)进入物理世界的一次尝试”。他还在帖子中打趣说,希望以后团队能全员溜号去度假,实验室全靠机器人和 AI 自己跑,老板黄仁勋都发现不了。

玩笑归玩笑,这句话也交代了 ENPIRE 的一个重要目标:让机器人在真实环境中的研发逐步实现自主循环。

这也是 NVIDIA GEAR(Generalist Embodied Agent Research)实验室近年来 Physical AI 路线的延伸。此前团队重点关注机器人基础模型、世界模型和仿真平台,而 ENPIRE 则进一步将 attention 转向机器人研发流程。目前,相关技术论文已经同步上线,官方表示全部代码和系统在未来都将开源。


(来源:NVIDIA)

给 AI 一个机器人身体

在 ENPIRE 中,核心角色是AI coding agent,即能够自主编写、执行和调试代码的 AI 系统。与传统聊天机器人不同,它们能够主动调用工具、运行程序,并根据反馈持续修改代码。

过去,它们只能在屏幕里写代码、跑程序;现在,它们在 ENPIRE 中第一次拥有了真实世界中的机械臂、摄像头和实验对象。它们写下的代码,不只是生成一个数字结果,而是直接驱动机器人去抓取、插入、剪切和操作真实物体。

过去几年里,自动化科研已经在数字世界取得了不少进展。去年 Andrej Karpathy 开源的 autoresearch 项目,可以让 AI 自动完成模型训练和实验管理;AI Scientist 等系统则已经能够自动生成研究方案、运行实验并撰写论文。

但这些系统有一个共同特点:它们始终运行在数字环境之中。代码运行完成就会得到结果,模拟器里的物理规律是确定的,一次失败可以零成本重新开始。

真实世界则完全不同。机器人碰撞时的摩擦力会发生变化,物体位置无法被精确复原,光照条件和传感器噪声也始终在波动。论文中提到,在模拟环境中的“Push-T”(机器人通过推动而非抓取的方式,将一个 T 形积木移动到指定区域)任务里,三个被测试的 coding agent 全部成功完成了任务;但当同样的方法被部署到真实机器人上时,其中两个 agent 都失败了。

所以,为了应对真实世界的非确定性,ENPIRE 整个系统被拆分为两个阶段。

第一阶段需要少量人类参与。coding agent 首先在人类指导下搭建一套“环境基础设施”,包括安全边界、自动重置和自动验证机制。所谓安全边界,就是规定机器人不能执行哪些危险动作;自动重置负责在实验结束后恢复场景;自动验证则负责判断一次操作究竟成功还是失败。这些模块一旦完成,就不再修改,而是作为后续所有实验共享的基础设施。

第二阶段则完全自主。获得环境接口之后,coding agent 开始真正意义上的“研究工作”。它们会阅读相关论文寻找灵感,提出新的算法假设,修改训练代码,调整强化学习和行为克隆策略的超参数,然后部署到真实机器人上验证效果,再根据实验结果继续改进。

Jim Fan 用一句话概括了这个过程:“我们所做的只是为 Codex 提供了一个通往原子世界的 API,其余的一切都是涌现。”


(来源:论文)

AI 如何在真实世界做实验

为了验证这一框架,研究团队设计了多个真实机器人任务。一个是上文提到的 Push-T 任务,团队要求机器人通过推的方式将一个 T 形积木移动到指定区域;还有一个是插针任务,要求机器人把大头针准确插入直径仅 4 毫米的孔洞;GPU 插入任务则是真正将 GPU 插进主板插槽;而剪扎带任务则要求机器人拿起剪刀并剪断扎带尾部。

这些任务都涉及高精度操作,其中不少还需要实时视觉反馈和复杂接触控制。在团队发布的演示视频中,GPU 插入和剪扎带也是重点展示的内容:前者要求机器人将 GPU 精确插入主板插槽,后者则涉及抓取剪刀并完成工具使用。

在插针任务中,agent 的表现尤其值得关注。为了提高成功率,它们自主尝试了行为克隆、在线强化学习、离线强化学习以及多种混合方案,并不断调整批量大小、策略更新频率和正则化参数。最终,系统实现了连续 50 次成功插针的目标。

更有意思的是,这支 agent 团队并不是简单地进行参数搜索。团队的论文附录展示了一棵“假设演化树(Idea Tree)”,记录了 agent 在实验过程中提出、验证和放弃的各种改进思路。不同 agent 会围绕奖励设计、训练方式、超参数设置等方向展开探索,再根据实验结果决定哪些路线继续保留、哪些路线被淘汰。

其中,仅调整行为克隆中的一个正则化项,就带来了 10.8% 的成功率提升,成为整个实验过程中贡献最大的单项改动。而最终的收敛速度也超过了此前依赖人类持续参与的机器人强化学习方法。

机器人数量成为新的 scaling 资源?

不过,这些都还不是这个项目最引人关注的部分。

研究团队还发现,当机器人和 coding agent 的数量增加时,达到同样性能目标所需的研发时间会明显缩短。为此,他们搭建了由 1 台、4 台和 8 台机器人组成的不同规模实验系统。结果显示,在插针任务中,1 台机器人需要超过 1.5 小时才能达到接近完美的成功率;4 台机器人缩短到约 50 分钟;8 台机器人则进一步缩短到约 40 分钟。


(来源:论文)

多个 coding agent 会同时探索不同路线。有的尝试新的强化学习算法,有的修改奖励函数,还有的负责调整训练基础设施。一旦某个方向被证明有效,其他代理会通过 Git 自动复制、合并甚至直接复用这些成果;而效果不佳的路线则被快速淘汰。

从形式上看,这有些像一个由 AI 组成的研究团队:多个 agent 并行开展实验,并持续共享彼此的发现。这或许也意味着机器人实验室开始出现类似 AI 领域的“扩展效应(scaling effect)”。

过去,大模型能力的提升往往来自更多 GPU、更多数据和更大的参数规模;而在 ENPIRE 中,研究团队开始尝试回答另一个问题:如果增加机器人数量和并行实验规模,是否也能持续加快机器人的学习和研发过程。

但这种加速也有相应的代价。论文显示,随着代理数量增加,总 token 消耗呈现超线性增长。原因在于,每个代理不仅要做自己的实验,还需要持续阅读和理解其他代理的研究进展。换句话说,系统用更高的计算成本换来了更短的研发时间。

另一个有趣的发现来自知识迁移。

完成插针任务之后,研究人员要求 agent 总结自己学到的经验,并生成一份 Markdown 文档。当新的 GPU 插入任务开始时,这份总结被直接附加到任务说明中。结果显示,这些文字形式的经验总结能够帮助 agent 更快掌握新任务。这说明,在 autoresearch 的过程中被迁移的不是模型参数,也不是训练数据,而是方法论。这与人类研究者记录实验笔记、总结经验再应用到新课题的方式颇为相似。

但目前来看,ENPIRE 还是存在一定的局限性。首先,系统并非完全自主运行。研究人员仍需要提前搭建实验环境、定义安全边界、设计自动验证机制,并为不同任务开发对应的重置流程。agent 能够自主改进策略,但实验平台仍然依赖大量前期工程投入。

其次,ENPIRE 目前验证的任务规模仍然相对有限,无论是 Push-T、插针还是 GPU 插入,本质上都属于结构化程度较高的桌面操作任务。系统能否扩展到更开放、更复杂的真实环境,仍有待进一步验证。

1.https://x.com/DrJimFan/status/2066921736369766762

2.https://research.nvidia.com/labs/gear/enpire/

运营/排版:何晨龙

注:封面/首图由 AI 辅助生成

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
高铁“免提姐”彻底社死!官方通报曝光更多恶行,拿没素质当个性

高铁“免提姐”彻底社死!官方通报曝光更多恶行,拿没素质当个性

社会日日鲜
2026-10-15 06:39:10
徐艺洋官宣当妈!晒一家三口海边合照好温馨,此前曾多次被曝生娃

徐艺洋官宣当妈!晒一家三口海边合照好温馨,此前曾多次被曝生娃

扒虾侃娱
2026-10-15 16:47:35
惨烈!最疯狂的股市,崩了!

惨烈!最疯狂的股市,崩了!

财经要参
2026-10-15 13:37:04
救市,尽力了

救市,尽力了

贩财局
2026-10-15 15:23:06
“穿靴子的一看就是穷养女”,大学女寝视频火了,4号深不可测

“穿靴子的一看就是穷养女”,大学女寝视频火了,4号深不可测

番外行
2026-10-15 08:16:10
洞察当代家庭洗护需求,TCL以科技创新化解洗烘痛点

洞察当代家庭洗护需求,TCL以科技创新化解洗烘痛点

中国家电网
2026-10-13 16:08:59
特朗普:我向伊朗承诺,不再除掉他们的领导人

特朗普:我向伊朗承诺,不再除掉他们的领导人

极目新闻
2026-10-15 13:46:59
再也不想回到马杜罗时代?委内瑞拉GDP暴涨7.14%,货架全面充盈,中国提前抢占红利,前8月贸易额突破50.57亿?

再也不想回到马杜罗时代?委内瑞拉GDP暴涨7.14%,货架全面充盈,中国提前抢占红利,前8月贸易额突破50.57亿?

回京历史梦
2026-10-15 09:12:40
真正的股灾还没开始

真正的股灾还没开始

曹多鱼的财经世界
2026-10-15 14:35:55
银行宣传“社银贷”!灵活就业人员可以贷款缴社保,三方共赢

银行宣传“社银贷”!灵活就业人员可以贷款缴社保,三方共赢

六子吃凉粉
2026-10-15 15:52:57
孙宇晨小人得志叫板王思聪:“以前嘲笑我,我现在比他爸都有钱了”

孙宇晨小人得志叫板王思聪:“以前嘲笑我,我现在比他爸都有钱了”

起点财经
2026-10-15 16:58:18
釜底抽薪!网传杭州KTV复工定下两条硬规,拆除休息室切换量贩系统,传统商K盈利模式彻底崩塌

釜底抽薪!网传杭州KTV复工定下两条硬规,拆除休息室切换量贩系统,传统商K盈利模式彻底崩塌

火山詩话
2026-10-14 08:04:42
仅4599元!苹果官宣:10月20日,新iPhone全面降价

仅4599元!苹果官宣:10月20日,新iPhone全面降价

搞机小帝
2026-10-15 15:14:39
1岁宝宝吃下被邻居投毒的鸡蛋,医院3次下达病危通知书,救治后留下严重后遗症;警方在蛋壳上发现针孔,邻居自首称“想毒黄鼠狼”……

1岁宝宝吃下被邻居投毒的鸡蛋,医院3次下达病危通知书,救治后留下严重后遗症;警方在蛋壳上发现针孔,邻居自首称“想毒黄鼠狼”……

都市快报橙柿互动
2026-10-15 07:43:51
长实集团就“李嘉诚去世”传闻发声:其暂不打算公开露面回应

长实集团就“李嘉诚去世”传闻发声:其暂不打算公开露面回应

南方都市报
2026-10-15 14:52:29
黄奇帆和唐宁有什么关系?

黄奇帆和唐宁有什么关系?

西虹市闲话
2026-10-15 13:28:15
数百万小时、500 亿参数,自然意志的 Scaling 信仰

数百万小时、500 亿参数,自然意志的 Scaling 信仰

晚点LatePost
2026-10-13 20:55:33
穆帅主导7分钟3球大逆转,姆巴佩世界波铁卫绝杀,皇马4-3罗马

穆帅主导7分钟3球大逆转,姆巴佩世界波铁卫绝杀,皇马4-3罗马

钉钉陌上花开
2026-10-15 05:15:30
别只盯2K+185Hz,真正狠的技术藏在屏幕最底下一层

别只盯2K+185Hz,真正狠的技术藏在屏幕最底下一层

极果酷玩
2026-10-14 22:23:31
「老房子」也要豹变

「老房子」也要豹变

豹变
2026-10-15 08:00:05
2026-10-15 18:28:49
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技评论独家合作
17371文章数 515233关注度
往期回顾 全部

科技要闻

核弹院士彭先觉:可控核聚变 不必再等50年

头条要闻

男子捉奸收2.5万被判敲诈后获释 申请423万国赔获受理

头条要闻

男子捉奸收2.5万被判敲诈后获释 申请423万国赔获受理

体育要闻

五大联赛第二射手,开着11年前的二手车

娱乐要闻

蒋劲夫晒体脂率引关注,家暴史再被扒

财经要闻

洋餐饮的中国生意:红利消退后的集体交权

汽车要闻

不止大空间/纯电增程任选 小鹏MONA L05来了

态度原创

房产
手机
教育
家居
公开课

房产要闻

海棠湾坐不住了!两大顶流定档;又有豪宅方案曝光!

手机要闻

OPPO手机重回16:9!全新阔直板工程机偷跑:6.35英寸2K屏加持

教育要闻

高一的重要性

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版