网易首页 > 网易号 > 正文 申请入驻

ICLR 2026|新版「图灵测试」:当VLA走进生物实验室

0
分享至



现有 VLA 模型的研究和基准测试多局限于家庭场景(如整理餐桌、折叠衣物),缺乏对专业科学场景(尤其是生物实验室)的适配。生物实验室具有实验流程结构化、操作精度要求高、多模态交互复杂(透明容器、数字界面)等特点,是评估 VLA 模型精准操作、视觉推理和指令遵循能力的理想场景之一。



近期,来自香港大学MMLAB 罗平老师团队和上海交大穆尧老师团队的工作——Autobio 正式被 ICLR 2026 接收,并获得了 8-8-6-6 的同行评议分数。AutoBio 是一个面向数字化生物实验室的机器人仿真系统与基准测试平台。我们通过这篇工作,尝试系统性回答一个关键问题:

当前主流的视觉 - 语言 - 动作(Vision-Language-Action, VLA)模型,是否已经具备在真实生物实验室中执行实验流程的能力?



  • 论文标题:AutoBio: A Simulation and Benchmark for Robotic Automation in Digital Biology Laboratory
  • 论文链接:https://openreview.net/forum?id=UUE6HEtjhu
  • 论文代码:https://github.com/autobio-bench/AutoBio
  • https://huggingface.co/autobio-bench

一.研究背景:为何生物实验室构成关键挑战

与日常操作环境相比,生物实验室在机器人自动化层面呈现出一组高度耦合的挑战:

首先,实验操作通常具有长时序和强约束特征。即便单步动作相对简单,其组合往往构成对顺序一致性和状态依赖高度敏感的完整实验流程。

其次,实验器材大多数为交互式,广泛采用螺纹、卡扣、分档旋钮等精细机械结构,对位姿控制和轨迹规划提出远高于常规操作的要求。

此外,液体样本与透明容器的普遍存在,对视觉感知提出了更大的挑战,而这类场景在现有仿真与评测体系中长期被简化或忽略。

上述因素共同导致:即便在家庭或工业场景中表现良好的模型,也可能在实验室任务中迅速失效。这一现象表明,现有基准并不足以反映模型在科研场景下的真实能力边界。



二.AutoBio 的核心设计思想





如上图,AutoBio 并非简单复刻实验室环境,而是从实验流程本身出发,提出一种以生物实验语义为中心的建模与评测范式。

我们将复杂实验操作抽象为一组生物实验原语(biological primitives),例如样本转移、混合反应、条件调控、分离与保存等。这些原语进一步映射为可执行的机器人运动与控制模块,并在统一的仿真环境中进行组合。

在系统层面,AutoBio 由三部分构成:

  • 面向真实实验室的高保真仿真系统;
  • 覆盖多难度等级的标准化实验任务基准;
  • 与 VLA 模型直接兼容的数据生成、训练与评测接口。

这一设计使 AutoBio 能够在保持实验语义一致性的前提下,对不同模型进行可复现、可对比的系统评估。

三.一个真正 “像实验室” 的仿真系统

为了让机器人面对的环境尽可能接近真实实验室,AutoBio 在仿真层面进行了多项针对性扩展:

1. 实验仪器的数字化建模

为确保实验操作的真实性,AutoBio 引入了一套从真实仪器到仿真资产的系统化建模流程。通过多视角视频采集与 3D Gaussian Splatting 重建,我们获得高保真的几何与外观表示,并结合 CAD 建模与结构标注,生成可用于物理仿真的数字仪器模型。

该流程兼顾了视觉真实性与物理可交互性,避免了传统手工建模在复杂结构与真实比例上的偏差。



2. 实验室专用物理机制

标准物理引擎往往难以直接覆盖实验室中常见的交互模式。为此,AutoBio 针对生物实验高频操作扩展了一系列物理机制,包括但不限于:

  • 基于螺纹结构的旋拧与自锁建模;
  • 具有离散阻尼特性的分档旋钮;
  • 偏心机构驱动的周期性振荡;
  • 面向液体样本的准静态液面建模。

这些机制使仿真环境能够更准确地反映实验操作中的关键物理约束,从而避免模型在评测中依赖不现实的 “捷径策略”。



3. 面向视觉模型的渲染与界面支持

考虑到 VLA 模型高度依赖视觉输入,AutoBio 在渲染层面引入了基于物理的渲染(PBR)管线,以提升透明材料、液体以及仪器表面的视觉真实性。

同时,系统支持仪器数字界面的动态渲染,使机器人能够通过视觉信号读取参数、识别状态变化并执行相应操作。这一能力对于涉及人机界面的实验任务尤为关键。



四、AutoBio Benchmark:从实验流程到评测任务

基于上述仿真能力,AutoBio 构建了一个包含 16 个任务的评测基准,覆盖三个难度等级:

  • 简单任务:单步或低精度操作,如打开或关闭仪器盖;
  • 中等任务:需要一定精度和语言理解能力,如拧开离心管、样本转移;
  • 困难任务:涉及多模态推理,如读取屏幕参数并精确调节实验设备。



每个任务均支持自动化专家轨迹生成、随机化初始条件以及统一的成功判定机制,使不同模型能够在一致条件下进行公平比较。

五、当前模型的能力边界

我们系统评测了多种主流开源 VLA 模型。实验结果如下图:



  • 在简单任务上,模型已表现出较高成功率;
  • 当任务涉及高精度装配、液体判断或屏幕读数时,成功率显著下降;
  • 失败往往源于细节误差的持续累积,而非对任务的完全误解。

这一结果揭示出当前模型在高精度操作、细粒度视觉推理以及长期实验流程建模方面仍存在显著不足,也进一步验证了 AutoBio 在刻画真实科研场景挑战方面的必要性。

六、总结

AutoBio 提供了一个面向生物实验室的统一仿真与评测框架,使研究者能够系统性分析机器人在真实科研场景中的能力与局限。

我们的目标并非给出最终解决方案,而是通过清晰的问题定义和可复现的评测体系,为通用机器人走向科研自动化提供一个坚实的起点。

随着模型架构、训练范式与跨模态推理能力的持续发展,我们希望 AutoBio 能够成为连接机器人学习与生命科学自动化的重要基础设施。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
在江苏,最不能相信的一句话就是“我们家不补课”

在江苏,最不能相信的一句话就是“我们家不补课”

锡望
2026-07-16 13:42:07
解放军已进台海,台当局不敢登岛,洪秀柱启程赴陆,统一势在必行

解放军已进台海,台当局不敢登岛,洪秀柱启程赴陆,统一势在必行

你是我的小甜甜
2026-07-18 06:50:41
夺冠幕后功臣!华子自曝支招唐斯对付文班:我给了他一套通关秘籍

夺冠幕后功臣!华子自曝支招唐斯对付文班:我给了他一套通关秘籍

罗说NBA
2026-07-18 05:16:01
彭水山体崩塌事件:虽是天灾,更是靠山而建的致命隐患

彭水山体崩塌事件:虽是天灾,更是靠山而建的致命隐患

胡言炫语
2026-07-18 02:40:25
伊拉克库区遭空袭

伊拉克库区遭空袭

极目新闻
2026-07-18 07:20:38
NBA总裁受不了了:詹姆斯不决定我们去不了赛程,揭幕战圣诞大战全悬

NBA总裁受不了了:詹姆斯不决定我们去不了赛程,揭幕战圣诞大战全悬

日常碎碎念啊
2026-07-18 02:11:30
B站漫展猥琐男对女coser咸猪手事件,现场被拍挂网上后本人道歉真活该

B站漫展猥琐男对女coser咸猪手事件,现场被拍挂网上后本人道歉真活该

浪花妈妈
2026-07-17 01:27:37
越南首度公开中越战争核心内情:坦言若中方五天内不撤兵,驻守谅山的主力将全军覆没,当年兵锋直指河内的这场冲突,最后走向是怎样的?

越南首度公开中越战争核心内情:坦言若中方五天内不撤兵,驻守谅山的主力将全军覆没,当年兵锋直指河内的这场冲突,最后走向是怎样的?

唠叨说历史
2026-07-17 14:20:46
5年1691场官司告遍中国,LV背后的中国律所恐怕要黄

5年1691场官司告遍中国,LV背后的中国律所恐怕要黄

小武侃风云
2026-07-18 07:18:33
广西:你的良心呢?为了缩短生产周期、卖相更好,男子往豆芽里添加...判刑!

广西:你的良心呢?为了缩短生产周期、卖相更好,男子往豆芽里添加...判刑!

广西活动
2026-07-17 13:02:45
特斯拉发布两轮新车!外观真的帅

特斯拉发布两轮新车!外观真的帅

花果科技
2026-07-17 16:59:26
被注射不明物、三年没来例假、耳朵失聪长霉,为何没一人为她说话

被注射不明物、三年没来例假、耳朵失聪长霉,为何没一人为她说话

叨唠
2026-07-18 03:28:57
深市公司,密集回购增持!

深市公司,密集回购增持!

证券时报
2026-07-17 21:34:23
梅西:给亚马尔洗澡时他还是个婴儿,现在竟然要在世界杯交手

梅西:给亚马尔洗澡时他还是个婴儿,现在竟然要在世界杯交手

懂球帝
2026-07-18 07:40:09
台湾军情局六处副处长庞大为,潜入广州秘密策反解放军少将,亲手搅乱96年台海军演,这位两岸谍战第一人,晚年迎来了什么结局?

台湾军情局六处副处长庞大为,潜入广州秘密策反解放军少将,亲手搅乱96年台海军演,这位两岸谍战第一人,晚年迎来了什么结局?

磊子讲史
2026-07-15 15:39:34
麦当劳店员被指向顾客可乐中吐口水,店长回应:涉事店员是兼职学生,已被停班,尚未辞退,目前正在调查

麦当劳店员被指向顾客可乐中吐口水,店长回应:涉事店员是兼职学生,已被停班,尚未辞退,目前正在调查

台州交通广播
2026-07-18 03:03:29
中国女篮告别世界杯!揪出头号罪人:沃列特连过三人送中国国家

中国女篮告别世界杯!揪出头号罪人:沃列特连过三人送中国国家

小彭美识
2026-07-18 02:07:31
萨拉危难之际,菲律宾最高将领,把一条命令直接下给了首都近卫军

萨拉危难之际,菲律宾最高将领,把一条命令直接下给了首都近卫军

徐徐道史
2026-07-18 02:25:50
穆里尼奥遗憾落空!皇马传奇拒绝回归!不愿重返伯纳乌

穆里尼奥遗憾落空!皇马传奇拒绝回归!不愿重返伯纳乌

澜归序
2026-07-17 02:45:30
“小仙女”又横空出世!一女生看到备胎结婚天塌了,发小作文狂骂备胎

“小仙女”又横空出世!一女生看到备胎结婚天塌了,发小作文狂骂备胎

火山詩话
2026-07-12 06:35:33
2026-07-18 07:52:49
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
13537文章数 142693关注度
往期回顾 全部

科技要闻

WAIC2026看什么?这份"不迷路"攻略请收好

头条要闻

美军连续七晚空袭伊朗 伊朗称将进入"全面进攻"阶段

头条要闻

美军连续七晚空袭伊朗 伊朗称将进入"全面进攻"阶段

体育要闻

30亿欧对决,世界杯季军战毫无意义?

娱乐要闻

曲婉婷自爆患癌!全网喊“苍天绕过谁”

财经要闻

梁文锋不需要天才

汽车要闻

把中国超跑卖到英国,比亚迪正在被世界看见

态度原创

教育
家居
亲子
时尚
艺术

教育要闻

新学期共22周!南京中小学新校历来了

家居要闻

2026建博会(广州) 公装联探展交流活动

亲子要闻

宝宝听爸爸的话一起翻身 爸爸带娃

东方时序美学,刷新中国旗舰家轿价值坐标

艺术要闻

被遗忘的国家主席,书法写得真好啊!

无障碍浏览 进入关怀版