当世界模型生成的视频足以「以假乱真」,为何机器人依然「有眼无脑」?
2026 年 2 月 13 日,一则来自具身智能前沿的重磅消息引发学界与产业界震动:
由清华大学、北京大学、香港大学、普林斯顿大学、中科院、上海交通大学、中国科学技术大学、新加坡国立大学等顶尖机构联合推出的 WorldArena —— 首个面向具身世界模型的「功能 + 视觉」统一评测体系,正式面向全球开源发布。
这不是又一套「比谁画得真」的榜单,而是一面照向世界模型本质的镜子。
![]()
爆点直击:视觉满分,任务零分?
WorldArena 首次撕开「美丽视频」的伪装
「很多模型的生成视频,人眼看几乎完美,但让它真正指挥机器人抓个杯子 —— 立刻露怯。」
WorldArena 研究团队直言:当前世界模型评测被「视觉内卷」绑架太久,谁的视频更清晰、更流畅、更像好莱坞特效,谁就得分高。但真实世界从来不是电影 —— 机器人需要的是物理规律的理解、动作轨迹的精度、多步决策的稳定,而非一帧帧精美的「幻灯片」。
WorldArena 首次用数据证明:视觉质量与任务执行能力,相关性仅有 0.36!
这意味着:一个模型可以生成奥斯卡级视频,却在真实任务中几乎「失能」。
核心创新:从「看起来真实」到「用起来可靠」
WorldArena 不是对现有评测的修修补补,而是一次评测范式的根本重构。
✅ 创新一:六维视觉评测,不止于「好不好看」
视觉不再是「单一审美」,而是拆解为视觉质量、动作质量、内容一致性、物理遵循性、3D 准确性、可控性六大维度。尤其是物理遵循性与 3D 空间理解,被提升到与画质同等重要的地位 —— 因为机器人不信「魔术」,只信物理。
✅ 创新二:三大具身任务,直接拷问「能不能用」
WorldArena 在全球范围内首次将世界模型置于真实的具身任务流水线中进行压力测试:
作为数据生成引擎:它合成的轨迹,能否训练出更好的策略模型?
作为策略评估器:它对环境动态的建模,是否与真实物理引擎高度相关?
作为行动规划器:它能否闭环执行长时序、多步交互任务?
结果令人警醒:多数视觉高分模型,在任务评测中「溃不成军」。
而少数以动作条件建模为核心的模型(如 CtrlWorld),虽视觉非顶尖,却在策略评估相关性上高达 0.986,几乎媲美真实环境。
EWMScore:一个分数,对齐人类感知与模型能力
WorldArena 还推出了 EWMScore 综合评分体系,将多维客观评测指标统一映射为一个可横向对比的分数。
更关键的是:EWMScore 与人类主观评估高度正相关 —— 它不再是一个「黑盒学术指标」,而是一个能反映真实人类感知的标尺。
学术深意:世界模型的「iPhone 时刻」还没到
「我们离真正可用的具身世界模型,还有一段关键的路要走。」
这不是唱衰,而是一次清醒的集体转身。
WorldArena 用系统化实验向全球研究者发出信号:视觉生成能力已逼近天花板,但功能智能才刚刚破土。
当模型能生成一杯「看起来很冰的可乐」,却不知道冰块会浮起、杯壁会凝水珠,它就仍然是「视觉模型」,而非「世界模型」。
开放共建,评测权交给全球社区
WorldArena 不是闭门造车的学术工具,而是一个完全开放、可复现、持续迭代的社区平台。
项目主页:http://world-arena.ai
论文已上线:http://arxiv.org/abs/2602.08971
评测榜单实时更新:https://huggingface.co/spaces/WorldArena/WorldArena
代码与数据全开源:https://github.com/tsinghua-fib-lab/WorldArena
「我们不是在造一个排行榜,而是在为具身智能建立一套‘驾照考试系统’。」
—— WorldArena 团队
评测细节
多维度视频质量评估:
为了建立系统化的视觉评测标准,WorldArena 构建了六大核心维度,从感知真实到物理真实,全面刻画模型生成能力。
![]()
图 1 WorldArena 在六个关键维度对世界模型生成质量进行全面评估
1. 视觉质量
首先,我们评估视频是否「看起来真实」。通过图像质量、美学质量与 JEPA 相似性等指标,衡量生成视频在清晰度、色彩协调性及分布相似性方面的表现。这一维度主要刻画模型在感知层面的真实程度与视觉表现力。

2. 动作质量
仅有清晰画面远远不够,运动是否合理同样关键。
我们通过动态程度、光流连续性与动作平滑性,分析视频中运动的强度、连续性与时间一致性。该维度用于刻画生成内容在时序层面的稳定程度与运动特征。

3. 内容一致性
真实世界不会「瞬间变形」。
我们通过主体一致性与背景一致性指标,衡量对象与场景在时间与空间维度上的稳定性,分析是否存在结构漂移、身份变化或背景不连贯等现象。

4. 物理遵循性
对物理规律的遵循能力是连接「视觉」与「功能」的关键桥梁。通过对视频中机械臂和物体交互质量与轨迹准确性,评估机器人与物体交互的合理程度,以及动作轨迹与物理规律之间的匹配关系。

5. 3D 准确性
空间理解能力,是世界模型迈向具身智能的重要基础。
我们通过深度准确性与透视一致性指标,刻画生成视频的空间结构是否符合几何与透视规律,分析模型对三维结构关系的理解能力。

6. 可控性
最后,也是最关键的一步:模型是否「听得懂指令」。
通过指令跟随、语义一致性与行动跟随能力,评估模型对外部输入的响应程度,以及不同指令条件下生成结果的区分能力。

具身任务功能性评估:
WorldArena 的另一项核心创新,在于首次系统性评估世界模型在真实具身任务中的「功能能力」。
我们不再只问模型的视频生成得有多逼真?而是进一步追问:它能否真正参与任务执行?
为此,WorldArena 从三个关键角色出发,全面评估世界模型的能力:
作为数据生成引擎,是否能有效补充下游策略训练数据?
作为策略评估器,是否能准确刻画真实环境的状态转移?
作为行动规划器,是否具备支持闭环执行与长期决策的能力?
传统评测往往停留在视觉层面,而 WorldArena 将评估延伸至下游具身任务本身。我们关注模型是否能够在动态环境中做出有效决策,是否能够处理复杂的多步交互,以及是否具备稳定的规划与执行能力。通过这种功能导向的评测框架,我们得以更全面地理解世界模型的真实能力边界,并判断它们是否具备走向实际具身应用的潜力。
![]()
图 2 具身下游任务评测体系(数据合成引擎、策略评估器、动作规划器)
EWMScore:统一的综合评分体系
为了让评测结果更直观、更可比,WorldArena 引入了统一的综合指标 ——EWMScore。EWMScore 通过整合多维度视频评测指标,将视觉质量、物理一致性与指令遵循能力等关键因素统一映射为一个综合分数,为每个模型提供清晰、可横向对比的性能刻画。更重要的是,实验结果表明该指标与人工评估结果高度正相关,能够真实反映模型综合能力。通过 EWMScore,我们让世界模型的能力评估,从「多指标碎片化比较」,走向「统一、可解释、可对齐」的综合衡量体系。
![]()
图 3 14 个世界模型 EWMScore 及不同维度指标对比
视频质量与功能之间的鸿沟:从视觉到执行的能力差距
WorldArena 的系统性评估揭示了一个关键现实:当前世界模型在视觉生成层面已取得显著进展,但在真正支撑具身智能任务与长期决策方面仍存在本质短板。
具体而言,尽管许多模型能够生成高度逼真的视觉效果,它们在复杂物理环境中的一致性与稳定性却明显不足。尤其是在长时序、多步交互的任务中,模型往往难以持续遵循物理规律,容易出现动态漂移、目标偏离或策略失稳。这一现象表明,仅依赖视觉生成能力,远不足以突破具身智能的核心瓶颈。
通过对数据引擎、策略评估、动作规划三类关键具身下游任务的系统评测,WorldArena 进一步验证了这一结论:当前世界模型虽能生成「好看」的视频,却尚未具备支撑真实具身应用的能力。
以数据引擎任务为例,我们利用世界模型生成合成轨迹,用于补充下游策略模型(如 VLA)的训练数据。实验结果显示,部分模型确实能够带来一定程度的性能提升,但整体来看,其生成数据质量仍显著落后于真实数据,多数模型尚难以为下游策略学习提供稳定且可靠的增益。
![]()
表 2 以世界模型作为数据合成引擎,训练得到的 VLA 模型性能对比
在动作控制型世界模型的评估中,我们通过「策略评估任务」衡量其是否能够作为真实环境的有效代理。
具体而言,我们训练了一系列不同能力水平的 VLA(Pi 0.5) 模型,并分别让它们与真实物理仿真环境和世界模型环境进行交互,从而获得两组性能评估结果。通过计算两者之间的相关性,我们可以判断世界模型是否准确刻画了真实环境的状态转移规律。
在 CtrlWorld 与 Cosmos-Predict 2.5 上的实验结果呈现出显著差异:CtrlWorld 的策略评估相关系数高达 0.986,几乎与真实环境评测结果保持一致,表明其在动态建模层面有效捕捉了真实环境的演化机制。相比之下,Cosmos-Predict 2.5 的相关性明显较低,这一现象也与其在视觉生成评测中的表现形成呼应。
![]()
图 4 基于世界模型和物理仿真环境的策略评估结果相关性
在动作规划任务中,我们进一步将世界模型接入逆动力学模型,实现端到端的具身任务执行。实验发现,尽管部分世界模型能够生成视觉上合理的未来预测,但在支持闭环控制,尤其是长时序复杂任务时,其性能仍显著落后于成熟的策略模型(如 Pi 0.5)。
这表明,当前世界模型虽然在一定程度上捕捉到了环境动态,却尚不足以支撑稳定、可靠的自主控制行为,尤其在长期决策与复杂交互场景中仍存在明显短板。
![]()
表 3 基于世界模型进行动作规划的任务性能对比
这些实验揭示了一个关键挑战:世界模型的终极目标,不是生成漂亮的视频,而是成为可以支撑自主决策的环境代理。
真正可用的世界模型,必须理解物理规律、精确刻画动作细节、在长时序任务中保持一致性并且在复杂环境中持续稳定执行。否则,它们仍然停留在「视觉生成模型」的阶段,而不是「具身智能基础设施」。
WorldArena 的结论很明确:世界模型正在逼近真实世界,但距离真正可用,还有一段关键的路要走。
评测与人类感知的高度对齐
一个关键问题是:模型指标好看,真的代表人类也觉得「真实」吗?
WorldArena 在评测设计上,首次大规模引入人工评估,与自动指标 EWMScore 进行深度对齐。我们不仅关注视觉清晰度,在四个核心维度上开展了大规模人类评测:视频整体质量如何、是否符合物理规律、是否遵循复杂指令、模型之间相对优劣。
人工评估结果揭示出一个清晰趋势:商业化大型视频模型(如 Veo 3.1、Wan 2.6)在整体质量、指令遵循和物理符合性上表现优异,展现出强大的感知现实性与语义一致性。在具身世界模型中,基于动作条件的模型(如 CtrlWorld)显著优于基于文本驱动的模型,尤其在物理合理性方面表现更稳定。这说明:明确的动作建模,是生成高质量视觉预测的关键。
更重要的是,我们发现 EWMScore 与人类主观评估高度正相关。这表明,EWMScore 并非一个抽象的复杂指标,而是能够有效刻画人类综合感知判断的评测标准。但当我们进一步分析其与具身任务性能的关系时,一个更值得警惕的事实浮现:与数据引擎任务的相关性为 0.600,与动作规划任务的相关性仅为 0.360。
这意味着 —— 视觉真实,并不等于功能真实。即便模型在视觉质量上获得人类认可,其对真实任务执行能力的支撑仍然有限。尤其是在闭环控制场景中,视觉表现与功能性之间尚未建立强关联。
![]()
图 5 EWMScore 与人类评估、具身下游任务性能相关性分析
结语:从「生成世界」到「理解世界」,评测决定了技术进化的方向
WorldArena 的意义,远不止于一套新指标。
它标志着具身智能评测正在从「审美导向」走向「功能导向」,从「论文里的对比实验」走向「真实场景的能力验证」。
当世界模型不再比拼谁更「像电影」,而是谁更「懂物理、能干活、靠得住」,具身智能才真正开始。
© THE END
文章来源:机器之心。
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.