网易首页 > 网易号 > 正文 申请入驻

别被「更像真的视频」骗了,AI视频生成,还远未真正学会物理世界

0
分享至



这两年,视频生成模型进步很快。清晰度更高了,镜头更稳了,人物和场景看上去也越来越自然。很多时候,我们判断一个模型强不强,看的就是它 “像不像真的”。但这其实只回答了一半的问题:它看起来像真的,不代表它真的符合现实世界的物理规律。这件事放在短视频生成里,也许只是 “偶尔有点怪”;但如果视频模型真的要往 world model、仿真系统、具身智能这些方向走,问题就不一样了。一个模型如果连物体怎么接触、状态怎么变化、事件怎么按因果顺序发生都搞不清楚,那它再像,也只是像。



现在的视频评测,更像是在比 “好不好看”

目前,视频生成领域常见的评测方式,要么看自动指标,要么让人直接选 “哪个视频更好”。这种方式当然有意义,它能比较清晰度、流畅度、观感这些东西,但它很难告诉你:视频里到底有没有违反基本物理常识

比如,一个物体是不是无缘无故消失了;两个东西是不是明明没接触却发生了交互;一个动作的结果是不是和前面的过程根本对不上。这些问题,才真正关系到模型是在 “生成一个像真的画面”,还是在 “模拟一个可信的世界”。

Physion-Eval:从 “视觉真实” 走向 “物理真实” 的新 benchmark

这篇工作提出了Physion-Eval。它不是再做一个 “谁的视频更好看” 的排行榜,而是想认真回答一个更关键的问题:AI 生成的视频,在物理层面到底有多真实



  • 论文标题: Physion-Eval: Evaluating Physical Realism in Generated Video via Human Reasoning
  • 作者: Qin Zhang, Peiyu Jing, Hong-Xing Yu, Fangqiang Ding, Fan Nie, Weimin Wang, Yilun Du, James Zou, Jiajun Wu, and Bing Shuai
  • 作者单位:Physion Labs,斯坦福大学,MIT,哈佛大学,Character AI
  • 论文链接: https://arxiv.org/abs/2603.19607
  • 数据集链接: https://huggingface.co/datasets/PhysionLabs/Physion-Eval
  • 视频链接:https://www.youtube.com/watch?v=Vbn_W3WNUHw

这个 benchmark 同时覆盖第一人称和第三人称场景,包含10,990 条专家推理轨迹,覆盖22 类细粒度物理现象。和常见评测不太一样的地方在于,这里的每条样本不只是简单打个分,而是会标出错误发生在什么时候、属于哪一类问题,以及为什么不对

数据上,第三人称部分来自WISA-80K,第一人称部分基于EPIC-KITCHENS构建。为了保证标注质量,论文组织了90 位具有 STEM 背景并接受过本科物理训练的专家标注者,采用双人标注和资深专家裁决的流程,最后得到的是带时间戳、错误类别和文字解释的高质量标注。

在这一过程中,人类智能所展现出的优势尤为明显:人类不仅能够识别视觉上的异常,更能够基于物理直觉与因果理解,对复杂的动态过程进行推理和解释。相比之下,即使是当前最先进的多模态模型,在时序一致性、交互合理性以及隐含物理规律的判断上,仍存在明显不足。





最直接的结论:现在的模型,还远谈不上 “物理一致”

这篇工作的主结论其实很简单,也很扎眼:在物理过程敏感的场景里,83.3% 的第三人称生成视频和 93.5% 的第一人称生成视频,都至少包含一个人类可以明确识别的物理错误。这说明什么?说明今天的视频模型确实越来越会制造 “真实感” 了,但离 “真正符合物理规律” 还有很远。



而且这些错误不是零零散散的小毛病,而是系统性的。论文里总结的典型问题包括:接触或交互失败、对象突然出现或消失、时间连贯性崩塌、因果顺序错乱、材料或状态变化异常、几何碰撞不合理等等。换句话说,问题不只是 “画面有点假”,而是模型对物体、接触、运动和结果之间最基本的关系,还经常搞错。



很多错误不是粗糙,而是 “看着像,但其实完全不对”

Physion-Eval 里最有意思的地方,其实是那些具体例子。它们不是那种一眼就看出来的低级 bug,而是第一眼好像还行,仔细一想却明显不符合常识。

比如,桌面上突然多出一把本来不存在的刀;瓶口朝下,液体却不往下流;水直接穿过锅底;又或者一个锅被两根手指以几乎不可能的方式拎起来。它们的问题不在于 “渲染不精细”,而在于直接违背了物体守恒、重力、不可穿透性和稳定接触这些最基本的物理规律。

这也是为什么我们觉得,这项工作不只是 “又多了一个 benchmark”。它更像是在提醒大家:今天很多模型也许已经很会生成 “像真的视频”,但还远没有学会 “世界为什么会这样动”。





更麻烦的是,连最强的多模态模型也不太会看这些错误

论文还问了另一个很现实的问题:那能不能让现在的大模型来当 “自动评委”,替人判断一个视频有没有物理问题?

答案是,暂时还不行。

文章评估了10 个开源和闭源的 MLLM critic,结果显示,它们和人类判断之间还有明显差距。以Gemini 3.0 Pro为例,它会漏掉超过74.4% 的第三人称错误视频和 90.1% 的第一人称错误视频。而且它们不只是漏检,还会把错误发生的时间说错,甚至编出根本不存在的原因。

这点其实很关键。因为如果以后大家真想靠自动 critic 去评估 world model 或视频生成系统,那 critic 本身至少得先真的看懂视频里的物理过程。就目前来看,人类判断依然是最可靠的标准。









越是高动态的物理过程,越容易暴露当前模型的短板

论文进一步从physical intensitydynamics两个维度分析了生成模型与市面上已有的 MLLM critic 的表现。结果表明,相比强度大小,过程本身的动态性和复杂性更容易暴露视频生成模型的物理建模缺陷。对 MLLM critic 来说也是如此:只有当错误足够明显时,它们才会表现出有限的判断能力,但整体仍明显落后于人类。







总结

Physion-Eval 想指出的,不只是 “现在的视频生成模型还不够强”,而是一个更根本的问题:当行业越来越关注视频 “看起来有多真” 的时候,我们可能忽略了它 “实际上对不对”

对于真正想做 world model、机器人、具身智能和仿真的人来说,这个问题绕不过去。画面更清晰、动作更顺滑,当然重要;但如果物体会无故出现,液体不会往下流,动作结果和前因对不上,那模型就还没有真正学会世界的运行方式。

视频生成下一阶段,也许不该只继续卷观感,而应该更认真地去解决物体持续性、接触关系、状态变化、时序一致性和因果结构这些更本质的问题。“看起来对”,从来不等于 “实际上对”

作者介绍

本文由来自美国顶级科技公司与世界一流高校的豪华作者阵容共同完成,集结 Physion Labs、斯坦福大学、MIT、哈佛大学及 Character AI 的核心研究者。其中,Physion Labs 团队(Qin Zhang、Peiyu Jing、Bing Shuai)长期专注于生成式视频与世界模型中的物理一致性问题,构建了面向行业的评估基础设施与数据闭环,致力于成为下一代生成模型的 “物理可信层”。其余作者包括斯坦福大学的 Hong-Xing Yu、Fan Nie、James Zou、Jiajun Wu,麻省理工学院的 Fangqiang Ding,哈佛大学的 Yilun Du,以及 Character AI 的 Weimin Wang 等业内顶尖学者。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
连续两届无缘亚运决赛!中国男篮20分惨负日本 胡金秋16分

连续两届无缘亚运决赛!中国男篮20分惨负日本 胡金秋16分

醉卧浮生
2026-09-18 19:58:58
美联社:梅西率球队夺得冠军杯后,与美职联总裁发生激烈争执

美联社:梅西率球队夺得冠军杯后,与美职联总裁发生激烈争执

懂球帝
2026-09-18 21:21:38
摸臀事件后续!滴滴司机发声,“摸臀姐”的报应来了……

摸臀事件后续!滴滴司机发声,“摸臀姐”的报应来了……

麦杰逊
2026-09-18 14:04:45
“家被烧了,差点把我烧死了”,男子称小区加装电梯致消防车进不来,耽误救援大约30分钟?街办回应:正调查核实

“家被烧了,差点把我烧死了”,男子称小区加装电梯致消防车进不来,耽误救援大约30分钟?街办回应:正调查核实

大风新闻
2026-09-18 20:33:13
阿萨德倒台不到两年,叙利亚新政府却把15名外交官送到上海:中国手里有他们最缺的东西!

阿萨德倒台不到两年,叙利亚新政府却把15名外交官送到上海:中国手里有他们最缺的东西!

青青子衿
2026-09-15 21:52:49
冲上热搜!多所高校发文“过紧日子”,北大明确禁去21个景区开会,能线上开的会不线下聚

冲上热搜!多所高校发文“过紧日子”,北大明确禁去21个景区开会,能线上开的会不线下聚

南方都市报
2026-09-18 07:58:40
时隔12年进亚运决赛!韩国男篮大胜伊朗 李贤重26+14+7三分

时隔12年进亚运决赛!韩国男篮大胜伊朗 李贤重26+14+7三分

醉卧浮生
2026-09-18 16:53:02
男篮惨败被钉耻辱柱!日本队却疯狂挑衅中国队:郭士强被打哭了?

男篮惨败被钉耻辱柱!日本队却疯狂挑衅中国队:郭士强被打哭了?

篮球快餐车
2026-09-18 20:31:53
拍出这张照片的人就是天才!网友:不得不佩服

拍出这张照片的人就是天才!网友:不得不佩服

摄影技巧入门教程
2026-09-18 16:18:32
Lisa参加肥伦秀不敢开麦演唱,以纯访谈形式进行,美国观众不惯着

Lisa参加肥伦秀不敢开麦演唱,以纯访谈形式进行,美国观众不惯着

芊手若
2026-09-18 13:18:28
广东佛山一男子高空作业从30楼下到2楼,发现绳子被2楼老人剪断,当事人:老人不知是高空作业,想当晾衣绳用,已赔偿费用

广东佛山一男子高空作业从30楼下到2楼,发现绳子被2楼老人剪断,当事人:老人不知是高空作业,想当晾衣绳用,已赔偿费用

潇湘晨报
2026-09-18 15:47:14
随着卡塔尔0-2,亚运男足八强已诞生3席:1支东亚劲旅在列

随着卡塔尔0-2,亚运男足八强已诞生3席:1支东亚劲旅在列

侧身凌空斩
2026-09-18 20:25:10
佛州38岁女子与宠物狗发生不当行为被捕,丈夫查监控抓现行

佛州38岁女子与宠物狗发生不当行为被捕,丈夫查监控抓现行

环球趣闻分享
2026-09-17 13:10:13
浙江夜场整治事件舆论发酵!网传一女生从浙江回乡,先后相亲12个对象,听闻籍贯直接拒绝

浙江夜场整治事件舆论发酵!网传一女生从浙江回乡,先后相亲12个对象,听闻籍贯直接拒绝

火山詩话
2026-09-18 05:31:57
突发!罗永浩,翻车了!

突发!罗永浩,翻车了!

财经要参
2026-09-18 15:16:15
李嘉诚再次精准预判!如果不出意外的话,未来3年,楼市或迎来3大走向!

李嘉诚再次精准预判!如果不出意外的话,未来3年,楼市或迎来3大走向!

巢客HOME
2026-09-18 06:00:09
俄罗斯杜马选举:执政党五大领衔候选人名单,梅德韦杰夫、绍伊古未列其中

俄罗斯杜马选举:执政党五大领衔候选人名单,梅德韦杰夫、绍伊古未列其中

红星新闻
2026-09-18 14:50:31
美国为何没有贪官?不是没有,是因为美国从制度上消灭了贪官,就连贪污都是合法的

美国为何没有贪官?不是没有,是因为美国从制度上消灭了贪官,就连贪污都是合法的

扶苏聊历史
2026-09-12 17:43:57
朱迅老公王志送别敬一丹,走路不稳惹人担忧,夫妻俩超低调分开走

朱迅老公王志送别敬一丹,走路不稳惹人担忧,夫妻俩超低调分开走

180视角
2026-09-18 09:25:13
男篮溃败日本各界说啥?杨毅爆粗,苏群直指心态,呼吁郭士强下课

男篮溃败日本各界说啥?杨毅爆粗,苏群直指心态,呼吁郭士强下课

篮球资讯达人
2026-09-18 20:36:51
2026-09-18 23:07:00
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
14023文章数 142733关注度
往期回顾 全部

科技要闻

直击iPhone 18新机发售:黄牛加价不如前代

头条要闻

媒体:又一轮日本首相"保卫战"开打 高市或遭更猛烈危机

头条要闻

媒体:又一轮日本首相"保卫战"开打 高市或遭更猛烈危机

体育要闻

好吧,中国男篮辛苦了

娱乐要闻

陈思诚 佟丽娅不想让儿子知道两人离婚

财经要闻

研发0.25亿理财26亿,敷尔佳豪赌三类器械

汽车要闻

纯电/插混双动力+五座/六座双布局 海狮08应该怎么选?

态度原创

亲子
手机
时尚
本地
游戏

亲子要闻

蓉城幸福家・成长助力站|新学期,怎样构建稳定的家庭养育氛围?

手机要闻

儿童安全组织抗议苹果第五大道门店 iPhone 18 Pro上市当天多辆宣传车到场

没想到这件事,对我的改变这么大!

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

《金刚狼》又出严重故障 玩家吐槽:Bug比游戏好玩

无障碍浏览 进入关怀版