网易首页 > 网易号 > 正文 申请入驻

物理定律也支持?AI视频工具一键删除物体

0
分享至

电影和电视导演要是拍完的镜头不理想,后期可以拿各种工具来修修补补。比如把不小心入镜的设备或者多余的群演给去掉。但要处理更复杂的物理互动,这招就不太够用了。

订阅我们的邮件,获取最新科技资讯。

打个比方,你要删掉一个正在碰着或撑着别的东西的物体,传统工具删完那个东西后,剩下的物体动作会违反物理规律——比如把角色坐的椅子删了,角色就悬在半空了。

懂点物理的招数

所以Netflix的研究员和合作者搞出了一个叫VOID(视频对象与交互删除)的AI框架,不光是简单地把东西从画面里去掉,还能模拟出东西消失后的物理效果。所以,还是刚才那个例子,椅子一没,它就能让角色自己掉到地上,看着可自然了。

这项创新的详细内容已经发表在一篇论文里,你可以在arXiv预印本服务器上找到它。

为了确保移除物体后画面看起来真实,而不是违反物理规律,VOID就像一个有物理感知的编辑系统。

它分三步来理解场景。首先找出所有可能受变化影响的区域,然后创建一张专用映射图(叫quadmask),用来标记阴影该消失的地方或物体可能移动轨迹不同的地方;接着生成一个新版本的视频,把所有变化都考虑进去。最后再对场景做一轮处理,优化运动效果,确保物体沿着不同路径走动时不会变形或走样。

学习因果关系

该系统经过数千对数字序列的训练,从而让它学会因果关系。通过观察这些模拟动作,它搞清楚了支撑、碰撞或障碍物消失时,物体一般会怎么反应。

为了说明VOID如何处理连锁反应,研究团队举了一个例子:一段多米诺骨牌倒塌的序列,其中中间的牌被删除。AI就得“明白”,缺了这些牌传递能量,后面的牌就该不倒。正如他们在论文中指出的:“VOID准确模拟了多米诺效应中断,所以黄色方块始终没倒。”

能做到这点,是因为AI不只是复制像素而已:“VOID并不仅仅是翻出训练数据里的视觉线索,而是用上了高级推理和世界知识……”

研究人员现在希望进一步扩展VOID的能力,用来处理更复杂的场景。

这篇文章由我们的作者Paul Arnold撰写,由Gaby Clark编辑,并由Robert Egan进行事实核查和审校——这是经过人工仔细打磨的成果。全靠像您这样的读者,才能让独立科学新闻持续下去。如果这篇报道对您有价值,请考虑捐款支持(尤其是每月定期捐款)。

更多信息: Saman Motamed等人,《VOID:视频对象与交互删除》,arXiv (2026)。 DOI: 10.48550/arxiv.2604.02296

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
男篮世预赛大反转?日本放水韩国或被反噬:中国队有望成最大赢家

男篮世预赛大反转?日本放水韩国或被反噬:中国队有望成最大赢家

篮球快餐车
2026-07-07 09:15:18
交通运输部:优先保障广西防汛抢险人员、防汛救灾物资运输,做好灾害损毁路段抢通保通

交通运输部:优先保障广西防汛抢险人员、防汛救灾物资运输,做好灾害损毁路段抢通保通

界面新闻
2026-07-07 12:39:29
白岩松:永远不要去埋怨C罗,问题不发生在他的身上

白岩松:永远不要去埋怨C罗,问题不发生在他的身上

懂球帝
2026-07-07 20:29:04
私密照二次流出!鹿晗评论区很乱,知情人曝关晓彤曾两次心软原谅

私密照二次流出!鹿晗评论区很乱,知情人曝关晓彤曾两次心软原谅

小徐讲八卦
2026-07-07 13:39:50
世界杯第27日:埃及爆冷淘汰阿根廷?梅西再进球?8强将全部出炉

世界杯第27日:埃及爆冷淘汰阿根廷?梅西再进球?8强将全部出炉

侃球熊弟
2026-07-07 11:18:52
广西六蓝水库

广西六蓝水库

土木内容分享
2026-07-07 19:33:52
知道日本的反应大,但没想到后劲儿这么大

知道日本的反应大,但没想到后劲儿这么大

这里是东京
2026-07-07 18:08:12
克宫:中国是俄罗斯的战略伙伴和盟友

克宫:中国是俄罗斯的战略伙伴和盟友

俄罗斯卫星通讯社
2026-07-07 15:16:12
美国1-4!输球不可怕,可怕的是赛后主帅这番话,脸都不要了!

美国1-4!输球不可怕,可怕的是赛后主帅这番话,脸都不要了!

郭夷包工头
2026-07-07 11:15:40
华为新机突然官宣:7月14日,正式发布

华为新机突然官宣:7月14日,正式发布

科技堡垒
2026-07-07 08:50:07
中国足协回应“佛得角邀国足踢友谊赛被婉拒”:消息不实

中国足协回应“佛得角邀国足踢友谊赛被婉拒”:消息不实

界面新闻
2026-07-07 18:19:33
C罗呆立原地+泪如雨下!获评6.8分全队倒数第3 18岁亚马尔上前安慰

C罗呆立原地+泪如雨下!获评6.8分全队倒数第3 18岁亚马尔上前安慰

风过乡
2026-07-07 05:31:20
广西洪水致养蛇场蛇逃出,约900条,画面太可怕,有人受伤抢救

广西洪水致养蛇场蛇逃出,约900条,画面太可怕,有人受伤抢救

180视角
2026-07-07 15:53:00
C罗谢幕,后会无期

C罗谢幕,后会无期

中国新闻周刊
2026-07-07 18:45:38
黄冈遭遇强对流天气,男子从12楼被大风“吸”出坠落绿化带,家属:还在重症监护室

黄冈遭遇强对流天气,男子从12楼被大风“吸”出坠落绿化带,家属:还在重症监护室

潇湘晨报
2026-07-07 12:12:27
巴拉圭政府声明:强烈谴责和反对阿马里利亚对姆巴佩的言论

巴拉圭政府声明:强烈谴责和反对阿马里利亚对姆巴佩的言论

懂球帝
2026-07-07 10:13:18
吹张红牌,惊动白宫:特朗普喊话“查查”巴西裁判,巴西足协驳斥

吹张红牌,惊动白宫:特朗普喊话“查查”巴西裁判,巴西足协驳斥

红星新闻
2026-07-07 16:55:27
法国足协:令人发指!要求启动司法程序;法国总统府、国际足联主席最新发声:强烈谴责!

法国足协:令人发指!要求启动司法程序;法国总统府、国际足联主席最新发声:强烈谴责!

鲁中晨报
2026-07-07 16:43:47
摩洛哥足协主席:尊重亚马尔的选择,他在摩洛哥永远受欢迎

摩洛哥足协主席:尊重亚马尔的选择,他在摩洛哥永远受欢迎

懂球帝
2026-07-07 19:25:38
强行借款,故意打乱付款顺序,自动勾选京东白条,京东的节操还有吗?

强行借款,故意打乱付款顺序,自动勾选京东白条,京东的节操还有吗?

老王说正义
2026-07-06 20:26:30
2026-07-07 23:27:00
生活魔术专家
生活魔术专家
里是「生活百科全书」,汇集了独特的生活小妙招和所见所得,让你轻松发现生活的美好与智慧
719文章数 7523关注度
往期回顾 全部

科技要闻

全球下载量第一,可阿里AI还没学会赚钱

头条要闻

媒体:巴拉圭"不回头" 与中国签自贸协定可能性几乎为0

头条要闻

媒体:巴拉圭"不回头" 与中国签自贸协定可能性几乎为0

体育要闻

比利时干掉美国:正义必胜大喜剧!

娱乐要闻

私密照流出!曝关晓彤曾两次原谅鹿晗

财经要闻

桔子数科暴雷启示录:合规定生死

汽车要闻

试驾全新坦克300 Hi4-Z/激光雷达/全场景NOA

态度原创

健康
艺术
旅游
数码
教育

粘食吃多了腹胀腹痛的居家缓解妙招

艺术要闻

当代中国画家,张可扬油画作品选

旅游要闻

文旅新探|兴凯湖:界湖如海处 一浪越千年

数码要闻

27寸255Hz高刷屏 华硕新款显示器只要1299元

教育要闻

你的坏情绪,正在悄悄改写孩子一生(附专业家长育儿课,限时免费领取)

无障碍浏览 进入关怀版