网易首页 > 网易号 > 正文 申请入驻

3秒视频参考,AI就能把角色稳定塞进新画面

0
分享至

Omni 1.1 这次更新,把视频生成的玩法往前推了一步:新增视频参考功能,你可以把某个角色或物体"带"进全新的视频画面里,而且保持一致性。

官方放出的演示案例很直观——一个人在两段各3秒的参考视频里做倒立动作,然后被合成到一辆行驶中的法拉利 Luce 上。参考视频以叠加方式展示,生成的画面里,人物动作和车辆行驶状态都保持了稳定。


视频参考到底解决了什么问题?

过去做视频生成,最头疼的就是角色一致性。你让AI生成一个人,换个场景、换个镜头,脸就变了。Omni 1.1 的思路是:先给AI看一段参考视频,让它记住这个角色或物体的特征,再把它插入到新的视频场景中。

从演示效果看,两个关键点值得注意:

  • 参考视频只需要3秒,门槛不高
  • 插入的角色和物体能保持"一致且准确"

这个功能适合谁用?

对做短视频、广告、影视预演的人来说,这等于省掉了大量重复生成的步骤。以前要保证同一个角色在不同镜头里长得一样,得靠后期修,现在直接给参考视频就行。

对普通用户来说,玩法也更丰富了:你可以把自己的一段视频作为参考,让AI把你放进任何场景——当然,前提是别拿去做违规的事。

技术上的看点

Omni 1.1 这次没有公布底层技术细节,但从功能表现看,它应该是在视频生成模型里加入了参考视频的条件输入机制,让模型在生成新画面时,能同时参考文本指令和视频特征。

这种"视频参考"和之前常见的"图像参考"不同:图像参考只能锁定静态特征,视频参考还能捕捉动态特征——比如人物的动作习惯、物体的运动轨迹。这意味着生成结果不只是"长得像",连动起来的感觉都能对齐。

和同类工具的差距

目前市面上能做视频生成的工具不少,但能把"角色一致性"做到这个程度的还不多。大多数工具要么只能参考单张图,要么需要多次调参才能勉强保持角色稳定。Omni 1.1 直接用视频做参考,等于把一致性问题的解决路径缩短了一大截。

当然,演示视频展示的是理想情况。实际使用中,参考视频的质量、目标场景的复杂程度,都会影响最终效果。但至少从官方放出的案例看,这条路是走得通的。

一句话总结

Omni 1.1 的视频参考功能,让"把角色稳定插入新视频"这件事从手动调参变成了给参考就行。3秒的视频,就能换来一个一致的角色——这个效率提升,对内容创作者来说是真香。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
何庭波最新论文:华为无法获得EUV光刻机,必须另寻出路

何庭波最新论文:华为无法获得EUV光刻机,必须另寻出路

观察者网
2026-09-05 10:37:06
中国还会出现第2个毛主席吗?外国专家曾说:天才出现具有偶然性

中国还会出现第2个毛主席吗?外国专家曾说:天才出现具有偶然性

乌克兰小静
2026-09-05 08:10:07
明天就让你上战场?新版国防动员法给出答案

明天就让你上战场?新版国防动员法给出答案

荷兰豆爱健康
2026-09-06 00:41:56
高铁女孩熟睡男生盯死手机不敢转头,两百万外网围观无声的人机对峙,藏着成年人不敢破冰的社交尴尬防线

高铁女孩熟睡男生盯死手机不敢转头,两百万外网围观无声的人机对峙,藏着成年人不敢破冰的社交尴尬防线

明话直说
2026-08-25 18:07:55
穆帅冷静应对皇马胜负;皇马内部已经笃定,聘请穆帅执教是正确选择

穆帅冷静应对皇马胜负;皇马内部已经笃定,聘请穆帅执教是正确选择

福酱的小时光
2026-09-05 12:21:35
美菲已用实际行动证明:一旦开战,中国航母根本没法通过巴士海峡

美菲已用实际行动证明:一旦开战,中国航母根本没法通过巴士海峡

掉了颗大白兔糖
2026-09-05 01:18:31
广州出差绕路去姨妈家,想借宿一晚被拒,我转身离开,没敢和妈提

广州出差绕路去姨妈家,想借宿一晚被拒,我转身离开,没敢和妈提

人间百态大全
2026-09-04 06:50:10
光刻机巨头意识到,中国造不成光刻机,就会造一个光刻工厂!

光刻机巨头意识到,中国造不成光刻机,就会造一个光刻工厂!

凡知
2026-08-27 12:27:55
275分钟一刀未剪,昆汀这部神作终于内地首映

275分钟一刀未剪,昆汀这部神作终于内地首映

爬虫饲养员
2026-09-04 12:24:29
14分钟破荒却遭绝平:利兹联客场憾平布莱顿

14分钟破荒却遭绝平:利兹联客场憾平布莱顿

慢享生活集
2026-09-06 01:09:24
彻底弃用!利物浦 3000 万水货坑惨全队!新阿诺德完美上位

彻底弃用!利物浦 3000 万水货坑惨全队!新阿诺德完美上位

澜归序
2026-09-05 09:14:29
孙宇晨偷笑:老胡,这局你输了。网友,这局能不能扳回来,靠你了

孙宇晨偷笑:老胡,这局你输了。网友,这局能不能扳回来,靠你了

再来一杯冰美式
2026-09-04 22:48:02
最新:网红餐饮店被徐汇警方刑事立案!此前被曝光这幕,让网友不适↗

最新:网红餐饮店被徐汇警方刑事立案!此前被曝光这幕,让网友不适↗

极目新闻
2026-09-05 20:28:44
为什么高认知人群在底层就是一场灾难?命运对一个人的顶级残忍,就是给了你清醒的大脑,而你却不具备改变现实的能力

为什么高认知人群在底层就是一场灾难?命运对一个人的顶级残忍,就是给了你清醒的大脑,而你却不具备改变现实的能力

微微笑了
2026-09-03 21:25:05
马雷斯卡:这种比赛大多数时候会丢球,很高兴我们最终赢球了

马雷斯卡:这种比赛大多数时候会丢球,很高兴我们最终赢球了

懂球帝
2026-09-06 01:17:11
发现中国一个奇怪的现象:只要有公婆帮扶的家庭,儿媳都忙着回公婆家;而公婆不帮的家庭,儿媳早已断联!

发现中国一个奇怪的现象:只要有公婆帮扶的家庭,儿媳都忙着回公婆家;而公婆不帮的家庭,儿媳早已断联!

心理观察局
2026-08-01 07:10:30
记者:海港俱乐部为国安远征军提供免费绿豆汤

记者:海港俱乐部为国安远征军提供免费绿豆汤

懂球帝
2026-09-05 18:53:18
多年交锋全平局!意甲豪门对决,胜负悬念彻底打破

多年交锋全平局!意甲豪门对决,胜负悬念彻底打破

老何绿茵笔记
2026-09-06 01:30:05
古代史上,唯一以姓为国号的王朝,此姓氏在国内排进前五

古代史上,唯一以姓为国号的王朝,此姓氏在国内排进前五

历史大学堂
2026-09-04 22:56:55
龚爽好友发文悼念,曝龚爽低调抗癌5年,2大因素加重病情,更多细节曝光

龚爽好友发文悼念,曝龚爽低调抗癌5年,2大因素加重病情,更多细节曝光

叨唠
2026-09-05 23:58:23
2026-09-06 02:08:49
硅屿手记
硅屿手记
有态度网友ytd
197文章数 70关注度
往期回顾 全部

科技要闻

华为何庭波,再次更新韬定律论文

头条要闻

患者疑将刀藏锦旗中连捅医生多刀 警方:嫌疑人被刑拘

头条要闻

患者疑将刀藏锦旗中连捅医生多刀 警方:嫌疑人被刑拘

体育要闻

本西蒙斯加盟国王,不管怎样,回来就好

娱乐要闻

阿Sa蔡卓妍首度求婚细节,感动落泪

财经要闻

被曝试药后死亡,药企董事竟怒怼记者

汽车要闻

千里浩瀚H5/30英寸大屏 星越L PLUS让你看到油车越级的一面

态度原创

游戏
家居
旅游
数码
军事航空

发售时间迎来新线索!《龙珠》新作或明年初就能玩到

家居要闻

2026建博会(广州) 公装联探展交流活动

旅游要闻

一川怒江碧水,百年古朴村寨,云雾漫染山野人间!

数码要闻

1.28kg塞进12核Zen 5!积核X16 Pro AMD版亮相:32GB LPDDR5X

军事要闻

俄罗斯建"粉碎大日本帝国"纪念碑 日本急了

无障碍浏览 进入关怀版