网易首页 > 网易号 > 正文 申请入驻

AI视频运镜玄学已破!告别无限抽卡,3D预演台直接封神

0
分享至


新智元报道


用 AI 做视频的同学总有这样的痛苦:提示词也不是没认真写,运镜方向、人物走位、画面构图交代了一大段,但模型给出的画面总是差着一截,运镜偏了几十度,人物走到中途消失,镜头速度前半段稳后半段飘。

ControlNet 论文对这个问题有过解释:文生视频系统天生缺空间锚定能力,运镜和人物站位这些空间信息用文字描述时精度就是不够,粗糙的 3D 白模才是空间锚点的正解。

白模控制被定位成面向专业影视制作的高级能力。

但做白模要么学 Blender(学习周期以月计),要么搭 ComfyUI 节点(需要一点编程基础),大量没有建模经验的创作者一直被卡在这道门槛上。

updream 在 8 月 17 日上线了一个叫「预演台」的新功能。


做法是传一张参考图进去,系统自动生成 3D 白模场景,创作者在场景里拖拽设置摄像机运动轨迹和人物走位,录完白模视频一键回到画布送进模型。


为了测这条路径到底管不管用,我们选了三个影史经典镜头做实测,每组都分别做了白模参考版和纯提示词版交给 MiniMax H3。

三颗经典镜头实测

这三个镜头分别测试了 updream 在「预演台」新功能加持下,一镜到底、多机位切换、复杂空间调度这三方面的能力究竟如何。

致敬《好家伙》:科帕卡巴纳跟随长镜头

这是斯科塞斯教科书级的跟随镜头——镜头从身后跟着一对男女穿过后厨走廊、推门进入餐厅、走到桌前坐下,15 秒不切,考验的就是运镜轨迹的连续性。

用一张意大利餐厅后厨走廊的概念图传入预演台。


生成的白模场景走廊纵深结构很清楚,两侧墙壁和尽头推门的位置都还原出来了。


在白模里设了两个人物沿走廊前行的走位轨迹,机位在身后两米左右用「特写跟踪」功能锁定跟随。

白模参考版中,镜头全程跟住了两个人物,推进速度基本均匀。

但第一次生成时,在第 4 秒时,两个服务员合二为一,中间撕裂的鬼影十分诡异。

生成了两次,第二次拿到了相对令人满意的结果。

纯提示词版的问题出在推门的瞬间。

镜头在走廊段跟了大约五六秒还是稳的,但进入餐厅的时候突然加速,跟随距离直接从身后两米跳到了人物正侧面,后半段几乎变成了侧拍。

生成了 3 次,没有一次能在推门环节保持住跟随轨迹。

致敬《盗火线》:咖啡馆镜头正反打

迈克尔·曼最经典的一场戏,两个男人隔桌对坐,三个固定机位正反打。

在预演台里设了侧面中景、角色甲正面近景、角色乙正面近景三个机位,时间轴上手动设好四段切换:A 四秒、B 三秒、C 四秒、再切回 B 四秒,每段首尾打好关键帧。


白模参考版的三次切换时机基本准确,第三刀(C 切回 B)比预设时间点大约晚了半秒,但不影响叙事节奏。

三个机位的景别都对了,侧面确实是中景,正面确实是近景,两个角色在不同机位之间的面部特征也保持得比较稳定。生成了两次拿到了可用的结果。

纯提示词版在第二次切换之后开始出问题:几个镜头之间的调度顺序都是错的。生成了 3 次,最好的一次在切换时机上也只对了前两刀,耗尽了抽卡的心力。

致敬《老男孩》:走廊侧面横移

朴赞郁的走廊长镜头,主角从左走到右,走廊里站着三个人挡路,依次侧身挤过,镜头在走廊对面做完全水平的横移跟拍。

四个维度同时在考验:主角走位、三人站位和通过顺序、横移速度、侧面构图锁定。

走廊的白模生成出来之后摆了四个人物,主角在最左端。机位轨迹用「绘制轨道」在走廊对面墙旁画了一条水平线,框选所有关键帧之后设成看向主角,高度手动调到一米五左右。

白模参考后的侧面构图保持了大约十二秒,最后三秒开始轻微向四分之三侧面偏转,偏转幅度不大,整体仍然读得出横向卷轴的感觉。

横移速度和主角行走速度基本同步,三个配角的站位正确,通过顺序也没有乱。

而经过两次尝试,纯文字版的站位无法做到像使用白模参考一样得到精确控制,甚至出现了人物像幽灵一样突然现身的诡异 Bug。

算一笔账,说几句实话

三组实测下来,白模参考版相比纯提示词版,显著减少了「抽卡」的次数,产出随机性得到有效控制。

但预演台也不是打开就会用的东西,对于新手而言还是有一点上手门槛的。

界面涉及 3D 场景操作,官方建议先读教程再上手,对完全没有空间编辑经验的创作者需要一段适应时间。

生成的是粗粒度白模,锁定动作路径和运镜方向够了,但精细建模级别的场景还差一截,细粒度白模需要自己做好了导入。

白模参考降低的是抽卡次数,不消灭抽卡,第一组实测里白模版也生成了两次才拿到满意结果。

不同创作者从这个工具里能获取到的价值不一样。

零基础的个人创作者受益最直接,建模的门槛被彻底跳过了。

有镜头语言经验的影视从业者可能等这类工具等了很久,终于能在 AI 视频生成里用上正经的运镜设计。

3D 从业者可能嫌粗粒度白模精度不够,但拿来快速验证一个镜头的方案确实省了手搭白模的时间。

updream 同步开启了「updream 预演台白模创作挑战赛」(今天起到 9 月 15 日 23:59),设了两条赛道:Showcase 创作赛道下分经典再映、调度大师、镜头新世界三个方向,要求成片和白模预演同屏呈现;预演台教程赛道,收预演台操作教学和创作经验分享。优秀的作品最高可 100 万积分(价值 10000 元)奖励,优秀创作者还有签约合作机会。

AI 视频这一年,各家比的是模型的画质、运动自然度和生成时长。模型能力拉近之后,下一轮比的是工作流,比谁能让创作者更稳定地出片。

白模参考是工作流里控制精度最高的一环,ControlNet 验证了路线,Seedance 2.5 和 MiniMax H3 给了模型支持,updream 预演台把工具门槛降了下来。

三块拼图齐了,还缺最后一步验证:预演台的粗粒度白模在大量真实创作场景下能撑住多复杂的镜头——而 updream 举办的挑战赛的首批作品会给出第一轮数据。

体验官网:https://www.updream.cn/

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
伊总统回国后,致美信件曝光:最高领袖已阵亡,停战对双方都好

伊总统回国后,致美信件曝光:最高领袖已阵亡,停战对双方都好

有范又有料
2026-10-02 01:54:07
拒绝向C罗道歉!葡萄牙主帅:有些人地位特殊,但是规则对所有人一样

拒绝向C罗道歉!葡萄牙主帅:有些人地位特殊,但是规则对所有人一样

念洲
2026-10-02 06:59:48
17亿上海大楼成最大笑话!欺骗700万人的张庭夫妇,彻底凉凉

17亿上海大楼成最大笑话!欺骗700万人的张庭夫妇,彻底凉凉

爱八卦的晓请
2026-10-01 09:56:16
C罗为何被激怒?名记:世界杯后本想离队,两次被热苏斯背叛

C罗为何被激怒?名记:世界杯后本想离队,两次被热苏斯背叛

奥拜尔
2026-10-01 17:09:07
彻底摊牌了!台积电重磅突破:不止2nm、3nm,硅芯片时代结束了?

彻底摊牌了!台积电重磅突破:不止2nm、3nm,硅芯片时代结束了?

疯狂小菠萝
2026-09-30 12:38:47
天彻底塌了!亚运全线溃败零金收官,中国篮球已跌至谷底!

天彻底塌了!亚运全线溃败零金收官,中国篮球已跌至谷底!

田先生篮球
2026-09-25 17:24:52
驻日武官王庆简:潜伏在日本20年,出卖了无数军情,没料到最后竟被一个老习惯断送了性命

驻日武官王庆简:潜伏在日本20年,出卖了无数军情,没料到最后竟被一个老习惯断送了性命

磊子讲史
2026-09-16 18:16:40
退休金拿到这个数就算知足,80%老人达不到,看看你够吗

退休金拿到这个数就算知足,80%老人达不到,看看你够吗

健身狂人
2026-10-01 20:47:23
苹果确认iPhone Duo内屏保护层可更换:买了AppleCare+仅需19美元

苹果确认iPhone Duo内屏保护层可更换:买了AppleCare+仅需19美元

cnBeta.COM
2026-10-02 05:54:50
日本劫难开始,中方不救,特朗普没想到,轮到自己遭日本人骂

日本劫难开始,中方不救,特朗普没想到,轮到自己遭日本人骂

旧史新谭
2026-10-01 10:54:56
上海知青与苗家妹子分离40载,40年后当了官,得知自己已儿孙满堂

上海知青与苗家妹子分离40载,40年后当了官,得知自己已儿孙满堂

温情邮局
2025-03-31 16:34:05
4-0!2-0!中国香港队豪取两连胜,拿满6分锁定第一,PK柬埔寨争冠

4-0!2-0!中国香港队豪取两连胜,拿满6分锁定第一,PK柬埔寨争冠

绿茵舞着
2026-10-02 00:09:39
记录报副主编:C罗对儿子落选葡萄牙U16感到不满

记录报副主编:C罗对儿子落选葡萄牙U16感到不满

懂球帝
2026-10-02 00:10:42
多所高校发文“过紧日子”,北大明确禁赴黄山、九寨沟、三亚海滨等21个景区开会

多所高校发文“过紧日子”,北大明确禁赴黄山、九寨沟、三亚海滨等21个景区开会

山西晚报
2026-09-29 10:48:20
毛主席严厉批评彭雪枫搞“山头主义”,双方当场激烈交锋,彭雪枫拍案而起,高声回敬:“只有山头,没有主义。”

毛主席严厉批评彭雪枫搞“山头主义”,双方当场激烈交锋,彭雪枫拍案而起,高声回敬:“只有山头,没有主义。”

人生录
2026-09-30 14:26:34
五角大楼宣布重大决定,或影响南海台海局势!

五角大楼宣布重大决定,或影响南海台海局势!

果妈聊娱乐
2026-10-01 19:33:45
日本外相警告中国:没有任何国家有理由引用 "敌国条款"!

日本外相警告中国:没有任何国家有理由引用 "敌国条款"!

一口娱乐
2026-10-01 06:06:07
“隐身”两月不再隐忍,郭德纲发文隐喻境遇,评论区直接沸腾

“隐身”两月不再隐忍,郭德纲发文隐喻境遇,评论区直接沸腾

小撇说事
2026-10-01 04:46:42
事态已经全面升级!赖清德有可能成为新中国历史上,唯一一位在任台湾地区领导人中出现重大变故的人物

事态已经全面升级!赖清德有可能成为新中国历史上,唯一一位在任台湾地区领导人中出现重大变故的人物

人生录
2026-09-11 00:05:21
动真格!中央开始对机关事业单位大整顿!这几类人受影响最大

动真格!中央开始对机关事业单位大整顿!这几类人受影响最大

职场资深秘书
2026-10-01 17:42:38
2026-10-02 09:24:49
新智元 incentive-icons
新智元
AI产业主平台领航智能+时代
16325文章数 67100关注度
往期回顾 全部

科技要闻

“分手”15天后,华为与赛力斯签约新五年

头条要闻

有关伊朗制裁问题 中国在联大投下反对票

头条要闻

有关伊朗制裁问题 中国在联大投下反对票

体育要闻

“今天的表现,我们可以昂首离开球场”

娱乐要闻

奚梦瑶晒四太豪礼!22只龙凤镯近300万

财经要闻

智谱发上亿Token 能挽回开发者信任吗?

汽车要闻

2027款极氪001将于明年一季度上市 现款猎装同步推新配色

态度原创

亲子
家居
手机
数码
公开课

亲子要闻

鼓吹国外选精生子,收割大龄剩女的又一利器

家居要闻

2026建博会(广州) 公装联探展交流活动

手机要闻

荣耀Magic9用户反馈盘点,想种草的可以看看

数码要闻

8月扫地机器人均价创年内低点!石头科技线上销额登顶

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版