网易首页 > 网易号 > 正文 申请入驻

如何在虚拟的AI空间,搭建一个真实可感的影像世界

0
分享至

文 | 新声Pro,作者 | 冯勇

当AIGC影像不再只是跳出早期依赖「抽卡」生成单一特写与零碎分镜的短片阶段,实质性迈向复杂叙事与重体量制作阶段,空间成为当下AIGC影像创作正在克服的重要难点。

可以类比实拍流程里的商业片、大制作,其为了保持影片世界观美学的呈现统一、空间纵深关系真实,往往需要实地造景、搭建拍摄影棚。

在AIGC影片创作中,空间的难点主要体现在两方面:

一是资产维度,受限于大模型的算力分配,单次图片/视频生成难以兼顾高精度的主体与复杂的环境。这倒逼创作者必须将数字资产筹备作为核心前置环节,建立一套可跨场景复用、质量稳定的AI资产库,以保障成片的视觉连贯性。

二是空间构建和角色调度维度,复杂的AI内容创作同样涉及人物走位、摄影机运动、景深关系等,需要基于拍摄空间进行规划。但目前视频大模型的底层逻辑是基于二维图像进行概率预测,天然缺乏物理坐标系与空间常识;在处理复杂的人物走位和镜头调度时,就迫使创作者必须介入更加精确的调度引导与分镜设计。

当更多重体量AI影像作品正在不断落地,超创们在具体创作中对构建空间的不断尝试,就像是在AI世界搭建摄影棚,他们需要像筹备服化道一样提前储备数字资产,也通过工具锁定空间关系?最终的目的都是为了能构建一个观感真实、立体生动的三维世界。

对抗平均化审美的资产

AI工作流里的数字资产,涵盖人物、场景、道具等核心视觉元素的参考图,是进行AI内容生成前的重要筹备。

目前,资产质量在专业化的AI创作里愈发显得重要——所有的场景、道具、主配角人物等一切视觉呈现都属于资产,有确定性的资产作基础,成片内容的一致性更易得到保证。前期创建并固化的资产,在后续戏份中仍然可以直接调用,能大幅减少后期重复抽卡的时间和算力成本。

特别是奇幻、战争、悬疑等重度依赖场景与视效的题材,更需庞大的前置资产库作为质量底座;可以说,资产厚度直接决定了AI作品的视觉风格与质感上限。

尽管有观点认为,AI时代,作品的风格审美与影调特色已不再是创作者核心壁垒。但在具体创作中,如何去除AI味,如何将一个AI作品的真实感从70分提升到90分,仍是头部创作者出圈的核心要素。

如抖音头部AI超创@Mx-Shell 创作的AI微电影《丧尸清道夫》,其成功破圈首先就得益于@Mx-Shell 将「美式复古+科幻赛博」的画面风格实现了极逼真呈现。

此外,做资产之所以成为当下一个重点,本质上是创作者在与大模型的「算力分配机制」作斗争。

在今年的上影节AI片场创作实践内,有过实拍经验、《愤怒的小孩》《合法伴侣》的导演黄雷发现,当他给AI的要求越多,算力分配就越平均,最终会导致每个细节都趋于平庸。「复杂镜头需要的算力远超简单镜头,在平台均等扣除积分的机制下,复杂镜头必崩」。

另一位参与上影节AI片场的AI创作者王泽也遇到了同样的困境:为了节省算力,AI甚至会在生成时「在群演身上贴主角的脸,但凡能看清五官的群演都要单独做资产,要么用遮挡、虚化来处理」。这意味着,为了成片质量保障和视觉风格统一,前期建立一套完备细致的资产必不可少。

《乘船而去》导演陈小雨做AI资产的方法论,正是考虑到单次算力有限的难题:「不指望一步到位,把复杂的任务拆解,让AI每次只专注于一件事」。

@Mx-Shell 在他发布的视频中也分享过创作《丧尸清道夫》主角的资产流程,衣着风格、配枪道具以及角色的模特站姿等,都是分别找参考图生成再合成的,甚至参考图还需要在前期进行多次生图调整。


@Mx-Shell 还会进行负面资产框定,不仅规定「角色是什么」,还明确「角色不是什么」来剔除错误元素。当然这一切是建立在其较为专业、成熟的提示词功底之上。

抖音博主@阿盐 创作的国风奇幻AI短片《穿越山海经》,其中包含大量高频打斗场面与奇幻视效,需依托极其庞大的资产库提供底层支撑。所以,其前期创作的资产不仅包括各角色的三视图,片中的多个古代怪兽、山海奇观,甚至是天庭上的云朵、花草等元素的资产图,@阿盐 都单独进行了构建。


另一个成本更高但也更精细的资产方式是通过「实拍转绘+AI生成」实现。实地采集光影结构、空间透视和建筑细节,再将其喂给AI作为起始帧、参考图,能给AI搭建起真实的物理框质感。

陈小雨目前在进行AI长片《机器背包客》的制作,就曾在4月中旬,带着编剧组、摄影指导、美术指导、制片人前往拉丁美洲,进行了为期一个多月的实景采风。「我们想要建立自己的资产库,实地的去拍很多的道具场景,而不是全靠提示词生成。」这些实景的素材,加上团队「手搓」的3D资产,将共同构成《机器背包客》的数字资产。

当然,在创作预算和时间有限的前提下,资产也不一定是越丰富越好。凭借AI作品《积木》在戛纳国际电影节科幻电影峰会斩获金奖,年仅26岁的AI超创@山音 的解决办法是:先厘清要在片子中突出什么样的氛围和情绪,然后着重打造该方面的资产。

如《阿明的一天》主题是体现当代人工作压抑、被领导折磨的普世情绪,他主要打磨的资产便是公司暗沉的环境和其中多个框住员工的工位。


跳出内容创作者视角,数字资产在产业链各环节同样具备战略价值。水母智能、Seko AI等工具方为提升垂直赛道竞争力,已将积累数字角色资产、提供风格化场景作为上半年的核心竞争点。

影视和剧集公司也的确生长出了数字艺人(包括AI演员、AI歌手)的资产需求,所以上半年,市场中衍生出了专门从事AI数字人脸售卖的中间业务。

商业化落地较早的@麦橘 的团队业务便是专注于「AI捏脸」这一环节,然后售卖给影视、剧集公司。某种程度上,他们都是在用不同方式,为专业的AI创作实现「搭建虚拟影棚」的工作。

AI缺少坐标系和空间感

搭建好虚拟影棚后,如何在其中进行空间调度是另一客观问题。

长片内容里,对于需要通过镜头语言实现叙事和情感表达的导演而言,人物调度、机位运动、景深遮挡等要素都需要一个具明确空间感的场景来实现。

而大模型本质是基于二维图像进行概率预测,没有坐标系和重力系统,不理解物理规则和空间关系。黄雷表示:「AI是没有坐标系的;除非你先在内部建立一个坐标系并教会它识别,明确告知演员站位与镜头调度,生成才不会出错。」

同是上影节AI片场创作者的李鑫欣也道出了AI在空间调度能力上的局限:在室内戏创作时,仅仅是几个角色的日常对话,她就遇到过人物无视空间障碍物进行走位、直接穿过桌角的穿帮问题。

所以,如何让AI在一个虚拟空间内理解真实的三维感?如何在一个虚拟空间内处理人物与环境之间的交互?成为目前创作者普遍面临的核心难题。

创作过全网爆款AI作品《牌子》的@DIDI_OK,其7月10日新上线的AI短片《垃圾站》中面临的最大问题就来自空间。他告诉《叁拾代》:「目前的AI是完全没有场景识别能力的,无法理解构图和角色站位」。

「垃圾站这个物体不存在,AI不知道它长什么样,所以每一次生成都会长得不一样」。@DIDI_OK表示付出了很大努力,才最终形成了一个相对有空间感的作品,能让观众大概理解方位。

目前尚在河北传媒学院读影视研究生的王意辉也是一名AI创作者。他用分镜举例空间关系方面遇到的难题:「在一些景别、镜头切换时,比如四个人坐在一起,如果中间穿插一个特写镜头,就容易发生四人空间关系错乱」。


目前,大众维度出现了不少吐槽「难以驯服AI」的玩梗视频,抖音、小红书等短视频平台上有一批创作者在探讨空间调度难题的内容,以「规驯AI」。

首先,为让AI能够理解并且建构出一个3D空间/物体,需在前期生成该空间/物体在各个视角的细节图,再喂给AI,让AI将其拼凑起来。

其次,人物走位、人与环境交互这类动态的空间关系处理,最基础的方式是,为每个分镜头撰写大量精细的提示词,甚至是设计起始帧参考图,以严格控制该片段内的镜头运动和人物走向。

目前较精细的AI短片创作其实已经达到了这个精度,如@Mx-Shell 《丧尸清道夫》的分镜提示词,在每一次视频生成中都精确到5s左右。


此外,可通过示意图辅助AI理解。如做AI创作经验分享的小红书博主@彬彬AI实战圈,近期就分享过借助「俯视图场景调度图」让AI进行空间理解的方式。俯视角度下,三维空间化为了二维平面,其中再添加上人物站位和运动方向引导线,就能让AI理解场景中的人物站位,以及保持镜头切换中的关系稳定性。


Agent也给出了工具端的解决方式。最近两个月,许多AI视频Agent都上线了3D导演工作台功能。比如爱奇艺旗下AI平台「纳逗Pro」的3D导演台,可解决人物站位错乱,精确控制镜头角度,一键生成位置参考图等难题。


更宏观角度,当前AI技术前沿的「世界模型」所探索的,正是致力于为AI构建一个内部的数字物理引擎,使其能够理解并推演真实世界的运行规律。

可以说,只有实现调度精度,让镜头语言从单调的正反打特写走向复杂交互,才能够让AI作品拥有媲美实拍的视觉张力和情绪表达。这是AI创作实现工业化生产的必经之路。

可能未来一段时间,AI创作都离不开解决空间关系以及场景调度的问题,甚至会作为一个长久性难题和区分创作者能力高下的门槛。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
驾校完全凉凉!高考后无人学车,不是孩子懒,是00后太清醒

驾校完全凉凉!高考后无人学车,不是孩子懒,是00后太清醒

风信子的花
2026-08-20 16:33:33
蒋介石最大的决策失误 错杀瞿秋白,让国民党失去了最后的人心

蒋介石最大的决策失误 错杀瞿秋白,让国民党失去了最后的人心

墨策讲历史
2026-08-21 21:40:24
上海老年综合津贴:各年龄段待遇不同,建议存起来对照

上海老年综合津贴:各年龄段待遇不同,建议存起来对照

匹夫来搞笑
2026-08-22 11:46:28
许家印结局已定,恒大歌舞团长白珊珊,被曝低调嫁给了这个男人

许家印结局已定,恒大歌舞团长白珊珊,被曝低调嫁给了这个男人

往史过眼云烟
2026-08-22 14:21:35
当前高校教授的主要问题是脱离群众、脱离实际

当前高校教授的主要问题是脱离群众、脱离实际

必记本
2026-08-22 00:21:52
河北一小旅馆取名“金季”,遭全季酒店起诉索赔10万,老板娘哭诉:整夜整夜睡不着觉,砸锅卖铁也拿不出这么多钱

河北一小旅馆取名“金季”,遭全季酒店起诉索赔10万,老板娘哭诉:整夜整夜睡不着觉,砸锅卖铁也拿不出这么多钱

台州交通广播
2026-08-20 21:26:39
中国造了一艘养鱼船,结果造的太好了,1艘船产量超过2个查干湖

中国造了一艘养鱼船,结果造的太好了,1艘船产量超过2个查干湖

蜉蝣说
2026-08-20 15:40:11
23岁女孩严重脊柱侧弯,相恋5年男友每天跑14小时外卖凑手术费,走红后被骂“躺着赚钱”,当事人:自己常一天工作十几个小时

23岁女孩严重脊柱侧弯,相恋5年男友每天跑14小时外卖凑手术费,走红后被骂“躺着赚钱”,当事人:自己常一天工作十几个小时

海峡网
2026-08-21 20:15:10
达利欧:美国债务危机最快三年内到来,建议卖出债券、买入黄金和比特币

达利欧:美国债务危机最快三年内到来,建议卖出债券、买入黄金和比特币

华尔街见闻官方
2026-08-22 09:45:34
陈水扁女儿婚变风波,赵建铭返台秀离婚协议 ,陈幸妤恐遭天价求偿

陈水扁女儿婚变风波,赵建铭返台秀离婚协议 ,陈幸妤恐遭天价求偿

海峡导报社
2026-08-21 08:22:02
72小时三连炸!比亚迪甩出四张王牌,车市正式进入规格过剩时代

72小时三连炸!比亚迪甩出四张王牌,车市正式进入规格过剩时代

生活魔术专家
2026-08-22 09:27:28
与庄则栋离婚,净身出户后,她至今未嫁,如今儿子早已成她的骄傲

与庄则栋离婚,净身出户后,她至今未嫁,如今儿子早已成她的骄傲

凡知
2026-07-26 16:19:45
王证26分杨文学19分!山东硬刚考辛斯,仅3分惜败,邱彪捡到宝了

王证26分杨文学19分!山东硬刚考辛斯,仅3分惜败,邱彪捡到宝了

萌兰聊个球
2026-08-22 10:52:57
曝3申花球迷起初只被批评教育!“上面”要求行拘 媒体人:都怪武磊

曝3申花球迷起初只被批评教育!“上面”要求行拘 媒体人:都怪武磊

念洲
2026-08-22 09:35:52
国外兴起全裸度假村?男女同场不穿衣服狂欢,每年能吸引大量游客

国外兴起全裸度假村?男女同场不穿衣服狂欢,每年能吸引大量游客

临云史策
2026-07-10 23:17:05
万项这辈子最对的一步棋,是早点离开董路

万项这辈子最对的一步棋,是早点离开董路

中场阴谋家
2026-08-21 22:13:14
什么时候你才意识到你追求的一切不过如此?网友:人死如灯灭!

什么时候你才意识到你追求的一切不过如此?网友:人死如灯灭!

夜深爱杂谈
2026-08-20 20:09:57
默兹攻击移民,引发轩然大波,却拒绝道歉:“去问问你的女儿们”

默兹攻击移民,引发轩然大波,却拒绝道歉:“去问问你的女儿们”

清衣渡a
2026-08-22 02:41:25
日本访华团懵了,临行前收到中方不接待通知,理由没有一点毛病

日本访华团懵了,临行前收到中方不接待通知,理由没有一点毛病

霁寒飘雪
2026-08-22 12:13:36
高考704分,我爸决定每月只给704,全家赞同,6年后我月薪8万,他住院:爸供你读书,你该管!我笑问:爸,您今年多少岁?

高考704分,我爸决定每月只给704,全家赞同,6年后我月薪8万,他住院:爸供你读书,你该管!我笑问:爸,您今年多少岁?

世间烟火集
2026-08-22 14:18:27
2026-08-22 15:39:00
钛媒体APP incentive-icons
钛媒体APP
独立财经科技媒体
138428文章数 862531关注度
往期回顾 全部

科技要闻

苹果裁员200人:Vision Pro砍游戏团队

头条要闻

山东男子自驾3500公里送儿子去新疆上大学 边赶路边玩

头条要闻

山东男子自驾3500公里送儿子去新疆上大学 边赶路边玩

体育要闻

枪手赚翻!4000万新援揭幕战8分钟策动2球

娱乐要闻

赵丽颖冯绍峰,打了内娱离婚夫妻的脸

财经要闻

蔡昉解读经济:扩大消费需求的政策思考

汽车要闻

全栈自研控本不降质 22.68万解锁魏牌旗舰实力

态度原创

手机
数码
家居
房产
公开课

手机要闻

首批骁龙8E6 Pro旗舰!iQOO 16、小平板将于9月发布

数码要闻

小米最高画质:小米首款RGB-Mini LED电视开启盲订

家居要闻

2026建博会(广州) 公装联探展交流活动

房产要闻

两大热盘即将入市!三亚又一批安居房狠货要炸场了!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版