网易首页 > 网易号 > 正文 申请入驻

【非遗文化AIGC制作】国风奇幻视觉体系建立、角色LoRA训练与虚实融合

0
分享至

这是我们为苏州御窑金砖博物馆打造的AI非遗剧情类光影夜市,线下博物馆投影和线上社媒双场景同时服务的AIGC内容的技术复盘。

交付内容:3条成片——御窑金砖传说(1分15秒)、个人传记(1分钟)、人物抽卡篇(1分钟)

主要播放场景:博物馆内投影(超宽屏)+ 各大社媒发布

执行方式:全AIGC制作

这个项目的技术命题有两个特殊性:

第一,双场景适配。博物馆投影要求超宽屏画幅,社媒发布要求竖屏或标准横屏——同一套内容需要在两种完全不同的显示规格下都有效,这对画面构图和内容信息的排布提出了很高的要求。

第二,三条内容共享角色体系但视觉风格各异。传说故事片是奇幻悬疑风格,人物传记是古典水墨叙事风格,抽卡篇是游戏化国风卡面风格——三套视觉语言完全不同,但六个角色形象需要在三条内容里保持一致。

技术难点一:东方诡秘画风的风格体系建立

这个项目选择了「东方诡秘」作为整体视觉基调——介于古典国风和奇幻悬疑之间,有历史质感,有神秘氛围,同时要有当代审美的精致度——这套风格不是一个现成的AI生成风格标签,需要从零开始建立。

前期用Midjourney批量生成大量概念图,通过对色彩区间、光影处理、线条密度、场景构图的系统性筛选,建立整套视觉参考帧库。重点控制参数是:青蓝色主调与火焰暖色的冷暖对比、宣纸质感与水墨晕染效果、发光卡面与粒子特效。三套色调各自独立,但都在「东方诡秘」的整体气质框架内。





技术难点二:自研角色LoRA训练与跨内容形象稳定

六个历史人物角色需要在三条风格完全不同的内容里保持形象一致——从奇幻场景到水墨风格到游戏卡面,人物的面部特征、服饰结构、气质调性不能发生漂移。

针对每个角色自研专属LoRA模型,训练数据覆盖不同光线、角度、风格下的人物参考帧,确保LoRA对角色特征的理解足够全面,而不是只在某一种光线条件下稳定。

这里有一个技术判断值得记录:非遗题材的角色训练,对历史考证的准确性有额外要求。沈绫的服饰需要符合南宋织造的历史风格,吴憶慈的火工装束需要对应真实的御窑匠人形象等等这些历史细节的准确性,决定了内容能否获得文旅文博类客户的信任——角色LoRA训练前,需要对历史服饰和人物形象做前置研究。





技术难点三:超宽屏画面制作与沉浸感建立

博物馆投影场景对画面宽高比有特殊要求,标准的16:9画幅无法覆盖长廊和砖窑的实际投影面积。

使用同义万相制作超宽屏画面,针对博物馆的实际投影尺寸定制画幅比例,确保内容在物理空间里投影时具有足够的视觉覆盖面和沉浸感。超宽屏制作的核心挑战是:画面信息在横向延展时,叙事重心和视觉焦点的分布需要重新规划——不能简单地把标准画幅拉宽,而是要为超宽屏专门设计构图逻辑。



技术难点四:虚实融合——真实博物馆空间与AI场景的无缝接入

这个项目有一个独特的技术需求:内容需要和博物馆的真实物理空间产生关联,而不是完全脱离现实的纯AI奇幻场景。

将博物馆的实景素材——砖窑结构、长廊细节、遗址质感——上传作为参考,使用ComfyUI搭配LoRA对场景进行重绘,在保留真实空间结构的基础上叠加奇幻视觉元素,构建虚实融合的玄幻空间。

这套虚实融合的处理方式,让观众在博物馆内看到的投影内容,和他们所处的物理空间之间产生了视觉上的连接——投影里的砖窑和眼前真实的砖窑在同一个空间里共存,沉浸感在这个层面被大幅强化。



技术难点五:可灵精细调控人物动态

三条内容里的人物动态要求各不相同——传说故事片需要戏剧性强的动作和表情,沈绫传需要细腻克制的情绪表达,抽卡篇需要有游戏感的出场动效。

使用可灵对人物的动作、表情、运镜进行精细调控,重点处理两个层面:一是角色在不同情绪状态下的动态细节(沈绫临终托付遗言的手势、守窑人持灯的步态、采花娘等待的眼神);二是不同风格下镜头语言的差异(传说故事片的宏大运镜对应沈绫传的贴近人物的叙事镜头)。

人工逐帧审核是这个环节投入最多的部分——历史题材对人物动态的「气质准确性」有很高要求,不只是动作连贯,而是动作背后的人物性格和历史身份要能被感受到。



完整工作流

历史研究 + 世界观设定 + 叙事结构设计

Midjourney 东方诡秘画风体系建立

(批量生成概念图 + 视觉参考帧库建立)

自研角色LoRA训练

(六个历史人物 + 历史服饰考证 + 跨风格形象稳定)

同义万相 超宽屏画面制作

(博物馆投影尺寸定制 + 构图逻辑重规划)

ComfyUI + LoRA 虚实融合场景重绘

(真实博物馆实景素材 + AI奇幻元素叠加)

可灵 人物动态精细调控

(动作表情调控 + 镜头语言差异化处理)

人工逐帧审核

(历史准确性校验 + 气质一致性确认)

后期调色 + 音效 + 超宽屏与社媒版本适配

博物馆投影版 + 社媒发布版 双版本交付

三个值得记录的经验

非遗题材的角色LoRA训练,历史考证是前置工作,不是后期校正。服饰错误、道具偏差、朝代特征混淆——这些问题在生成后修复的成本远高于生成前的研究投入。

历史题材的内容,调研和考证是技术执行的一部分,不是创意团队的「软工作」。

双场景适配不是两套内容,而是一套内容的两种呈现逻辑。超宽屏和社媒竖屏的构图重心完全不同,在生产阶段就要为两种场景分别规划视觉焦点和信息分布,不能在成片后简单裁切。

虚实融合的沉浸感,来自真实空间素材的精确引入,而不是AI的自由发挥。把博物馆的真实建筑细节作为生成的视觉锚点,才能让投影内容和物理空间产生真正的视觉连接。纯AI生成的奇幻场景,在现实空间里投影时会产生「悬浮感」,而不是沉浸感。

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
前湖人主帅:湖人去年就想甩掉詹姆斯,最后还是让他自己宣布离队

前湖人主帅:湖人去年就想甩掉詹姆斯,最后还是让他自己宣布离队

爱体育
2026-07-16 23:31:00
八村塁揭秘真实心声:离开湖人很开心,终于不用定点站桩!

八村塁揭秘真实心声:离开湖人很开心,终于不用定点站桩!

夜白侃球
2026-07-16 15:53:21
特朗普要是拿不下伊朗,中国之后会干什么,西方已经想都不敢想

特朗普要是拿不下伊朗,中国之后会干什么,西方已经想都不敢想

共工之锚
2026-07-17 00:26:45
印度自产盾构机,挖地1千多米深没出事,举国狂欢要抢中国饭碗

印度自产盾构机,挖地1千多米深没出事,举国狂欢要抢中国饭碗

经纬戎韬
2026-07-16 17:27:34
长津湖战报传来,斯大林脸色大变,瞬间起身,直接拿起话筒下了一道严令:四十个师的弹药,今晚务必全部装车,以最快路径送往志愿军阵地

长津湖战报传来,斯大林脸色大变,瞬间起身,直接拿起话筒下了一道严令:四十个师的弹药,今晚务必全部装车,以最快路径送往志愿军阵地

人生录
2026-07-17 02:39:26
7月17日收盘:美股收跌科技股领跌,芯片股再遭抛售

7月17日收盘:美股收跌科技股领跌,芯片股再遭抛售

新浪财经
2026-07-17 04:08:09
2-1逆转不足为奇,真正令人折服的是梅西赛后的清醒发言

2-1逆转不足为奇,真正令人折服的是梅西赛后的清醒发言

童叔不飙车
2026-07-17 00:09:18
票房从18.24亿跌到1.05亿,我感慨:这块金字招牌算是砸了

票房从18.24亿跌到1.05亿,我感慨:这块金字招牌算是砸了

白公子探剧
2026-07-14 15:05:13
2003年,傅作义之子痛骂亲姐傅冬菊几十年,病榻前吐露遗言:我对她刻骨仇恨无关党派,背后真相首次曝光

2003年,傅作义之子痛骂亲姐傅冬菊几十年,病榻前吐露遗言:我对她刻骨仇恨无关党派,背后真相首次曝光

磊子讲史
2026-07-15 15:06:17
realme品牌负责人徐起正式宣布:realme暂停中国市场业务,国内机型售后由OPPO全部承接,愿我们都能在各自的赛道上继续前行,敢越级

realme品牌负责人徐起正式宣布:realme暂停中国市场业务,国内机型售后由OPPO全部承接,愿我们都能在各自的赛道上继续前行,敢越级

极目新闻
2026-07-16 17:40:36
法国:向中国订购3万台空调!中国:劲使大了,3天半搞完2万台

法国:向中国订购3万台空调!中国:劲使大了,3天半搞完2万台

大眼妹妹
2026-07-16 13:09:00
辽宁队宣布重要决定,韩德君成一把手,郭艾伦有望回归

辽宁队宣布重要决定,韩德君成一把手,郭艾伦有望回归

宗介说体育
2026-07-16 14:52:03
民政部新规:未经批准不得开展含“人民”“功勋”等字样评比表彰

民政部新规:未经批准不得开展含“人民”“功勋”等字样评比表彰

新京报
2026-07-16 19:55:23
巴蒂斯图塔:世界杯应该只有32队参加,过度扩军有损赛事声望

巴蒂斯图塔:世界杯应该只有32队参加,过度扩军有损赛事声望

懂球帝
2026-07-16 02:34:02
曾被逼到绝路的大巴车,悄悄翻红!高铁正亲手把固有客流送给它

曾被逼到绝路的大巴车,悄悄翻红!高铁正亲手把固有客流送给它

史之铭
2026-07-16 01:15:08
凯文·凯利因何预言:未来5年,中国完全有可能造出全球最先进芯片

凯文·凯利因何预言:未来5年,中国完全有可能造出全球最先进芯片

电科技网
2026-07-15 19:55:43
毫无阻拦!美军无人艇直闯伊朗核心军港,精准炸沉潜艇

毫无阻拦!美军无人艇直闯伊朗核心军港,精准炸沉潜艇

老马拉车莫少装
2026-07-14 21:32:34
女人最难忘的男人,不是对她好的,而是给过这种感觉的!

女人最难忘的男人,不是对她好的,而是给过这种感觉的!

皓皓情感说
2026-06-06 08:04:02
特斯拉中国宣布这些产品全面降价!

特斯拉中国宣布这些产品全面降价!

XCiOS俱乐部
2026-07-16 14:58:16
史上最强阿根廷队,最强球王梅西!前无古人,冲击大赛四连冠!

史上最强阿根廷队,最强球王梅西!前无古人,冲击大赛四连冠!

海浪星体育
2026-07-16 06:04:31
2026-07-17 06:20:49
AIGC探索者
AIGC探索者
持续关注AIGC在商业营销中的各种应用场景
10文章数 0关注度
往期回顾 全部

艺术要闻

诡异清宫古画:窗后偷看的男人,看见了惊悚真相

头条要闻

扎波罗热核电站总工遭袭身亡 被指或改变俄乌冲突性质

头条要闻

扎波罗热核电站总工遭袭身亡 被指或改变俄乌冲突性质

体育要闻

逆天6后卫神阵,图赫尔活活坑死英格兰

娱乐要闻

天下无不散宴席!白鹿官宣告别欢娱

财经要闻

韩国股市暴涨暴跌 借钱炒股的散户快疯了

科技要闻

苹果AI终于要来了:还能追上华为豆包们吗

汽车要闻

小鹏MONA L03上市为什么选在慕尼黑?

态度原创

健康
亲子
数码
旅游
公开课

中风为何总在激动、用力时到来?

亲子要闻

长胎不长肉,孕期的各个阶段,体重多少最健康?

数码要闻

复古全键盘智能机!Unihertz Titan 2 Elite国行版入网 支持5G

旅游要闻

怒江边上宝藏地,四月傣寨泼水,腊月傈僳过新年,四季皆有看点!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版