网易首页 > 网易号 > 正文 申请入驻

续集来了!AI全流程动画《剪刀石头布2》

0
分享至

续集来了! AI全流程动画《剪刀石头布2》

续集的出现,不仅能看到主创团队的技术迭代,剧情更加深入,还引发了更多网友催更第三集...

我们来看看第二集正片

在国内发布后

迅速登上了B站热门

网友们也展开了激烈的探讨

幕后制作过程

更是能看到主创们玩了更多新花样!

说到剧情,这部《石头剪刀布》是要走出动画剧集的路线了,可能很多小伙伴们看的过程已经忘了第一集,我们来回顾一下:

作品一经发出,便瞬间引起了广泛关注,截至目前为止,油管、推特已合计超过800万关注度,国内亦是如此。

有人认为这将引起动画界的大革新

我们来了解一下制作幕后!

你可能会惊掉下巴!

有人提到了所谓的“动画师焦虑”(或许有人就是抱着看热闹不嫌事大的心态,想知道AI时代下,动画从业人员会不会不知所措、会不会紧张)。

作为一个动画师......这让我感到害怕。我一生都在画画,知道如何在画中重现运动,只是,在几年后,这会被取代。

我感觉到动画行业巨大的不安,就像数百万个声音突然惊恐地哭了出来,并突然沉默了。我担心可怕的事情发生。

下次你们邀请动画师做客时,应该把这个给他们看,并留意他们的反应。

有人认为这更凸显了技术之外的作品核心

也有导演这样说——

网飞动画系列《恶魔城》(Castlevania)的导演Samuel Deats在推特上表达了一连串对“猜拳动画”的看法,他并没有感到焦虑,而是说:

你们不想学习如何成为一位真正的动画师,好,我明白了,但伙计们,你们有很多其它的方式来创作出作品。”

言下之意,Samuel Deats并不认可这种把真人的动作完整拍下来,然后用AI转化之后就称之为“动画”的做法。

同时,他不觉得“猜拳动画”的做法有多“创新”。

那如今AI到底被阻止还是被接受?

一组数据判断真相

一家素材网站——对AI生成作品持正面态度的Shutterstock,向3000名受访者进行了一次调查,是关于生成式AI的使用情况及对其的看法。

结果显示,超过半数受访者表示有意愿学习AI,有高达8成以上的受访者清楚生成式AI是怎样一回事,45%的专业使用者已经或正在使用AI,35%的一般使用者已经或正在使用AI

Netflix Japan前段时间就用AI来作出了一次尝试。它与AI技术开发商Rinna、曾制作过《进击的巨人》系列的WIT STUDIO合作,推出了一部名叫《犬与少年》的动画短片。该短片的背景是通过AI生成的。

Runway开发的AI影片生成技术Gen-2,使动画制作变得更加简便。用户可以上传文本、图像和视频,生成风格化动画短片,其运作的方式是复制真人动作并将其转化为动画,现在都可以直接图片直接变成动画,前段时间就有粉丝自制《流浪地球3》,让郭帆导演深夜急求联系方式。

文章开头所述的,制作了《石头剪刀布》的团队是Corridor Digital,还记得之前有一段在网上走红的、将众多不同时空的蜘蛛侠聚到一起“手指指”的同人视频吗?对,那也是Corridor Digital愉快玩耍后的成果。

至于这一版的“蜘蛛侠全宇宙”的幕后情况,是这样的,Corridor Digital的成员Dean想要快点看到《蜘蛛侠:平行宇宙》的续集,等不及的他决定通过一些技术来自己做“续集”:

稍微更具体地来说,他找上其他成员,通过后期特效复制了《蜘蛛侠:平行宇宙》的动画风格,再通过Stable Diffusion将《蜘蛛侠》真人电影系列的一些片段,以及Dean换上蜘蛛侠服装后拍出来的东西,转换为动画风。接着,他们尝试找全所有版本的蜘蛛侠,去扩充蜘蛛侠多重宇宙。

有网民对此感到惊喜:

《蜘蛛侠:平行宇宙》是那种你可以看出是用爱而不只是用钱制作的电影。Corridor Crew制作的所有内容也都是出自爱,这真的很有意义。你们把和朋友一起玩耍的爱好变成了职业,并投入了心血!太棒了!

看到Dean主导的这一集真的很有趣。我肯定希望看到更多探索其他创意风格的视频。

有趣的是他说他们什么也没做。短片中每一帧都包含了大量的内容!他们本可以只发布一些由AI生成的场景,而我们仍会观看,但是Corridor Crew总是超出我们的期望,为我们提供高质量的内容,而且完全免费。你们的努力应该获得回报。

AI生成图像+虚幻引擎

暗黑奇幻风动画是这样诞生的

人类有表达的欲望,要将脑中的想法,透过各式各样的方式体现出来,并让其他人感知得到。Corridor Digital的成员Nico——一个留着浓密胡子、满头金发的男人,他也主张创作应该是低门槛的,所以他们整个团队想试验出新的方法,让人们即使在没有很多预算、也没有成熟技艺的前提下,也能制作出属于自己的动画。

Nico认为,这样才会真正实现“创作自由”

那要如何开始着手制作呢?

首先Nico用到了机器学习当中的扩散模型(diffusion model),它可以将模糊的、充满杂讯(噪点)的图像生成为清晰的、精细的图像。

视频是由一帧一帧的图像组成的,要完成一段动画,Nico和他的伙伴们选择将实拍照片噪点化,这样处理的目的,是要让扩散模型完成去噪,然后生成风格化的图像,再补充一些原本没有的细节。这个过程,在Nico看来,就有点像是人们偶尔抬头凝视云朵时,会根据云朵的形状,脑补出具象化的东西,比如一只白色的神兽

单张图片如此处理是没有问题的,可视频的话,图像与图像之间会发生闪烁。

解决画面闪烁问题的关键,Nico从更早之前的一段发布于YouTube的“塞尔达版”《侏罗纪公园》同人动画短片中获取灵感。在这段实验性的视频里面,画面确实不会出现明显的闪烁,可帧与帧之间的连接并不顺畅,时常有奇怪的扭曲,细节也不一致。

Nico觉得问题可能出在图像的随机噪点(random noise)上,所以他一顿操作后,噪点就不再是随机改变每一帧了,如果两帧图像的内容几乎相同,它们的噪点化方式也会一样。

画面稳定的问题得到进一步的解决之后,接下来是风格化。这就有一点像是动画制作流程当中的角色设计——给实拍照片中的人物换上合适的“动画皮囊”。

为了实现Nico心中最想要的“动画皮囊”,他决定与团队成员一起,训练出一个能生成特定动画风格的扩散模型

已经有技术达人开发出相应的扩散模型,

以将图像转变成特定风格。

要让画面做到不闪烁,身为视觉特效从业者的他们,还找到了一件重要的武器——在DaVinci Resolve中应用了D Flicker插件(DaVinci Resolve是一款可以将编辑、色彩校正、视觉效果、运动图形和音频后期制作结合在一起的软件)。通过这个插件,可以消除闪烁的光线。

角色一致性的问题终于得到解决,Nico身边的小伙伴们都嗨翻了。

下一关,是故事设定以及拍摄原始图像,喜欢玩新意的Nico想要来一场特别的“石头剪刀布”游戏,这场游戏的参与者,是两位双胞胎的王子,他们必须等到国王驾崩,才可以去争夺王位——谁猜拳赢了,他就是下一任的王。

两位王子分别由Nico和Dean扮演,他们拿着写好的剧本,到录音室配音,期间,两人发出了夸张的大叫声。接着,Nico和Dean购入了“戏服”,一边在绿幕前做嘴型(像木偶那样),一边用尽毕生所学,摆出各种动画漫画中常见的耍酷姿势。

上文所提到的通过训练模型,将原始图像转换成特定风格图像的过程,具体要如何实行?在绿幕拍摄时,除了制作动画所需的照片,Nico他们还拍下不少脸部照、全身照、背面照等等。

至于要让模型学习怎样的动画风格,Nico所选取的作品是《吸血鬼猎人D:妖杀行》(Vampire Hunter D: Bloodlust),他们捕捉不同角色的不同画面,包括一些面部画面、躯干画面、全身画面、手、头发,以及花朵等物体。

等到AI掌握了这些图像都是以哪种风格绘制的之后,新的问题浮现——《吸血鬼猎人D:妖杀行》里没有满脸胡须的角色,而Nico有。

《吸血鬼猎人D:妖杀行》

因此,Nico另外再生成了一些以他的长相为基础的图像,并补充回数据库中,再次训练模型。

是时候可以告诉AI把实拍照片变成动画风格了,Dean利用Stable Diffusion,根据提示词进行图生图(img2img)的步骤,生成“动画皮囊”,接着再修改微调。

消除闪烁的插件在这个时间点派上用场,然后就是抠绿幕,移除背景,将帧率从每秒24帧降低到每秒12帧,看起来更像动画,进一步减少闪烁感觉。角色的部分算是完成了,场景以及美术背景的部分呢?

Sam搭建了哥特式教堂的场景并通过虚幻引擎进行渲染,他还在场景中架设了多部不同角度的摄影机,之后,他截取了各种视角的教堂平面图,以用作动画的背景。这些背景图也要过一遍Stable Diffusion,Sam让AI生成出90年代日本动画的美术背景风格

角色层做好了,背景层也做好了,接下来进入到合成与后期摄影的环节,这部分也是由Dean负责。当镜头像是围绕着角色旋转时,Dean先是给背景添加动态模糊等效果,然后为了凸显角色的气势,所以在角色做动作时添加速度线,而在前景的部分,他把原本3D的烛台做成2D动画的样子,并加入到里面。

最后,Dean添加上胶片摄影机滤镜,因为以前的日本手绘动画就是用它来拍摄的。他试图透过一系列的操作,使得成品更像《吸血鬼猎人D》这样的经典动画。

所有的制作工序都结束后,团队成员聚在一起高兴地享受着他们花费两个月时间打造的动画。

完整版制作幕后

它真的“永久改变”动画制作流程?

《剪刀石头布》真的永远地改变了动画?

回应这个问题之前,我们先去看看这部动画短片本身的质量。首先从一些观众的评价来说,用猜拳来争夺王位这个创意是具有亮点的;然后镜头的设计确实体现了Nico他们的想法,至于燃的部分,后期特效的作用明显。

但不足的地方也是有的。例如,虽然经过了修改和微调,角色画面不稳定的情况偶有发生;又例如,Dean扮演的白衣王子败给了Nico扮演的黑衣王子后,他卧薪尝胆的片段中,角色的形象出现不同的版本,这在设计的角度上,无疑是失误。

在第二集中,群众们的画风也是突变。

而且,从Nico对制作流程的讲述中,我们可以知道的一点,是他们不想将动画弄得太复杂,所以用了简化的、取巧的办法,先不论动机,从结果而言,猜拳这个点子确实代替了肉搏的打戏(更别说为了体现打戏的精彩程度与破坏力,所专门绘制的特效动画以及背景动画)。

Corridor Digital模仿的是日本经典的二维动画,与其说他们“永久改变”动画制作流程,倒不如说“猜拳动画”仍是在之前的那种动画制作流程框架下。一般而言,在前期阶段,一部动画需要先立项,然后进入到角色设计、故事设定、剧本创作、分镜绘制环节。

来到中期阶段,主要是画面设计(Layout)、原画、动画、背景作画等环节,后期则是摄影(合成)、画面编辑、录音、音响制作、视频编辑等。

Nico等人所作出的尝试中,最为核心的,其实是他们将分镜绘制到中期作画的步骤,先后通过绿幕前的实拍、Stable Diffusion以及虚幻引擎来代替,他们这样做的目的一如Nico最初所主张的——降低技术门槛,达到“创作自由”。

改变的意思是指让人事物产生显著的差别,那另一个问题就来了,“永久改变动画制作流程”中的动画,是指二维动画?三维动画?定格动画?还是其他不同形式的动画?

Stable Diffusion等AI工具现时能够为强调传统手艺、强调媒材物质属性(如《天竺鼠车车》中那种毛绒绒的质感)、尝试非常规方式(如在石板上绘制)的动画带来改变吗?

动画安妮奖的选择

最近,被成为“动画界奥斯卡”的第50届安妮奖公布各个项目的得奖结果,从获奖数量上,名导吉尔莫.德尔.托罗的定格动画新作《吉尔莫.德尔.托罗的匹诺曹》成为最大赢家,获得最佳动画长片、最佳导演、最佳角色动画、最佳美术设计、最佳音乐

此外,另一部将定格动画与真人实拍相结合的电影《穿鞋子的贝壳马塞尔》获得最佳独立动画长片、最佳编剧、最佳配音

媒体接连以AI作为话题进行报道的同时,安妮奖却作出这样的选择。我觉得,一方面从作品本身来说,陀螺版《木偶奇遇记》和A24出品的《穿鞋子的贝壳马塞尔》,都做到了在取悦观众的同时,分别不同程度地展现了定格动画的实验性。

《吉尔莫.德尔.托罗的匹诺曹》

《穿鞋子的贝壳马塞尔》

另一方面,在一众三维动画面前,安妮奖或许想要再次提醒动画观众,动画的世界原本是丰富多彩的,不同的创作者,对动画、甚至对艺术,是有不同的态度和观点的,而正因为创作者之间的不同,才产生了不同方向的作品,竞相争奇斗艳

托罗导演日前在接受媒体Decider采访时表示:“我认为艺术是灵魂的表达,在最好的情况下,它包容了你的一切。因此,我消费和热爱人类创作的艺术,并且被那些艺术完全打动。我对机器制作的插图不感兴趣,也对从信息中推导出来的东西不感兴趣。”

吉尔莫.德尔.托罗

所谓的“创作自由”,除了使用某些免费工具、透过某些开源项目来便捷地产出作品的自由以外,还有真心相信某种信念,不受某些流行趋势干扰,并专注于自己创作的自由。

你为什么想要看动画?

回到观众的立场,AI动画的出现与发展,可能会让我们回想起想要看动画的初衷。

有人或许是因为动画世界中轻松愉悦、简单舒心的那一面,而选择看动画;有人或许是因为美型的、耍酷的、可爱的角色造型,以及令人过目难忘的动作设计,而喜欢看动画;有人或许是因为动画的知名度或者热度而去看的;有人或许只是为了看故事,至于是不是动画,并不重要......

把真人的表情以及动作几乎原原本本地通过AI转换成某种风格、带有模仿痕迹及复古感的动画,真的是你最想要的吗?

如果这不是你最想要的,你认为AI以后要如何融入动画制作流程,才会更满足你呢?

有制作团队将原创的角色设计图投喂给AI技术LoRA,再根据提示词生成需要的图像,以解决繁杂的工作,这会是你更想看到的尝试吗?

最后扯远一些,将来有人试图用AI来重塑人们的世界观,我们会怎么面对呢?大家可以来评论区一起聊一聊!

技术协助:ChatGPT、Glarity-Summary

参考资料:

1、Corridordigital.com

2、Corridor,ANIME ROCK, PAPER, SCISSORS

3、Corridor Crew,Did We Just Change Animation Forever?

4、Corridor Crew,We Put TOM HOLLAND into the SPIDERVERSE

5、映CG,动画制作新革命!国外团队推出AI视频生成技术Gen-1,可将真人影像转化成各种风格的动画

6、映CG,超过半数人想学AI?实际调查3000名受访者,AI现今及未来使用趋势带你一次看

7、映CG,日本Netflix推出AI绘制背景的动画短片《狗与男孩》,在推特上引发争议

8、映CG,奥斯卡大热门《吉勒摩·戴托罗之匹诺曹》导演聊 AI:「永远热爱人类创造的艺术!使用 AI 创作电影简直是对生命的一种耻辱!」

9、映CG,「AI并没有取代艺术家,反而让团队更专注设计与故事上」专访木下曰本,畅聊如何将AI技术LoRA导入动画制程

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
2位“童星”:一个“发育过猛”,一个“人间尤物”,谁是你的菜

2位“童星”:一个“发育过猛”,一个“人间尤物”,谁是你的菜

虾剪说剧
2024-06-13 05:10:02
电子行驶证将在60个城市先行试点,年底前全国推广

电子行驶证将在60个城市先行试点,年底前全国推广

鲁中晨报
2024-06-13 12:11:02
果然还是道教符合我的精神状态!网友:以后谁再毁我道心 我跟谁急

果然还是道教符合我的精神状态!网友:以后谁再毁我道心 我跟谁急

开玩笑的水母
2024-06-13 16:21:17
看完这个你就知道,为什么魔兽世界很难有新玩家了

看完这个你就知道,为什么魔兽世界很难有新玩家了

苹果牛看游戏
2024-06-13 13:28:16
我花2万找小姐要求处女,在酒店以为遇到仙人跳,最后动了真心

我花2万找小姐要求处女,在酒店以为遇到仙人跳,最后动了真心

叶天辰故事会
2024-06-07 18:02:04
求求导演来趟凡间吧,年代剧尽是月薪一千戴38万耳环的“穷人”了

求求导演来趟凡间吧,年代剧尽是月薪一千戴38万耳环的“穷人”了

糊咖娱乐
2024-06-13 18:53:01
定了❗皇马与姆巴佩达一致7月16日亮相伯纳乌,预计打破C罗纪录

定了❗皇马与姆巴佩达一致7月16日亮相伯纳乌,预计打破C罗纪录

直播吧
2024-06-12 20:06:15
事态升级!黄一鸣已找律师,高调放话法庭见,王思聪新动静曝光!

事态升级!黄一鸣已找律师,高调放话法庭见,王思聪新动静曝光!

古希腊掌管月桂的神
2024-06-13 19:54:17
倒计时3天!七成菲律宾人支持动武,马科斯下令军队准备战斗

倒计时3天!七成菲律宾人支持动武,马科斯下令军队准备战斗

文雅笔墨
2024-06-13 17:33:57
国台办回应黄仁勋称台湾是“国家”

国台办回应黄仁勋称台湾是“国家”

界面新闻
2024-06-12 11:23:15
权力交接在即!冯德莱恩或让位德拉吉,中欧关系迎来新篇章

权力交接在即!冯德莱恩或让位德拉吉,中欧关系迎来新篇章

陆弃
2024-06-13 12:57:05
上海会重启“蓝印户口”吗?

上海会重启“蓝印户口”吗?

同策研究院
2024-06-13 17:32:56
曝黄一鸣生活拮据,给王思聪女儿买20元衣服,王思聪拒绝付抚养费

曝黄一鸣生活拮据,给王思聪女儿买20元衣服,王思聪拒绝付抚养费

180°视角
2024-06-13 09:25:20
不是,到底是谁在花几十块买一张苹果手机截图啊?

不是,到底是谁在花几十块买一张苹果手机截图啊?

差评
2024-06-12 11:29:52
“美元禁区”已被突破!美国懵了,制裁落空,原来没看懂中国布局

“美元禁区”已被突破!美国懵了,制裁落空,原来没看懂中国布局

财说得明白
2024-06-13 11:58:19
被国产车猛追,特斯拉5月中国销量超5.5万辆:同比增长30%,环比增长77%!Model Y销量4万,Model 3销量1.5万辆

被国产车猛追,特斯拉5月中国销量超5.5万辆:同比增长30%,环比增长77%!Model Y销量4万,Model 3销量1.5万辆

和讯网
2024-06-12 14:51:48
终于!上海这个地铁站宣布大改造!很多人无语崩溃过:坐4次迷路3次...

终于!上海这个地铁站宣布大改造!很多人无语崩溃过:坐4次迷路3次...

鲁中晨报
2024-06-13 08:07:14
温州六中46名学生出游溺亡,头七集体回教室上课,到底是咋回事?

温州六中46名学生出游溺亡,头七集体回教室上课,到底是咋回事?

阿胡
2024-06-06 12:38:23
实锤!美军方确认俄罗斯预警机被“爱国者”击落!

实锤!美军方确认俄罗斯预警机被“爱国者”击落!

凡事一定有办法13119
2024-06-11 08:45:42
“打败皮鞋的,并不是另一双皮鞋”,皮鞋,被时代抛弃

“打败皮鞋的,并不是另一双皮鞋”,皮鞋,被时代抛弃

毒sir财经
2024-06-11 17:10:25
2024-06-14 00:08:49
CG模型网
CG模型网
CG模型网-让设计更有价值!
804文章数 634关注度
往期回顾 全部

头条要闻

韩国女子20年前遭"集体性侵" 44名嫌犯无一人受到刑罚

头条要闻

韩国女子20年前遭"集体性侵" 44名嫌犯无一人受到刑罚

体育要闻

乔丹最想单挑的男人走了

娱乐要闻

森林北报案,称和汪峰的感情遭受压力

财经要闻

私募大佬孙强:中国为什么缺少耐心资本

科技要闻

小红书员工仅1/5工龄满2年 32岁就不让进了

汽车要闻

升级8155芯片 新款卡罗拉锐放售12.98-18.48万

态度原创

房产
游戏
健康
旅游
军事航空

房产要闻

再度告急!海口连续仨月住宅入市不足千套!竟有楼盘卖爆!

主播请路过老人玩《无畏契约》:击杀就送鸡蛋等

晚餐不吃or吃七分饱,哪种更减肥?

旅游要闻

山西文旅厅厅长与董宇辉拉家常:中午回家吃了饭

军事要闻

美军演习将罕见以4万吨级准航母作为靶舰

无障碍浏览 进入关怀版