网易首页 > 网易号 > 正文 申请入驻

AI在用|视频风格,一键七变,用Pika玩出新高度

0
分享至

机器之能报道

编辑:山茶花

以大模型、AIGC为代表的人工智能浪潮已经在悄然改变着我们生活及工作方式,但绝大部分人依然不知道该如何使用。 因此,我们推出了「AI在用」专栏,通过直观、有趣且简洁的人工智能使用案例,来具体介绍AI使用方法,并激发大家思考。 我们也欢迎读者投稿亲自实践的创新型用例。

Pika 又又又上新了!

近日,Pika 在 X 上宣布,新推出「风格生成」功能,并向所有人开放。


在其宣传视频中,用户可以在不改变画面的情况下随意切换相框中小狗的风格,黑白风、动漫风、自然风等均可一键实现。网友评价称「Pika 的风格生成功能将彻底改变游戏规则」。


X 网友同一句 Prompt 扩展出四种不同风格的兔子。



也有网友使用 Pika 的「风格生成」功能、udio 的音乐生成功能制作了一则动画短片。

视频地址:

https://x.com/ponzponz15/status/1784041053835936052

Pika 是一款 AI 视频生成应用,与 Runway 并称为 AI 文生视频「双子星」。 2023 年 11 月 29 日 Pika1.0 正式发布,历经多次更新,目前已经具备文本和图像生成视频、编辑更改视频、更改视频宽高比、延长画面 4 秒时长、生成音效、口型同步等功能。

4 月 27 日,Pika 又上线了「一键风格生成」功能。 目前,Pika 已更新 7 种风格,包括动漫、Moody、3D、水彩、自然、粘土动画、黑白等。 玩法也非常简单。

第一步: 准备工作。 登陆 Pika 官网(https://pika.art/home),点击「Try Pika」,使用谷歌邮箱或 Discord 账号登录。


第二步:变换风格并生成。在操作界面下方的输入框中输入 Prompt,然后点击「Style」,任意选择一种风格,Prompt 也将随之改变。如果想生成「有声」短片,用户则可以打开「Sound effects」按钮。


例如,笔者输入「A kitten on the grass」(草地上一只小猫),并选择「Claymation」(粘土动画)风格,随即 Prompt 自动添加了「Claymation, stop motion」。最后点击生成按钮,静待一分钟,即可生成一段 3 秒视频。

最终生成的效果如下:

如果用户还想尝试不同的风格,只需在生成的视频下方点击「Edit」,然后选择「Style」,从中挑选任一风格即可。


例如笔者想把生成的小猫视频变换成 3D 风格,最终生成的效果如下:


除了快速迭代产品,Pika 也很会「搞事情」。 两周前,Pika 联合知名 AI 语音克隆公司 ElevenLabs 发起了一场名为「FilmFAST 」AI 电影比赛,参赛者需要在 72 小时内使用 ElevenLabs 和 Pika 制作一部小短片,总冠军将获得 2000 美元大奖。

经过 10 天的评选,Pika 首届「AI 奥斯卡」大赛落下帷幕。 看完获奖作品,我们想起马斯克说过的一句话,「AI movies next year」。

1.总冠军:《Love Bytes》

这部短片由 @LeMoonSynth 和 @Ethereal_Gwirl 制作,画面充满赛博朋克感,总让人想起老式玩具。

该短片讲述了一个名叫 Mee 的机器人女孩,由于缺少一颗心,对自己的存在感到不满,由此展开了一段寻找「心」的旅程。 这个故事强调了自我接纳以及理解自己本心的重要性。

2. 最佳声音设计奖:《Celestial》

这部充满浓浓日本动漫风的作品由 @IshanNahata 制作。

作者表示,所有镜头、声音和画外音均由人工智能生成。配乐由叶夫亨・奥诺琴科(Yevhen Onoychenko)创作。

短片中的声音设计确实惊艳: 森林里的鸟叫声、原子弹爆炸的声音、火箭升空的声音,再加上低沉的女声旁白以及配乐,让人身临其境。

3. 最佳实验奖 :《Keep the change》

据短片作者 @next_on_now 介绍,这部短片使用了三种工具,Pika 处理图像生成视频动画以及唇形同步,ElevenLabs 制作音效以及配音,Suno 则被用来制作配乐。

4. 最佳视觉效果奖:《Control Freaks》

这部具有皮克斯动画风格的短片出自 @MeanOrangeCat 之手。快速流畅的剪辑、精美稳定的画面、动感的配乐赢得不少网友的好评。

5. 最佳叙事奖:《Curtain Call 》

这部超现实短片由 @MinistryOvTrvth 和 @machine_mythos 制作完成。

人头攒动的沙滩上,被刺伤的「尼古拉斯・凯奇」痛苦地呼救,但人们误以为他在拍电影,纷纷拍照围观,最终尼古拉斯・凯奇在绝望中死去。 在短片结尾中尼古拉斯・凯奇带着血迹的签名照被拍卖,讽刺感拉满。 正如作者所言,「The performance of a lifetime, or is it?」

别看这部短片只有三分钟,但故事情节完整,配乐也相得益彰,只是画面仍有瑕疵,尤其是 Pika 的口型同步功能还是会出 bug。

此外,Pika 还在 X 上放出了其他优秀的参赛作品。

《Endless Surprises》

这部动漫短片颇有《大鱼海棠》的感觉,相比于前两部作品,它的画面稳定性更好。

作者 @panaviscope 详细介绍了该短片的制作过程,「我用 ComfyUI 生成图像,并使用 Pika 对它们进行动画制作。 短片中的所有元素都是逐一动画化的,然后在 Blender 中重新编辑。

短片制作过程中,有时使用绿色背景进行动画制作效果好,但其他时候上下文背景可以提高 Pika 模型的性能。 例如,为了让鱼能正常游动,我使用了一个非常模糊和黑暗的街道背景,这很容易用 ComfyUI 的 “移除背景” 功能去除。

至于如何调整运动强度,我发现有时低设置就能达到所需的场景运动效果,但其他时候,高值更好。 我会捕捉我需要的几帧,然后减慢它们的速度,使用插值来确保流畅的结果。

对于声音,我采用了配音工作室的方法: 生成三四遍对话,将它们导入 Ableton(我还在其中作曲),并整合了效果最好部分。 Joanne 和 Keltham 是我的配音演员,我使用了较低的 “相似度” 值,以赋予模型一些创造性自由。

最终用 Adobe 的 After Effects 功能进行润色,用 topazlabs 提高分辨率。 」

《The FLUFFATROO》

不得不说,这毛茸茸的小团子差点把人萌化了,难怪有网友称: 这像是迪士尼制作的。 不过,作者 @TheReelRobot 委屈地表示,评委丹尼・博伊尔称这是「非常棒的 PPT」。


以后我们会通过新专栏带来更多 AIGC 案例演示,也欢迎大家留言评论并给出改进建议。


© THE END

转载请联系本公众号获得授权

投稿或寻求报道:content@jiqizhixin.com

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
2024-06-03 10:24:49
机器之能
机器之能
探索人工智能应用场景及商业化
1925文章数 4356关注度
往期回顾 全部

科技要闻

2万字演讲|黄仁勋剧透 未来3年新品有这些

头条要闻

牛弹琴:莫迪又大获全胜 他的手腕令对手叹为观止

头条要闻

牛弹琴:莫迪又大获全胜 他的手腕令对手叹为观止

体育要闻

万人空巷!皇马举行欧冠夺冠庆典

娱乐要闻

白玉兰提名:胡歌、范伟争视帝

财经要闻

黄仁勋的计划:涉及新AI平台 HBM4 机器人

汽车要闻

吉利银河E5 Flyme Auto智能座舱首发

态度原创

家居
艺术
数码
本地
教育

家居要闻

风雅自来 中式的和谐平衡

艺术要闻

穿越时空的艺术:《马可·波罗》AI沉浸影片探索人类文明

数码要闻

联想 2024 款 ThinkPad P14s 笔记本 6 月 8 日开售,7999 元起

本地新闻

食味印象|歙县限定!枇杷味儿的清甜初夏

教育要闻

聊点正经的吧~科研绘图(Fuel一营成环篇-4)

无障碍浏览 进入关怀版