网易首页 > 网易号 > 正文 申请入驻

我用可灵O1,做了一支疯狂动物城番外

0
分享至

智东西12月3日报道,近日,可灵AI视频上线了全新的O1模型,把参考生视频、文生视频、图生视频、视频编辑、动作迁移等能力收进了同一个统一多模态模型里。

我们尝试的第一件事,就是拿它来拍一支“疯狂动物城番外”。

整套流程从“在可灵里重建尼克和朱迪”,到搭建警局场景、编辑视频、最后让朱迪跳了一段像素风网络神曲,中间遇到的每一个细节问题,都还很典型的:既能看到统一多模态的便利,也能看到现在AI视频在精细编辑上的边界。

不妨先来看看最终成片,具体过程我们稍后拆解。


一、在可灵O1里重建尼克和朱迪

进入可灵AI主页,左侧工具栏最上方就是可灵O1的新模式,在同一个对话框里就可以选择图片生成或视频生成。在生成区的下方,有一个“参考”模块,分为“图片”和“主体”两种方式。

同时,主体既可以调用主体库,也支持自建,而官方主体库的覆盖范围比我预想得要丰富。

人物栏里,直接给了鲁迅和林黛玉的影视形象,动物则有这两年在网上很火的安卓猫、水豚、香蕉猫等。继续翻,主体还延伸到了道具、服饰、场景和特效,基本把一支视频里会需要用到的主要元素,都整理成了可复用的素材。

我这次的主角不是官方主体,而是自建的尼克和朱迪。在“我的主体”里,我上传了两位的图片,分别新建了两个主体。

可灵O1有一个专门用来保证角色一致性的设计:主体必须由多张图片共同构建。

创建时,系统会要求用户至少提供一张主参考图和一张其他视角图,希望用户把角色的正侧面、近景远景都喂进去。我给尼克上传了4张图,其中1张是主参考,其余是不同视角。

标签部分我选择了“动物”,然后在主体描述栏点了一下“智能描述”,系统自动生成了一小段关于“狐尼克”的文字说明,补充了毛色、服饰等细节。

随后我用同样的方式给朱迪建了一个主体。

这一步做完之后,等于是在可灵O1里“重建”了影视版狐尼克和朱迪,后面无论是图还是视频,都可以直接调用这两个主体,保证角色的基础风格统一。

二、从图片到开场镜头,搭出疯狂动物城夜班警局

有了主体之后,我先用图片O1模式试了一轮静态图,让尼克和朱迪先“落地”到典型场景里,我选的场景是动物城的警局办公室。

警局的第一张效果非常理想:尼克和朱迪的角色一致性很好,比例、服饰和神态都在预期之内,场景画风也统一在动画电影版的“疯狂动物城”世界观之中。

问题出在第二张图上。在这张图里,警局背景里出现了很多“长得像朱迪的警员”,背景人物的脸和朱迪近似度过高,画面里出现了一排几乎同款的兔子脸,视觉上有点诡异。

此外,尼克后方的一张办公桌上,两台电脑紧贴摆放在一起,也不大符合日常使用场景,看起来像“复制粘贴”出来的。

我们尝试使用局部重绘功能,把背景里部分警官替换成其他小动物形象,希望能打破“同脸军团”的违和感。

▲局部重绘后的效果

但在这种细节程度的编辑下,模型还是很难精准地对某一个角色做局部替换。

在静态图大致跑通之后,我们决定用第一张警局图片作为故事开场的基调:先用O1生成一个夜晚的疯狂动物城城市远景镜头,再拉近到警局门口,最后落到尼克和朱迪同框出现,组成一个完整的视频开场片段。


这条视频在整体故事感上完成度很高:夜景街道、警局门口、内部办公室和主角同框的逻辑是对得上的。但细节层面,依然能看到一些“不对劲”的地方。比如部分警员的电脑是面朝观众摆放,而不是面朝警员自己。

另外,在警局背景中,有个别角色的脸直接变成了一团“乱码”,轮廓在,但五官细节糊成了一块。

三、从画面到声音,用“智能音效”为动物城配上BGM

在视频生成完成后,可灵O1的进度条下方会出现两个附加功能,一个是对口型,一个是音效。

对口型功能有一个前提条件:需要画面中存在稳定、持续可见的人脸,而且这个人脸要始终保持在画幅之内。

这个设定更适合真人、写实风格的片子,而我们这支疯狂动物城的风格偏动画和多角色,所以这次没有体验对口型这一功能。

音效功能则是这次体验里一个比较“惊喜”的点。我们只是在视频生成完成后点击了“音效”按钮,就进入了一个新的界面。

这一块的交互逻辑有点像“AI版音效素材库和智能拟音师”:一方面你可以直接在多种推荐风格中选择自己喜欢的音效基调;另一方面,可灵会先分析视频内容,自动生成一段“音效创意描述”的指令。

智能音效的优势,则在于它能和画面产生一些“预判式的配合”。

比如在这条警局开场视频里,有一个明显的开门动作,音效会主动把金属门被推开的声音放进去,和画面同步,加上远处的环境声,整体的空间感比单纯的BGM要完整得多。

从这个阶段开始,画面和声音才真正拼成了一段“完整的开场镜头”。

四、用“嘴改视频”,在警局门口加一块胡萝卜饮料广告牌

有了一个可用的开场画面之后,我开始尝试O1“擅长的编辑操作”,用自然语言去调镜头、改细节。

先是增加元素。我们给模型下的指令是:在疯狂动物城警局门口添加一块电子广告牌,播放胡萝卜饮料的广告。

视频生成后,广告牌本身融入得比较自然,亮度、位置和整体画风都对得上,确实像警局门口墙面的一部分。

但如果只看画面,很难一下子认出这是“胡萝卜饮料”,胡萝卜元素本身的视觉特征表现得不够清晰,更像是一块普通饮料广告灯牌。


然后是删改元素。我在同一段警局画面里,尝试让模型“只保留尼克和朱迪,删掉其他路人和警员”。最终的结果是:确实删掉了大部分背景角色,但系统还是保留了一位靠近主角团最近的警员。

可灵O1目前还没有掌握逐帧、逐人可控的能力。

再往下,我们尝试对镜头本身做一些调整。

街景部分,我们把镜头拉得更远一些,变成可以俯瞰整个动物城的全景,远处有不同种类的小动物在城市里活动。警局内部,则要求更多一些近景和特写,把尼克、朱迪和办公区域的细节交代得更清楚。

在这些指令下,O1可以按照“远景、近景”的逻辑重新生成镜头。同时,我们也会发现一个明显的问题:镜头之间的切换节奏和元素添加偏“死板”,镜头并不流畅,也没有初版视频的活灵活现。


五、让朱迪跳舞,再把她变成像素游戏角色

在场景和细节编辑之后,我们开始尝试可灵O1的动作参考能力:用一段网络舞蹈视频,驱动尼克和朱迪跳舞。

这次我们选了一段很火的网络舞蹈,把它作为动作参考,希望让尼克和朱迪两人同步跳同一支舞。


实际体验下来,目前O1在多主体同步动作上还没有完全放开:经过几轮调参和不同指令尝试,我们始终只能稳定地生成“朱迪独舞”的版本,没办法让尼克和朱迪两个人在同一画面中,完成整支舞蹈。


但在单主体的表现上,这一条舞蹈的效果可以用“几乎完美”来形容:动作复刻的节奏、幅度和重心变化都高度贴合参考视频,朱迪的形象在大幅运动中也保持了很好的稳定性,没有出现明显的脸部崩坏或身体扭曲,耳朵、尾巴这类拟人动物的特征在动作里也被自然保留了下来。

在这个基础上,我们又给这支舞蹈上了一道“风格滤镜”,把整段视频重绘成像素游戏风。

这一次,可灵O1也比较顺利地完成了任务。

如果把前面的警局夜景、办公室开场和这支像素风舞蹈拼在一起,就已经是一支很完整的“疯狂动物城番外小短片”了。

这次围绕疯狂动物城的完整体验下来,我对可灵O1的直观感受是:它把原来散落在不同工具里的事情,组合成了一条相对顺畅的工作流。

从主页点进O1开始,建主体、调图、文生视频、参考视频、用嘴改画面、加音效、做动作迁移、改风格,一路下来基本都在同一个对话界面里完成。

对创作者来说,这种“一应俱全”的状态,意味着试错成本被显著压低了,你可以沿着同一个故事线往前推,不用频繁切换不同产品和插件。

但同样明显的是,只要讲到具体镜头和具体元素,可灵O1目前还没到“想什么就一定能还原什么”的程度。在这些细节上,它更多是在给出一个可用的草稿,而不是直接替代专业后期。

朝这个方向继续迭代下去,当角色一致性、局部编辑和镜头逻辑再继续精进,或许有望实现:从一句话到一支能直接上线的短片。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
42岁影后卫诗雅横渡维港,直面海浪挑战,自律状态令人佩服

42岁影后卫诗雅横渡维港,直面海浪挑战,自律状态令人佩服

蟹黄堡爱吃瓜
2026-08-16 11:25:27
末伏至,属虎人三喜临门,道尽人生大智慧!

末伏至,属虎人三喜临门,道尽人生大智慧!

叮当当科技
2026-08-16 08:22:55
每体:巴萨进账了5000万欧,却送走创造75粒进球的三人组

每体:巴萨进账了5000万欧,却送走创造75粒进球的三人组

懂球帝
2026-08-15 15:15:12
美伊一场大战,永久改变了伊朗,伊朗最高领袖不再“说一不二”

美伊一场大战,永久改变了伊朗,伊朗最高领袖不再“说一不二”

何咯说
2026-08-13 16:13:04
C罗和乔治娜婚后首次同框亮相,却“保持距离”,41岁球星宠溺小女儿

C罗和乔治娜婚后首次同框亮相,却“保持距离”,41岁球星宠溺小女儿

译言
2026-08-16 07:35:27
16年前,大喊“我爸是李刚”的李启铭,出狱后父母拒绝与其相认

16年前,大喊“我爸是李刚”的李启铭,出狱后父母拒绝与其相认

麦芽是个小趴菜
2026-07-27 02:35:50
45岁田朴珺带女儿现身丹麦!在药店买一兜保健品,小腹隆起好明显

45岁田朴珺带女儿现身丹麦!在药店买一兜保健品,小腹隆起好明显

眼底星碎
2026-08-12 23:24:45
密歇根参院民调:共和党人罗杰斯51%领先,民主党人忧激进派太极端

密歇根参院民调:共和党人罗杰斯51%领先,民主党人忧激进派太极端

爬虫饲养员
2026-08-15 18:53:21
第一个赶走美军的国家出现,17万美军到清零倒计时,只给46天时间

第一个赶走美军的国家出现,17万美军到清零倒计时,只给46天时间

近史谈
2026-08-15 18:01:46
莎拉弹劾庭审大乱!法庭审判长出手了:检方已多次越过界线,必惩

莎拉弹劾庭审大乱!法庭审判长出手了:检方已多次越过界线,必惩

近史谈
2026-08-16 13:07:06
“医生,你们机器把我身体震坏了!”28岁小伙做完核磁共振,感觉影响夫妻生活……医生:不可能

“医生,你们机器把我身体震坏了!”28岁小伙做完核磁共振,感觉影响夫妻生活……医生:不可能

都市快报橙柿互动
2026-08-14 01:44:49
王玉栋踢得太挣扎了!球迷齐喊罗斯下课,拜合拉木太神奇了!茹萨太水了

王玉栋踢得太挣扎了!球迷齐喊罗斯下课,拜合拉木太神奇了!茹萨太水了

刀锋体育
2026-08-15 23:26:28
戴笠身边人晚年坦言:他当年安顿胡蝶时,仅因瞥见她旗袍下摆一处褶皱,竟立刻命人腾出小院

戴笠身边人晚年坦言:他当年安顿胡蝶时,仅因瞥见她旗袍下摆一处褶皱,竟立刻命人腾出小院

磊子讲史
2026-08-15 17:48:13
固态电池即将落地!一个残酷现实:先出局的不是油车,是老电车

固态电池即将落地!一个残酷现实:先出局的不是油车,是老电车

生活魔术专家
2026-08-16 03:31:25
梦鸽李天一赴美不归?看到85岁李双江“现状”,原来杨洪基没说谎

梦鸽李天一赴美不归?看到85岁李双江“现状”,原来杨洪基没说谎

阿纂看事
2024-11-05 11:54:58
谁能想到,日本投降81周年,韩国总统李在明对亲日分子“亮剑”!

谁能想到,日本投降81周年,韩国总统李在明对亲日分子“亮剑”!

爱上孤独s
2026-08-16 00:00:30
狗咬人被摔死,狗主人带9人上门打砸遭老人反杀,算不算正当防卫

狗咬人被摔死,狗主人带9人上门打砸遭老人反杀,算不算正当防卫

易玄
2026-08-05 08:15:35
认购率破400%、触发积分摇号,上海4天两个改善型楼盘“日光”

认购率破400%、触发积分摇号,上海4天两个改善型楼盘“日光”

澎湃新闻
2026-08-16 09:14:30
可控核聚变一旦实现,地球上的氚会被用光吗?本来就只有3.5公斤

可控核聚变一旦实现,地球上的氚会被用光吗?本来就只有3.5公斤

混沌录
2026-07-04 22:15:06
苏州一对情侣,谈了7年,女子提了18次分手,分手后在街头痛哭!

苏州一对情侣,谈了7年,女子提了18次分手,分手后在街头痛哭!

川渝视觉
2026-04-17 22:13:14
2026-08-16 21:24:49
智东西 incentive-icons
智东西
智东西,AI产业新媒体,专注报道人工智能的前沿技术发展,和技术应用带来的千行百业产业变革。
12445文章数 117156关注度
往期回顾 全部

科技要闻

210亿美元,黄仁勋投了马斯克

头条要闻

媒体:中方连发16问后 特奥多罗的路只剩一条

头条要闻

媒体:中方连发16问后 特奥多罗的路只剩一条

体育要闻

因莫比莱:普通人的平凡故事

娱乐要闻

李小冉疑承认离婚 多次强调“一个人”

财经要闻

事关8万亿养老金!长周期考核落地中

汽车要闻

杨洋成001号车主 岚图追光S正式上市

态度原创

房产
时尚
健康
手机
公开课

房产要闻

金茂、招商,海南多个岗位招人!

看来看去还是穿裙子最显气质,不花哨、不扮嫩,大方又舒适

专家解答青少年脊柱侧弯七大问题

手机要闻

还得是雷军!小米18标准版是非iOS端唯一搭载2nm芯片的标准版旗舰

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版