网易首页 > 网易号 > 正文 申请入驻

一个APP就能拍短片!人物、字幕、BGM……AI Agent统统自己搞定

0
分享至

看过了这么多款Agent,这一次,AI不仅承包了视频生成,还自带演员进组了

只需一段简单的提示词,一条充满戏剧张力的微短剧就诞生了。

不信,看看我们新做的《东北虎妞回唐朝当公主》:


【此处无法插入视频,遗憾……可到量子位公众号查看~】

如何?是不是很有那味儿了?

这就是剪映旗下的内容创作Agent小云雀最新上线的一个功能:智能生成数字人——

简单来说就是文生数字人,通过提示词直接生成你想要的“演员”形象,并保持角色前后的一致性,一个视频还能同时出现多个角色。

有了演员后,只需你提供大致剧情思路,分镜、台词、字幕、口音、转场、贴图、背景音乐……统统都不用你管,AI Agent自己搞定。

这下子,那些天马行空的脑洞可算是有了用武之地。

有想法就能一键做故事短片!

这里和大家简单介绍下我们的测评过程。

进入小云雀APP之后,选择“智能生视频”,即可进入Prompt输入界面;在这里你还可以设置视频的一些细节内容。

包括视频的时长、人物的语言、口音、画面包装等等:



然后就可以和小云雀一起创作属于你们的故事了。

比如生成一段历史人物故事讲解的视频。

Prompt是这样的:



然后不需要我们做任何的操作了。

小云雀会先根据提示词做一番理解分析,根据用户的创作想法进行角色设计,完善脚本要求、视频风格、目标受众,归纳视频主题和语言,特别值得一提的是,过程中小云雀还会主动学习抖音热门视频,总结爆款内容的节奏特点,将用户创意用详细的分镜脚本表现出来。

短短几分钟,一个展现拿破仑辉煌一生的故事,就这么水灵灵地诞生了:


【此处无法插入视频,遗憾……可到量子位公众号查看~】

可以看到,不论是人物一致性,亦或是视频的各种细节,完成度可以说是能直接拿来用的程度了,非常适合起号阶段的自媒体创作者,能够极大提升生产力。尤其是对于有想法,但苦于找不到素材、不会剪视频的入门新手,非常友好。

除了这种正经的知识讲解,我们还试了下能不能和小云雀一起搞个活,比如:

  • 让乐山大佛带货蜜雪冰城。


【此处无法插入视频,遗憾……可到量子位公众号查看~】

雪王估计看完这个小短片,也得在底下留言评论:“妙啊~”

现在非常火爆的记者实地探访古代现场系列,小云雀也能很好呈现:


【此处无法插入视频,遗憾……可到量子位公众号查看~】

嗯,现在真的就是有想法,人人都能打造爆款视频了。

从图到视频的一款全能Agent

除了数字人,小云雀的另一大爆款玩法为「参考图生视频」

有别于大多数图生视频的初阶玩法——只是让图片动起来,这个功能再跃level,直接能生成完整故事了

比如随机上传一张哈利波特斯内普的照片,小云雀直接续写了一段他退休后“跨界”摇滚乐的故事:


【此处无法插入视频,遗憾……可到量子位公众号查看~】

注意看,里面的旁白讲解、配乐、丝滑转场等,也通通都是小云雀自己搞定的!

这种“一张图讲故事”的能力完美解决了以往图片混剪效果差的“老大难”。毕竟如果只是几张图加点转场混剪,作品大概率比较枯燥、流量不佳。

而小云雀在主体一致性、风格多样化等方面都能提供很好的支持。

来看乐高版成语小课堂:

  • 做一个乐高风格的塞翁失马故事,不出现与主题无关的其他元素,保持生成乐高风格一致性。隐藏数字人,隐藏贴纸,但需要旁白文案。(指令中最好强调“注意保持角色一致性”)

短短几分钟后,一段娓娓道来的成语故事科普新鲜出炉,并且不同场景下的人物主体始终保持一致,没有出现那种换个场景就突然换人的bug。


【此处无法插入视频,遗憾……可到量子位公众号查看~】

一致性问题一旦被攻克,小云雀的用武之地就远不止于内容创作了——放在产品拍摄、模特展示等营销类场景,更是妥妥的降本增效神器

还是一张参考图+一句提示词:

  • 参考该图片作为主体,输出小红书带货视频,换不同场景体现穿搭的百搭性。

一条关于大衣的带货视频就有了,不仅人物+大衣全程保持一致,还一举展示了多个使用场景:


【此处无法插入视频,遗憾……可到量子位公众号查看~】

或许不远的未来,无论是新款包包、护肤品,还是上新服饰,只要提供参考图,都能用小云雀一键生成高一致性、高质感且具有带货能力的视频内容

感觉电商商家们会很喜欢这个功能,毕竟拍摄视频素材的成本被狠狠打下来了——以前每上一个新产品就得实拍一波,拍模特、搭布景,光人力物力就劝退一大片。

而有了好的AI工具,这部分拍摄成本就能全部省下来



顺带一提,小云雀在图片生成方面同样不容小觑。

依托字节seedream3.0生图模型,它能交付生产力级别的商业海报、排版设计、视频封面等图像作品,中文渲染水平处于业界第一梯队。

我们浅浅用它设计了民族风海报、涂鸦式打工人表情包,交付成品相对不错,过去最容易“翻车”的图文排版、文字错乱问题,也几乎挑不出毛病了。



注意到了吗,小云雀的适配场景可不仅局限于抓马短剧,自媒体创作、营销类内容制作等领域,它都可以发挥一技之长。

一番实测下来,感觉小云雀和传统的生图生视频模型确实有很大不同。

其中最关键的就是创作门槛被大大降低了。就拿AI图生视频来说,以前只能生成片段分镜,然后需要用户手动剪辑拼接,但现在从输入到输出,中间过程几乎全被AI承包了。

可以说,能够兼顾视频和图片的小云雀,已经从“能生成”迈向了“能交付”的新阶段——无论是追求效率的内容团队,还是想要低成本搞定素材的商家用户,现在基本都能在小云雀里找到可落地的解决方案。



那么接下来的问题就是——

怎么做到的?

整个体验下来,我们总结了个公式:小云雀=视频Agent+图片Agent

和大家已经熟悉的各种生图生视频软件相比,它的定位不仅是做一个执行工具,而更像是一个创意智能伙伴。所以不管是图还是视频,只要用户有需要,小云雀就能支持。

啥叫创意智能伙伴?就是既能听懂你的需求,还能一口气给出多种创意方案的那种创作搭子。

小云雀将自己定位为一款内容创作Agent,依托于字节实力强大的模型能力,力争“一句话打造一个爆款”



此番实测下来,我们发现,小云雀有这么几个特点:

  • Agent化:不是一个大模型一口气完成所有任务,而是多智能体协同创作;
  • 自然语言驱动:说说话就能完成创作,创意表达的门槛大大降低;
  • 懂思考:系统内部不是死结构,而是基于当前任务“自主判断”,创作自由度高;
  • 一致性强:无论是图片还是视频,都能保持主体或场景的一致性,“割裂感”大幅减少。

所以,无论是海报还是短剧,亦或者我们想尝试的科普短视频,它都能有不错的交付结果,一键解决无人出镜、缺少实拍素材等创作卡点问题。

事实上,在AI技术飞速发展的当下,用户尤其是各类创作者,对视频、图片的需求早已经从能生成变成了能交付。灵活高效、交付质量稳定的小云雀或将成为内容创作领域的一匹黑马。

目前小云雀APP已上线安卓、iOS应用商城,截至发稿时间仍处于“限时免费”状态,感兴趣可以赶紧薅一波了(doge)。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
日吹急了眼:谁也没想到蜜雪冰城的一句话,炸出来一大堆日本间谍

日吹急了眼:谁也没想到蜜雪冰城的一句话,炸出来一大堆日本间谍

墨兰史书
2025-12-21 16:40:08
2026 年春节要暖到离谱?大年初一撞到七九, 有何预兆?

2026 年春节要暖到离谱?大年初一撞到七九, 有何预兆?

户外阿崭
2026-02-05 15:40:20
格列兹曼:贝蒂斯的草皮是西班牙最好的,我们主场的帮不上忙

格列兹曼:贝蒂斯的草皮是西班牙最好的,我们主场的帮不上忙

懂球帝
2026-02-06 06:38:06
150万台!市委书记市长齐出席,小牛电动第3次重仓常州

150万台!市委书记市长齐出席,小牛电动第3次重仓常州

创客公社-江苏第一创投媒体
2026-02-05 16:22:41
中方反击巴拿马,投资和经贸全限制,巴总统不满:将采取相应决策

中方反击巴拿马,投资和经贸全限制,巴总统不满:将采取相应决策

东极妙严
2026-02-05 19:00:16
花200万补课后续:380分儿子执意补课,母亲重病陪读,曝更痛隐情

花200万补课后续:380分儿子执意补课,母亲重病陪读,曝更痛隐情

观察鉴娱
2026-01-27 09:36:51
王毅外长:今后世上再无“中国台湾省”之外的任何模糊称谓。

王毅外长:今后世上再无“中国台湾省”之外的任何模糊称谓。

南权先生
2026-02-02 15:59:44
乒乓球亚洲杯:国乒4将不敌日本选手遭遇挑战,张本智和爆冷输球

乒乓球亚洲杯:国乒4将不敌日本选手遭遇挑战,张本智和爆冷输球

上观新闻
2026-02-06 04:49:07
国共谈妥了,萧旭岑获破格接见,两岸何时统一?郑丽文说出心里话

国共谈妥了,萧旭岑获破格接见,两岸何时统一?郑丽文说出心里话

李橑在北漂
2026-02-04 23:31:54
柬埔寨电信诈骗窝点内部的17张高清大图,假的上海公安浦东分局

柬埔寨电信诈骗窝点内部的17张高清大图,假的上海公安浦东分局

深度报
2026-02-05 21:14:52
瑞士酒吧火灾救女友的梅斯小将:烧伤后,我完全不敢照镜子

瑞士酒吧火灾救女友的梅斯小将:烧伤后,我完全不敢照镜子

懂球帝
2026-02-05 11:45:04
76岁上海知青回江西访友,竟发现当年的女友终生未嫁:我对不住你

76岁上海知青回江西访友,竟发现当年的女友终生未嫁:我对不住你

五元讲堂
2026-01-19 11:13:16
人类历史上最大的末日工程——三线建设

人类历史上最大的末日工程——三线建设

历来纵横
2026-02-04 18:18:11
安徽一对夫妻杀人后潜逃20年,各自另组家庭,谁料,妻子成公司高管丈夫成大老板

安徽一对夫妻杀人后潜逃20年,各自另组家庭,谁料,妻子成公司高管丈夫成大老板

LULU生活家
2025-11-06 18:29:11
央视再曝:055单挑美舰队;海陆空天的体系支撑之下,055堪称无敌

央视再曝:055单挑美舰队;海陆空天的体系支撑之下,055堪称无敌

啸鹰评
2026-02-04 23:51:11
提前大选不到1周,日本两大在野党迅速抱团,高市选情一夜生变

提前大选不到1周,日本两大在野党迅速抱团,高市选情一夜生变

一网打尽全球焦点
2026-02-06 06:12:45
国家下狠手了!体制内大地震,少爷、公主们的“天”,要塌了

国家下狠手了!体制内大地震,少爷、公主们的“天”,要塌了

霹雳炮
2026-01-19 22:24:13
中核集团的顾军被查了。最让人脊背发凉的是他的第一个身份

中核集团的顾军被查了。最让人脊背发凉的是他的第一个身份

南权先生
2026-02-02 16:05:36
俄罗斯成功发射“联盟-2.1b”运载火箭

俄罗斯成功发射“联盟-2.1b”运载火箭

上观新闻
2026-02-06 06:39:04
万斯回应爱泼斯坦案文件:揭露了美国精英阶层存在道德败坏现象,令人作呕

万斯回应爱泼斯坦案文件:揭露了美国精英阶层存在道德败坏现象,令人作呕

环球网资讯
2026-02-05 09:59:36
2026-02-06 07:12:49
量子位 incentive-icons
量子位
追踪人工智能动态
12120文章数 176374关注度
往期回顾 全部

科技要闻

美团买下叮咚买菜,防御还是进击?

头条要闻

与爱泼斯坦共舞嬉笑的神秘红衣女子身份披露

头条要闻

与爱泼斯坦共舞嬉笑的神秘红衣女子身份披露

体育要闻

奇才:我学生……独行侠:成交!

娱乐要闻

微博之夜卷入座位风波!杨幂超话沦陷

财经要闻

中美"只会有好消息" 经济冷暖看房价

汽车要闻

李想为全新L9预热 all in AI造更好的车

态度原创

亲子
游戏
房产
艺术
公开课

亲子要闻

长大之后肠子都得悔青了

《无主之地4》现已通过Steam Deck验证

房产要闻

新春三亚置业,看过这个热盘再说!

艺术要闻

一幅宋画,带你看最美的雪中之梅

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版