网易首页 > 网易号 > 正文 申请入驻

用涂鸦几分钟制作视频:Runway AI新工具实测体验

0
分享至


一个定居者家庭正在欣赏野牛群,突然两只恶魔般的翼兽从头顶飞过,他们开始奔跑逃命。小女孩像幽灵一样穿过了栅栏柱。

这个超现实的五秒场景是通过AI平台Runway中一个名为Motion Sketch的新功能创建的。顾名思义,它可以通过在静态图像上直接绘制的简单涂鸦来生成视频。

在下面的视频片段中,我首先使用Google的Nano Banana Pro生成了一张图像——这是Runway平台提供的文本转图像模型之一——然后简单地画了一些鸟状形状和两个箭头,指示家庭和野牛应该逃跑的方向。我添加了一些文本提示作为额外指导,模型完成了其余工作。

这个功能仍需要一些指导,就像ChatGPT经常需要多个精心制作的提示才能生成你想要的输出一样。尽管如此,它可能标志着AI生成视频的一大进步,特别是对于那些更喜欢视觉思考而非文字描述的创意行业专业人士。

"这个功能对所有类型的用户都很有帮助,"Runway产品经理Aditi Poduval告诉ZDNET。"最终,我们帮助人们获得精确的运动效果,而无需制作特定的书面提示。"

以下是我使用Motion Sketch后的体验心得。

在对疲惫定居者家庭图像的初步实验后,我决定进一步测试涂鸦功能。

我使用文本提示生成了家庭图像。但通过Runway的Nano Banana Pro也可以仅基于涂鸦创建图像,你可以像在Microsoft Paint中一样直接在平台上绘制。我是一名作家,不是视觉艺术家,但我尽力勾勒出希望看起来像从树枝上悬挂的蛇的图案。

然后,我转向Motion Sketch。如前所述,在定居者家庭实验中,我通过在涂鸦之外添加一些文本提示来帮助模型,但这次我想看看它在没有任何书面指导的情况下表现如何。我希望生成蛇向右滑行的视频片段,所以我沿着蛇身画了一些简单的运动指示箭头。任何六岁孩子都能理解这些箭头的含义,但AI表现如何呢?我将长度设置为10秒,选择了Runway的Gen-4.5视频模型(Google的Veo 3和Veo 3.1也可用),然后点击生成。

我期待的是蛇沿着树枝移动并从画面右下方退出的相对平滑片段,但我得到的要奇异得多。蛇在画面左侧留下了部分身体,另一条蛇从其身体中出现并从树上掉落。在某个时刻,它似乎长出了鳄鱼般的脚,用来在树枝上拖拽自己。我绘制的原始箭头也在片段开始时短暂出现,然后消解。

公平地说,蛇是生物奇迹,准确建模它们的运动对任何动画师——无论是人类还是机器——都不是小任务。模型似乎误解了我的多个箭头,将其理解为蛇同时向多个方向移动的指令,这显然让它困惑了。所以我回去在原始图像和箭头上添加了简单的文本提示:"蛇沿着树枝滑行。"

这次的最终产品更接近我的想法(没有突然复制蛇身或长出腿)。运动看起来仍然有些僵硬,但同样,蛇的运动是相当高的要求,涉及许多复杂的细致物理学。

再做一个实验:我想看看模型如何处理真实照片,所以我从笔记本电脑上传了一张:几个月前在布鲁克林Prospect Park拍摄的照片。

我画了一个实际上是火的通用图标:波浪形红线中镶嵌着橙色并向上辐射。同样,我不声称自己是天才插画师,但大多数人都能识别我想表达的内容。Runway的模型也识别出了,并在我照片中宁静的湖边场景中心投下了巨大的篝火。同样,我的草图在消失前短暂出现在片段中,以逐渐缩短的波浪线的迷幻运动形式。也许我在想象,但篝火旁的树木甚至似乎在其热量下变黑了。

像任何其他生成式AI工具一样,Motion Sketch有其不完善之处和故障(小女孩穿过木梁,蛇长出腿,我原始草图的波浪线在最终视频片段中短暂出现)。尽管如此,我印象深刻。

这是用AI生成视频的全新格式的一瞥,它可能比以往任何时候都更能降低想象力和制作之间的障碍。"这就是我一直在等待的,"一位X用户在Runway周二公告下发帖说。"绘制你的视觉然后观看它渲染成视频?对于无法终生进行提示工程的创作者来说绝对是游戏规则改变者。"

现在,如果你有特定愿景,它仍然需要相当多的试错,但同样,这是对未来可能性的激动人心的预览。它绝对值得尝试,即使——也许特别是——如果你只是以创造性的精神进入,对你真正想要制作的内容没有明确的愿景。

Motion Sketch至少需要Runway的标准订阅,每用户每月12美元,提供625个月度积分。

要从用户仪表板访问,点击左侧菜单中的"App",然后在"Explore Gen-4.5"收藏下或屏幕右半部分预览窗口下选择Motion Sketch,你会看到标有"立即尝试"的按钮。

从那里,只需上传图像并点击"草图"→"导出草图"→生成。

Q&A

Q1:Motion Sketch是什么?它有什么功能?

A:Motion Sketch是AI平台Runway推出的新功能,可以通过在静态图像上直接绘制的简单涂鸦来生成视频。用户只需在图片上画一些简单的线条或箭头,就能指示物体的运动方向,AI模型会自动生成相应的视频动画效果。

Q2:使用Motion Sketch需要什么条件和费用?

A:Motion Sketch至少需要Runway的标准订阅,每用户每月12美元,提供625个月度积分。用户可以从仪表板的"App"菜单进入,选择Motion Sketch功能,然后上传图像进行涂鸦创作。

Q3:Motion Sketch的效果如何?有什么局限性?

A:Motion Sketch能够识别简单的涂鸦指令并生成相应的视频效果,但仍有不完善之处。复杂的运动建模(如蛇的滑行)可能出现异常,有时需要结合文字提示来获得更好的效果。总体而言,它为视觉化创作提供了新的可能性。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
Lisa萝莉岛演唱会视角曝光,她被曝曾在岛上,伺候权贵和资本大佬

Lisa萝莉岛演唱会视角曝光,她被曝曾在岛上,伺候权贵和资本大佬

花哥扒娱乐
2026-02-10 18:44:40
一级致癌物:60多国禁用!曾摧毁澳洲小镇,为何我国农村随处可见

一级致癌物:60多国禁用!曾摧毁澳洲小镇,为何我国农村随处可见

王二哥老搞笑
2026-02-11 12:05:39
3年大合同+全家迁居!张本智和官宣震撼抉择,日本队慌了

3年大合同+全家迁居!张本智和官宣震撼抉择,日本队慌了

卿子书
2026-02-02 08:59:31
疯传!王石的瓜,好狗血!

疯传!王石的瓜,好狗血!

财经要参
2026-01-05 22:13:08
劳务派遣才是当下社会最大的毒瘤。

劳务派遣才是当下社会最大的毒瘤。

流苏晚晴
2025-09-24 18:00:16
就在今天!2月11日上午,国乒传来樊振东、孙颖莎、王曼昱新消息

就在今天!2月11日上午,国乒传来樊振东、孙颖莎、王曼昱新消息

去山野间追风
2026-02-11 12:57:35
55分+14板+14助,又一次无缘全明星!哈登要逆天改命冲击总冠军

55分+14板+14助,又一次无缘全明星!哈登要逆天改命冲击总冠军

世界体育圈
2026-02-11 10:24:19
都说顺产好,为啥大多产科女医生选剖腹产?妇产科男医生说出真相

都说顺产好,为啥大多产科女医生选剖腹产?妇产科男医生说出真相

菁妈育儿
2026-02-09 11:48:15
和父母聊天能有多搞笑,父母的精神状态领先我们几百年!

和父母聊天能有多搞笑,父母的精神状态领先我们几百年!

夜深爱杂谈
2026-01-23 20:32:56
“最快女护士”张水华与运动眼镜品牌签约,是其离职后首个代言,品牌方:欣赏她敢于为梦想付出

“最快女护士”张水华与运动眼镜品牌签约,是其离职后首个代言,品牌方:欣赏她敢于为梦想付出

扬子晚报
2026-02-11 11:25:53
7年败光2个亿,邹市明冉莹颖共同发文,俩人终究还是踏出这一步

7年败光2个亿,邹市明冉莹颖共同发文,俩人终究还是踏出这一步

大嘴爱哔哔
2026-02-11 04:15:53
朱江明听劝了!豪掷百台iPhone 17 Pro抽奖,舆论反转

朱江明听劝了!豪掷百台iPhone 17 Pro抽奖,舆论反转

雷科技
2026-02-11 12:13:35
外交部:中菲同意妥善处理涉海分歧 管控好海上局势

外交部:中菲同意妥善处理涉海分歧 管控好海上局势

财联社
2026-02-10 15:42:34
吴石案后,蒋经国以为台湾再无地下党,却不知李克农还留了后手!

吴石案后,蒋经国以为台湾再无地下党,却不知李克农还留了后手!

阿泠你好
2026-02-04 09:46:20
为何中国军力吓不倒日本,石破茂说得一针见血,还会走老路的

为何中国军力吓不倒日本,石破茂说得一针见血,还会走老路的

瑛派儿老黄
2025-12-02 21:11:13
一个人养活一座城,这次我是真开眼了。

一个人养活一座城,这次我是真开眼了。

小光侃娱乐
2026-02-11 05:15:05
央视动真格了!2026春晚大换血,赵本山当年的狠话终于应验

央视动真格了!2026春晚大换血,赵本山当年的狠话终于应验

绚丽的画卷
2026-02-07 13:53:12
车太贤坦言只认钱不认人:20年好友不赚钱也不合作

车太贤坦言只认钱不认人:20年好友不赚钱也不合作

玲儿爱唱歌
2026-02-11 12:54:47
开国中将抗命不去南京,贺龙邓小平都劝不住,萧克只用了一句话

开国中将抗命不去南京,贺龙邓小平都劝不住,萧克只用了一句话

历史回忆室
2026-02-10 23:48:15
宋朝官帽上的两根长翅究竟是干嘛的?为何就连宋朝皇帝也要戴?

宋朝官帽上的两根长翅究竟是干嘛的?为何就连宋朝皇帝也要戴?

疯狂的小历史
2026-01-24 13:52:20
2026-02-11 15:19:00
至顶头条 incentive-icons
至顶头条
记录和推动数字化创新
16070文章数 49690关注度
往期回顾 全部

科技要闻

痛失两位华裔大佬!马斯克为何留不住人心

头条要闻

美英空军模拟对抗中国战机 美F-35B在"红军"模拟歼-35

头条要闻

美英空军模拟对抗中国战机 美F-35B在"红军"模拟歼-35

体育要闻

搞垮一个冬奥选手,只需要一首歌?

娱乐要闻

汪峰吃惊!章子怡年前6天高调官宣喜讯

财经要闻

习酒节前价格雪崩控量稳价变空谈

汽车要闻

新款阿维塔12内饰官图:全面升级 兼顾智能与豪华

态度原创

健康
教育
数码
家居
艺术

转头就晕的耳石症,能开车上班吗?

教育要闻

国台办:热烈欢迎更多有志台湾学生报考大陆高校

数码要闻

新款联想拯救者Y700支持AI网络加速,较竞品延迟更低、卡顿更少

家居要闻

简雅闲居 静享时光柔

艺术要闻

楷书进步缓慢的原因是什么?

无障碍浏览 进入关怀版