网易首页 > 网易号 > 正文 申请入驻

从画廊里的语音陌生人游戏,到赌上全部身家的一千张A100

0
分享至


在采访接近尾声时,Anastasis Germanidis 抛出了一个判断:像 Interface World Models 这样的技术,终局是一台完全由神经网络驱动的操作系统。他提到 Andrej Karpathy 很早就写过类似的想法,但他觉得更值得深究的是当下的一个悖论——今天的语言模型能谈论任何话题、能把对话引向任意方向,几乎无所不能,但人们与它交互的界面却异常僵化。在他看来,用不了多久,界面本身也会变成可学习的组件:交付一个应用不再只是交付一个语言模型,还要交付渲染、交付像素本身。这句话像是给整场对话定了调——Runway 走到今天,从来不是一家做视频特效工具的公司,而是一家在赌"生成"这件事的边界到底在哪里。

Runway 联合创始人 Anastasis Germanidis 与 Latent Space 的 swyx 和 Vibhu 坐下来,把公司七年的路径重新捋了一遍:从一个把开源模型包装给艺术家用的小工具,到签下一份让 B 轮公司显得"有点不理智"的算力合同,再到今天把视频生成当作通往世界模拟的路径。这条路线不是一开始就设计好的,而是一步步被逼出来的。

1. 他一直活在两个平行世界里

Anastasis 说自己长期被分裂在两个身份之间。一边是他自己的艺术实践,做了很长时间的互动艺术;另一边是在不同公司做机器学习工程师、后端工程师的职业轨迹。他对编程和计算的兴趣一直存在,但真正让他着迷的是仿真——把这种兴趣带回了早期的艺术创作里。

这种双线并行不是简单的爱好叠加。一条线是生成模型和当时正在起效的早期机器学习研究,另一条线是仿真本身:通过给人类行为和互动建一个极简的模型,我们能从中学到什么。这个问题后来几乎原样投射到了 Runway 的产品哲学里——生成模型不只是用来产出内容,也是理解和模拟世界的一种方式。

2. 一场由马尔可夫链驱动的画廊社交实验

2015 年,Anastasis 做过一个项目:在展览空间里给人发出语音指令,协调陌生人之间的互动。系统会先给每个人分配一个身份——你是建筑师,30岁,喜欢体育——然后把你和另一个人匹配起来,生成一段完全虚构的对话开场。

当时语言模型远没有今天这样成熟,这套系统靠的是模板和马尔可夫链生成的文本拼接而成:一堆职业列表、一堆性格类型列表、一堆年龄列表,程序随机组合出人设,再驱动整个画廊里的小型对话模拟。这不是一次严肃的技术攻坚,却精确地预演了后来 Runway 反复出现的思路——用非常简单的生成机制,去逼近对人类行为的某种理解。

3. 一个训练在自动驾驶数据上的模型,被拿去生成一百万个行人

Anani Valley 和 Anani Road 是 Anastasis 与联合创始人 Chris 合作的早期项目之一,用的是 NVIDIA 在 2016、2017 年发布的 Pix2PixHD——一个把场景语义图转换成照片级输出的图像到图像模型。按今天标准看效果非常粗糙,但它是第一批能生成 1K 分辨率图像的模型之一,训练数据全部来自自动驾驶场景,语义类别也局限在行人、交通标志、自行车、红绿灯这些"路上会遇到的东西"。

真正有意思的是接下来发生的事:人们拿这个模型去生成极其超现实的画面——一百万个行人、一百万个交通标志、巨人般的人类。这是 Runway 最早得到的一个信号:一个训练在极其枯燥数据集上的模型,一旦被重新给到艺术家手上、被推向分布之外,反而能产出艺术上有说服力的东西。这在某种程度上就是 Runway 这家公司的方法论摘要——同一个生成模型,换个方向看它,围绕它搭建有意思的工具,交到艺术家手里,他们会做出你完全想不到的事情。

4. 从包装开源模型,到不得不自己建研究团队

Runway 最初的定位很朴素:把当时所有开源模型——比如 Pix2Pix——用简单的方式包装起来,交给艺术家用。这个想法的出发点是,那些模型如果不是机器学习工程师根本用不了,那把它们交给艺术家之后会发生什么?

但这个定位很快撑不住了。团队很快意识到,公司内部必须建一个真正的研究组织,这个转折发生在公司成立后大约第一年。当时的图像生成模型、尤其是视频生成模型——那时候视频生成的例子屈指可数——都远没有成熟到可以产品化、嵌入创作工作流的程度。于是团队不得不去推动研究前沿本身。

这段研究几乎是在后台悄悄进行了将近四年,期间 Runway 真正被外界认识的产品是一个叫 Green Screen 的抠像工具,解决的是视频分割这个在特效制作里极其重要但极度手工、没人愿意做的问题——rotoscoping。这个工具后来被用在《瞬息全宇宙》等多部高关注度电影和剧集里,Runway 在很长一段时间里本质上是一家后期制作工具公司,直到潜在扩散模型带来了 Gen-1、Gen-2。

5. 一次"有点不理性"的决定:签下一千张A100

转折发生在 2022 年年中。当时 Runway 意识到自己的研究规模相对算力而言太小,而图像和视频生成很可能会遵循和语言模型一样的 scaling law。于是他们做了一个大胆的决定:签约建一个一千张 A100 的集群。在当时,Runway 只是一家 B 轮公司,这几乎是一个略显不理智的决定,但团队真心相信,如果在足够大的规模上训练一个视频模型,最终会得到一个足够好的模型。

2022 年秋天,团队给自己定下一个目标:找到视频领域的"潜在扩散/Stable Diffusion 时刻"是什么样子。当时最好的视频模型叫 CogVideo,分辨率只有 256×256,质量并不高。于是 Runway 决定不再依赖别人的研究成果,自己投入建集群、训练视频模型。

6. 文生视频太难了,所以先做视频生视频

训练 Gen-1 的过程中,团队原本想直接做文本生成视频,但很快发现完全从零生成视频的难度太高。一个更容易切入的起点是视频到视频的转换——当你有更强的条件约束时,重新对一段已有视频进行风格化,本质上比从无到有生成一段视频要容易得多。基于这个判断,Runway 在 2023 年 1 月先发布了 Gen-1。

Anastasis 回忆起当时看到那些结果的感受:那种震撼几乎和当年图像生成或视频生成刚出现时一样——你会觉得这不可思议,这居然是可以做到的。这句朴素的感慨,恰好呼应了他在采访开头提出的那个更大的判断:从图像到视频,从视频到界面,Runway 一直在重复同一件事——把生成模型推向它原本没被设计要去的方向,然后看它能走多远。

从画廊里的语音陌生人实验,到自动驾驶数据集里长出的超现实图像,再到押上全部家当的一千张A100,Runway 走的从来不是一条线性的产品路线图,而是一连串"发现生成模型能做的事,远比设计它的初衷要多"的时刻。这也是理解 Anastasis 那句"界面终将变成可学习组件"的最好背景——如果一个训练在枯燥数据上的模型都能被逼出艺术性,那么一个被封装在僵化界面里的语言模型,被解放出来也只是时间问题。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
奚梦瑶晒中式婚纱照!脖子叠满龙凤镯,四太对儿媳和亲女儿一样的

奚梦瑶晒中式婚纱照!脖子叠满龙凤镯,四太对儿媳和亲女儿一样的

陈意小可爱
2026-10-01 12:57:30
东方甄选宣布2倍退款不退货,罗永浩还跟不跟?

东方甄选宣布2倍退款不退货,罗永浩还跟不跟?

听心堂
2026-09-30 14:25:27
菲律宾政坛风云突变!莎拉的两位助手吵架了:辩护律师斥责发言人

菲律宾政坛风云突变!莎拉的两位助手吵架了:辩护律师斥责发言人

奥利奥变薄了的
2026-09-30 19:46:05
泪目!赵家驹妈妈亲口承认,物资中有裹尸布,她连现场都没敢去

泪目!赵家驹妈妈亲口承认,物资中有裹尸布,她连现场都没敢去

懵面女汉
2026-09-18 18:07:23
【2026.10.1】爆姐的饭后爆料:生命不止,爆料不息!

【2026.10.1】爆姐的饭后爆料:生命不止,爆料不息!

娱乐真爆姐
2026-10-01 23:34:58
银杏果:自然界中最没用的果实!结果结得再多也一样沦为保护植物

银杏果:自然界中最没用的果实!结果结得再多也一样沦为保护植物

青史卷中人
2026-10-01 22:25:26
利物浦领跑争夺乌拉圭边路天才,或将斥巨资完成引援

利物浦领跑争夺乌拉圭边路天才,或将斥巨资完成引援

林子说事
2026-10-01 18:48:08
别克新车正式官宣:10月10日,正式上市  !

别克新车正式官宣:10月10日,正式上市 !

科技堡垒
2026-09-30 00:33:54
他是北京市委原书记,培养了两位正国级领导,离休后定下3条规矩

他是北京市委原书记,培养了两位正国级领导,离休后定下3条规矩

燕小姐说历史
2024-12-08 09:19:59
热苏斯:在我手下球员地位再高也没有特权,我在哪执教都如此

热苏斯:在我手下球员地位再高也没有特权,我在哪执教都如此

懂球帝
2026-10-01 00:44:14
深中通道有人一小时只走了500米,有人称坐车坐到自闭,深圳交警:已采取分流管控措施,请行经车友注意现场指引

深中通道有人一小时只走了500米,有人称坐车坐到自闭,深圳交警:已采取分流管控措施,请行经车友注意现场指引

台州交通广播
2026-10-01 18:31:09
福特CEO法利:美国应吸取欧洲教训,审慎对待中国车企入美

福特CEO法利:美国应吸取欧洲教训,审慎对待中国车企入美

IT之家
2026-10-01 17:34:23
樊振东躲在德国不回来,王楚钦说累,国乒气氛真怪

樊振东躲在德国不回来,王楚钦说累,国乒气氛真怪

罗纳尔说个球
2026-09-29 21:43:58
古语道"晨食壮火,午泄残精,命短阳衰",短短一句话藏着男人护阳长寿的关键

古语道"晨食壮火,午泄残精,命短阳衰",短短一句话藏着男人护阳长寿的关键

磊子讲史
2026-07-14 18:29:59
今日!外围,涨疯了

今日!外围,涨疯了

中国基金报
2026-10-01 15:52:36
生育政策大调整?早年超生罚款旧账,2026官方明确答复

生育政策大调整?早年超生罚款旧账,2026官方明确答复

哄动一时啊
2026-06-12 16:39:51
全球最小发达国家:美女遍地,快被中国“买”下,中国移民占87%

全球最小发达国家:美女遍地,快被中国“买”下,中国移民占87%

涵豆说娱
2026-10-02 00:10:16
张予曦母女迪士尼同框,妈妈这颜值不输女儿,年轻时绝对是大美人!

张予曦母女迪士尼同框,妈妈这颜值不输女儿,年轻时绝对是大美人!

秋风悲画芯
2026-10-01 07:21:57
上海日光、武汉时光,一夜之间,楼市风向彻底变了

上海日光、武汉时光,一夜之间,楼市风向彻底变了

专业聊房君
2026-10-01 20:00:37
82年,丈母娘嫌我穷酸,把小姨子塞进洞房,我笑了:这也太旺夫了

82年,丈母娘嫌我穷酸,把小姨子塞进洞房,我笑了:这也太旺夫了

温情邮局
2026-01-31 09:31:19
2026-10-02 01:15:00
至顶科技 incentive-icons
至顶科技
科技产业媒体与 AI 产业服务机构
22301文章数 49733关注度
往期回顾 全部

科技要闻

5999元起!华为Mate 90系列发布

头条要闻

美国一女囚犯被执行死刑 注射两剂药物后其"鼾声大作"

头条要闻

美国一女囚犯被执行死刑 注射两剂药物后其"鼾声大作"

体育要闻

“今天的表现,我们可以昂首离开球场”

娱乐要闻

奚梦瑶晒四太豪礼!22只龙凤镯近300万

财经要闻

智谱发上亿Token 能挽回开发者信任吗?

汽车要闻

2027款极氪001将于明年一季度上市 现款猎装同步推新配色

态度原创

教育
游戏
时尚
本地
公开课

教育要闻

免中考”试点到底改了什么?

《战争机器》新作GS 7分:创新不足剧情令人失望

在米兰,用时装唤醒内心的自我

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版