网易首页 > 网易号 > 正文 申请入驻

刷屏科技圈的“视频生成”,到底有多颠覆?

0
分享至

2 月 16 日凌晨,OpenAI 在 AI 生成视频领域扔出一枚“王炸”,发布了首个文生视频大模型 Sora。这一模型可以根据提示词生成长达一分钟的高清视频。



在 OpenAI 官网分享的演示视频中,Sora 可以直接输出有多个角色、多种场景和运镜的画面。比如这个好莱坞大片质感的电影预告片:



这对比一年前 AI 生成的视频,两者简直是天差地别,就长度方面就“碾压”了行业目前大概只有平均“4s”的视频生成长度。

不少网友看完后,直呼:这不得整个行业消亡,要失业了!



也有人有个大胆的想法,但是老狐告诉大家,不要有这个想法,这个功能实现不了!因为 OpenAI 在文档里强调了生成内容的安全性。



今天就跟着老狐一起来看看 Sora 优势是什么?还存在什么不足?怎么才能用上它?

Sora 优势是什么?

在 AI 行业,根据文本自动生成视频,不算新鲜事。

但是,Sora 的问世,之所以被称为“王炸”,主要实现了以下几点突破:

1. 生成高质量的长视频内容

正如前文所提到的,Sora 能够生成长达 1 分钟的超长视频,相比之下,Runway-gen2 的 18 秒和 Pika 的 3 秒,真的是按在地上摩擦。



比如上面这段生成的视频,不仅主体连贯稳定,还有多镜头,包括从大街景慢慢切入到对女士的脸部表情的特写,以及潮湿的街道地面反射霓虹灯的光影效果。除了腿部切换不自然,几乎可以以假乱真。这 1 分钟一镜到底,可以说这表现力比有些演员都强。

再说到 Sora 创作的视频质量,无论是高清度还是还原度,都是可圈可点的。比如下面这个视频中,行驶中的列车窗上的影像显示十分细节,此外偶遇遮挡,车内人物倒影之后也能短暂出现。



又比如人物的眼睛,神情动态之难,往往成为 AI 创作的壁垒。



但就上面 Sora 生成的视频来看,可以说细节满满,几乎看不出什么破绽。这样的视频,哪怕是顶级动画制作公司可能都需要数日时间,而 Sora 只需要几分钟搞定。

2. 理解长文本能力

Sora 不仅完美继承 DALL·E 3 的画质和遵循指令能力,还能根据详细的文本指令生成具有详尽细节的视频内容。

要知道以往的 AI 视频生成,只能一板一眼地照本宣科翻译提供的文案,而 Sora 已经开始理解文案,并基于文案自己进行发挥和拓展。



如上方 Sora 以“色彩缤纷的鱼类和海洋生物充斥的,由纸艺精心构建的珊瑚礁世界”为主题的视频中, Sora 通过其摄影角度和拍摄时机,成功地推进了故事的发展。视频中实际上发生了多次镜头转换,这些没有特别指令它这么做,它却能自动完成。

3. 创新视频生成模式

以往的 AI 生成视频都是文本生成视频,但 Sora 还能接受其他类型的输入提示。比如,先给 Sora 一个 Dall E 生成的小狗照片,它就能让小狗动起来。





此外,Sora 还能在时间维度上实现向前或向后的无限扩展,也就是说给 Sora 一段视频,它可以自动生成前面或后面的视频。

比如,上面这三个视频,给了它一个结尾让 Sora 生成开头,可以看到每个开头都不一样,但是结尾最终都是一样的。

不知道多少小伙伴和老狐一样曾经幻想过一键切换视频背景,这不 Sora 就帮忙实现了。它可以参考原视频,把视频中的一些画面生成出你想要的内容,比如说是更换环境啊,像森林、水下,甚至整个场景主题。

令人眼前一亮的是,Sora 的视频拼接功能,你可以把多个视频给 Sora 参考,让它将多个毫无关系的画面组合到一起。可以说衔接还是比较丝滑的。

4. 始终保持 3D 一致性

用过其他视频生成工具的朋友肯定知道,我们为了尽量让视频画面不分,就要减少镜头的移动和旋转。



不过使用 Sora 我们可以不用担心这个问题,因为它生成的人物和场景元素在三维空间中的位置关系能够保持一致的运动,都将持续保持一致性。此外,人物、动物和物体即使在被遮挡或离开画面后,仍能被准确地保存和呈现。

5. 与世界互动,画面有物理交互反馈

老狐觉得这一点或许是 Sora 最可怕的功能。现今的 Sora 能够模拟一些对世界状态有简单影响的行为。例如,画家在画布上留下新的笔触,这些笔触会随时间推移而持续存在。



综上看来,Sora 着实是对之前的 AI 视频生成系统的前辈们来了一波降维打击。



Sora 目前的不足

当然也并不是说 Sora 十分完美,目前看来还存在诸多不足。一是该模型混淆提示的空间细节,并且难以准确的描述复杂场景中的物理现象。

比如这个视频老人吹蜡烛前后火苗居然没有丝毫的变化,不合常理。



二是无法理解一个事例中包含的因果关系

比如酒杯摔碎,但是液体的流动和玻璃的破裂关系,不合常理。

三是 Sora 难以精确的描述时间发生的事件

例如“五只灰狼幼崽在一条偏僻的碎石路上互相嬉戏、追逐”,狼的数量会变化,一些凭空出现或消失。





怎么样才能用上它?

那么,大家最关心的问题来了,我们普通大众现在能使用 Sora 么?

答案是:不能。

目前 Sora 还未对公众开放,OpenAl 表示目前没有计划向公众发布它,正与与第三方安全测试人员共享该模型。



所以说,目前还只有一些安全测试人员以及一些精选的视频制作者和艺术家获得了 Sora 访问权限



如果你实在想尝试一下 Sora,OpenAI CEO 奥特曼在 X(以前的推特)也发出了一条帮忙生成视频的帖子,只需要去下方复指示词就行。





大佬们如何看 Sora?

最后再来看看各位技术大牛和内容行业从业者如何评价 Sora?

360 集团创始人、董事长周鸿祎认为 Sora 意味着AGI实现将从 10 年缩短到 1 年!此外周鸿祎还表示,Sora 对短视频行业有巨大的颠覆,特别是创作力工具。



英伟达人工智能研究院 Jim Fan 认为我们不能忽略 Sora 背后,“世界模型”更进一步,AI 已经可以读懂物理规律。



马斯克评 OpenAI 视频模型:“AI 增强的人类将在未来几年里创造出最好的作品。”



最后,对老狐这种内容创作者来说,仅通过输入文本,就能生成高质量的视频,这不仅可以大幅减少制作时间,还能激发更多的创意灵感,已经在期待能够亲自体验 Sora 带来的创新魅力了。

对于 OpenAI 发布首个视频生成模型 Sora,你怎么看?欢迎评论区一起互动交流。

参考资料:

量子位、腾讯科技、新智元、X、OpenAI 官网等其他网络平台

编辑:不吃麦芽糖

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
盘点女乒四位"刺头":张怡宁嫁大20岁老公只为钱,丁宁坑害刘诗雯

盘点女乒四位"刺头":张怡宁嫁大20岁老公只为钱,丁宁坑害刘诗雯

凤幻洋
2024-06-05 15:22:11
国足1-1遭泰国逼平!揪出2大水货,孙继海痛批,伊万暴怒信错人了

国足1-1遭泰国逼平!揪出2大水货,孙继海痛批,伊万暴怒信错人了

万视角
2024-06-07 01:20:40
大快人心!Cos科比坠机的Up主已被B站封禁!

大快人心!Cos科比坠机的Up主已被B站封禁!

直播吧
2024-06-07 08:05:06
曾凡博单换周琦?曝北京队欲跟广东交易,朱芳雨被逼只能“1换1”

曾凡博单换周琦?曝北京队欲跟广东交易,朱芳雨被逼只能“1换1”

绯雨儿
2024-06-07 15:29:34
连战抛出“两国论”,要大陆承认台湾“政权”,才能开启两岸对话

连战抛出“两国论”,要大陆承认台湾“政权”,才能开启两岸对话

大嘴叔叔呀
2024-06-07 06:33:26
朝鲜队在被强制性扣除3分的情况下,依然很有希望晋级18强赛

朝鲜队在被强制性扣除3分的情况下,依然很有希望晋级18强赛

直播吧
2024-06-07 10:02:17
“史上最难高考”来了!没想到,7年前高考744分的状元,成了这样

“史上最难高考”来了!没想到,7年前高考744分的状元,成了这样

北国向锡安
2024-06-07 13:15:35
刘浩存是不走清纯路线了?穿上黑西装秒变霸道御姐,还挺酷帅的

刘浩存是不走清纯路线了?穿上黑西装秒变霸道御姐,还挺酷帅的

影苏故事汇
2024-06-06 10:02:47
比亚迪公关经理高情商回怼余承东,不造车的华为跟比亚迪比什么?

比亚迪公关经理高情商回怼余承东,不造车的华为跟比亚迪比什么?

美芳
2024-06-06 22:06:20
说气话?记者问为何不让谢鹏飞罚任意球,伊万回应:我同意你的说法

说气话?记者问为何不让谢鹏飞罚任意球,伊万回应:我同意你的说法

直播吧
2024-06-06 23:12:12
讣告!于2024年5月21离世:阮经天崩溃

讣告!于2024年5月21离世:阮经天崩溃

华人星光
2024-05-31 17:27:30
胡赛武装袭击了美国核动力航母?一众官媒集体“高潮”……

胡赛武装袭击了美国核动力航母?一众官媒集体“高潮”……

1号时务局
2024-06-04 18:06:13
国足收获双保险!新加坡队主帅道歉:下1场不放弃,还要提高更多

国足收获双保险!新加坡队主帅道歉:下1场不放弃,还要提高更多

足球大腕
2024-06-07 11:04:46
外甥高考690分欲报西工大,舅舅怒斥:国防七子拿什么和清北比!

外甥高考690分欲报西工大,舅舅怒斥:国防七子拿什么和清北比!

贾文彬的史书
2024-06-05 21:42:39
恭喜广东男篮!中国篮协官宣,徐杰恩师升职,周鹏陈江华机会来了

恭喜广东男篮!中国篮协官宣,徐杰恩师升职,周鹏陈江华机会来了

体育咆哮君
2024-06-06 15:05:37
1-1平泰国!中国男足赛后评分:1人满分,3将优秀,申花两将低迷

1-1平泰国!中国男足赛后评分:1人满分,3将优秀,申花两将低迷

理工男评篮球
2024-06-06 23:05:31
刘璇丈夫胖得太油腻!她发福后像阔太,踩20cm高跟仍比丈夫矮一头

刘璇丈夫胖得太油腻!她发福后像阔太,踩20cm高跟仍比丈夫矮一头

综艺贴士站
2024-06-06 20:25:07
祁忠仁被查!

祁忠仁被查!

鲁中晨报
2024-06-07 10:35:03
2024年养老金调整在即,31省市调整细则会在6月出炉吗?一起看看

2024年养老金调整在即,31省市调整细则会在6月出炉吗?一起看看

小强财艺
2024-06-07 07:27:55
宋美龄密谋戴笠暗杀一人,蒋介石得知后怒斥:你要动他,先杀了我

宋美龄密谋戴笠暗杀一人,蒋介石得知后怒斥:你要动他,先杀了我

光头哥的头
2023-12-23 13:38:09
2024-06-07 16:24:49
科技狐
科技狐
一家专注科技互联网领域,每日分享科技、数码、汽车、商业、TMT、AI 的新媒体。
3529文章数 70522关注度
往期回顾 全部

科技要闻

马斯克创造人类历史,SpaceX星舰试飞成功

头条要闻

"高考钉子户"梁实进考场被送考家长认出:他考了20几年

头条要闻

"高考钉子户"梁实进考场被送考家长认出:他考了20几年

体育要闻

国足进球功臣捂脸沮丧 伊万表情凝重

娱乐要闻

汤唯抵达巴黎将担任奥运火炬手

财经要闻

身陷退市股的投资者:我的钱瞬间没了

汽车要闻

2.0T混动售20.98万元起 福特蒙迪欧运动版上市

态度原创

旅游
本地
房产
时尚
公开课

旅游要闻

上海迪士尼年卡最高档位卡种八折优惠改为满减

本地新闻

我和我的家乡|踏浪营口,心动不止一夏!

房产要闻

震撼!8800亩存量宅地清单曝光!未来的三亚楼市,太炸裂!

建议上了年纪的男人:衣不花、裤不紧、发不乱,才不油腻更显气质

公开课

近视只是视力差?小心并发症

无障碍浏览 进入关怀版