网易首页 > 网易号 > 正文 申请入驻

预见·科技 | OpenAI发布AI文生视频工具 只“动嘴”就能做出60秒视频

0
分享至

来源:封面新闻

封面新闻记者 欧阳宏宇

今天凌晨,AIGC文生视频赛道又添一重磅产品。

2月16日凌晨,OpenAI发布旗下首个文生视频模型Sora。据介绍,该大模型可以直接输出长达60秒的视频,并且包含高度细致的背景、复杂的多角度镜头,以及富有情感的多个角色。

根据该产品官网上已更新的视频demo,Sora不仅能准确呈现细节,还能在一定程度上还原物体在物理世界中的存在,并生成具有丰富情感的角色。甚至可以根据提示填补原有视频中缺失的画面。

借助AI技术,用户无需技巧就可以天马行空地制作视频。在谷歌、Meta、阿里云、百度之后,OpenAI凭借Sora正式切入文生视频赛道,输出视频的时长与质量进一步提高,标志着AIGC视频时代正加速到来。有不少网友评价说,“这么强的吗?以后有视频也未必是真相了”。


一句话生成60秒视频

现实将被彻底颠覆

喜迎龙年春节,紧跟舞龙队伍掏出手机边跟边拍的人群;雨后东京街头,一位时髦的女士穿梭在充满温暖霓虹灯光和动感城市标志的街道上;城市轻轨穿越市区,车内的人物面朝窗外摆弄着手机……难以想象这些都是通过AI生成出来的视频。




根据官网介绍,OpenAI正在教AI理解和模拟运动中的物理世界,目标是训练模型来帮助人们解决需要现实世界交互的问题。据官方公告描述,Sora是OpenAI在语言和图像生成领域先前工作的基础上发展而来的。该产品不仅能够理解详细的提示,还能通过动作和视觉叙事重新创造出物理世界的动态。在效果上,Sora引入了流动感和连贯性,能够在不同镜头之间无缝过渡,同时保持上下文和对原始文本提示的保真度。

仔细观看demo视频可以发现,其中充满了细节:跟紧舞龙队伍的海量人物各有各的行为;雨后街头,潮湿地面反射出堪比真实世界的光影效果;行驶中的窗外偶遇遮挡时,车内人物倒影在玻璃上真实地显现……而这些细节的呈现在原始文本中是没有的。

Sora是如何实现文生视频的呢?据介绍,该大模型使用了扩散模型的技术,它可以从类似于静态噪声的视频开始,通过AI逐渐去除噪声,把各种随机像素转化为一段清晰的场景。由于该大模型建立在Transformer架构上,而这一架构又以极强的扩展性著称,所以其能够把较小数据单位的视频和图像标记(Token),通过统一的数据表达方式,在更广泛的视觉数据上训练和扩散变化。这使得Sora能够处理各种持续时间、分辨率和纵横比的视频数据。

基于这一技术,Sora还可以在单个视频中创建多个镜头,并依靠对语言的深入理解准确地解释提示词,保留角色和视觉风格。

不过,OpenAI也透露,Sora还并不完善,目前它还难以准确模拟复杂场景的物理原理,并且可能无法理解因果关系。比如,视频中,篮球没有正确被篮筐阻挡。


赛道保持快速发展趋势

AI文生视频渐成风口

事实上,AI文生视频并不算一个新鲜事物。

在Sora出现之前,谷歌的Imagen和Meta的“做个视频(Make-A-Video)”已经发布了相当长一段时间。就在上月底,谷歌还新发布了AI视频大模型Lumiere,该大模型同样可以通过联合空间和时间采样来实现生成,并且也显著增加了生成视频的持续时长和质量,甚至可以将静止图像转换为动态视频。

中国造AI大模型同样早已在文生视频赛道早早布局。去年3月,阿里达摩院就放出了“文本生成视频大模型”,并在开源模型平台上对外测试。百度文心一言则在正式发布的支持多模态文本生成视频能力基础上,在去年8月又上线了文本转视频原生插件。


不过,这些AI大模型生成的视频与Sora相比还有一定差距,一方面是体现在持续时长上,绝大多数视频时长还在4-10秒左右,其连贯性也有所不足。另一方面是镜头的组合,绝大多数视频都是单镜头;而Sora已实现了在一个视频里面,多角度镜头的组合。例如,在剪影动画中,视频从一只狼对着月亮嚎叫,直到它找到狼群,切换了不同景别的多个镜头。


AI文生视频工具逐步增强,也难怪有网友表示,“图生视频的公司感觉要被冲击了”。国盛证券研报指出,AI视频的放量也将会改变目前如电商直播、产品广告、影视制作等多个行业的生态,下游应用的加速时刻也将到来。

“AI文生视频、图生视频等赛道将会继续保持快速发展的趋势。”资深人工智能专家郭涛分析称,未来一两年内,AI生成视频领域将会出现更多的创新和突破,包括更加智能的视频生成技术、更加丰富和多样化的应用场景和更加完善、成熟的技术标准和商业模式等。同时,他也指出,这个领域也将会面临一些挑战和难点,例如数据安全和隐私保护、商业化模式和市场接受度等问题。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
欧洲杯被中文广告包围?破案了:均为虚拟广告牌,与现场不一样!

欧洲杯被中文广告包围?破案了:均为虚拟广告牌,与现场不一样!

风过乡
2024-06-15 16:53:50
100个代表团与会,1000多万美元的开销

100个代表团与会,1000多万美元的开销

寰宇大观察
2024-06-15 15:45:20
“人民”警察网暴人民,丧尽天良!

“人民”警察网暴人民,丧尽天良!

观风者
2024-06-14 10:06:53
大陆不再沉默,给黄仁勋上了一课,选在美收紧对华AI芯片出口之际

大陆不再沉默,给黄仁勋上了一课,选在美收紧对华AI芯片出口之际

陈菲副教授
2024-06-15 18:20:03
瑞士“全球和平峰会”,必将成为文明的新起点

瑞士“全球和平峰会”,必将成为文明的新起点

近距离
2024-06-15 18:09:05
打断妻子多根肋骨,知名上市公司创始人被公诉!被指长期家暴,连咬带打,妻子怀孕7个月时仍被打得满头包,“为了孩子不得不忍”

打断妻子多根肋骨,知名上市公司创始人被公诉!被指长期家暴,连咬带打,妻子怀孕7个月时仍被打得满头包,“为了孩子不得不忍”

每日经济新闻
2024-06-15 18:22:06
何谓“法律面前人人平等”?美国司法界判拜登儿子和特朗普都有罪

何谓“法律面前人人平等”?美国司法界判拜登儿子和特朗普都有罪

爆角追踪
2024-06-15 22:57:15
昆明一电动汽车自燃致人死?印度事、日本车、“台毒”分子造的谣

昆明一电动汽车自燃致人死?印度事、日本车、“台毒”分子造的谣

不掉线电波
2024-06-15 09:13:41
事出反常必有妖,目前广州上海正悄悄出现9大反常现象,让人深思

事出反常必有妖,目前广州上海正悄悄出现9大反常现象,让人深思

华人星光
2024-06-14 16:58:09
俄罗斯央行从6月13日起暂停港币交易

俄罗斯央行从6月13日起暂停港币交易

俄罗斯卫星通讯社
2024-06-15 16:05:34
周鸿祎:嫌360广告弹窗多,可以用极速版,想免费,就要接受广告

周鸿祎:嫌360广告弹窗多,可以用极速版,想免费,就要接受广告

科技Nice
2024-06-15 17:14:28
港媒:美军核潜艇并不是“撞山”,而是被解放军发现后“伏击”!

港媒:美军核潜艇并不是“撞山”,而是被解放军发现后“伏击”!

黑天鹅洞察
2024-06-14 11:51:11
德国队大胜苏格兰,球迷依然揪出最大水货,直言他就不该上场比赛

德国队大胜苏格兰,球迷依然揪出最大水货,直言他就不该上场比赛

罗掌柜体育
2024-06-15 14:48:38
网友质疑:阿里巴巴数学竞赛的含金量太低了?原来是开卷考试!

网友质疑:阿里巴巴数学竞赛的含金量太低了?原来是开卷考试!

火山诗话
2024-06-15 05:43:37
俄空军遭遇滑铁卢,单日8架战机被毁伤,乌克兰粮食出口创新高

俄空军遭遇滑铁卢,单日8架战机被毁伤,乌克兰粮食出口创新高

史政先锋
2024-06-15 21:05:23
土地卖不动以后,城投又找到了一条新财路,利润比房地产还高

土地卖不动以后,城投又找到了一条新财路,利润比房地产还高

庞明说财经
2024-06-13 08:45:38
茅台批发价罕见连跌后能不能止跌?公司会不会出手稳价?

茅台批发价罕见连跌后能不能止跌?公司会不会出手稳价?

每日经济新闻
2024-06-15 01:13:07
中国女排3-2逆转世界第一:获8.24分稳固亚洲之王 锁定曼谷总决赛

中国女排3-2逆转世界第一:获8.24分稳固亚洲之王 锁定曼谷总决赛

颜小白的篮球梦
2024-06-15 22:41:33
是什么让发展中国家毫无翻身希望?

是什么让发展中国家毫无翻身希望?

智先生
2024-06-15 21:04:01
一针69.7万,医保谈判到3万!可澳洲184块,为何却说中国价最低?

一针69.7万,医保谈判到3万!可澳洲184块,为何却说中国价最低?

风起云间
2024-06-14 21:44:22
2024-06-16 02:34:44
封面新闻
封面新闻
封面传媒旗下封面新闻
244439文章数 876327关注度
往期回顾 全部

科技要闻

TikTok开始找退路了?

头条要闻

563支AI队伍和姜萍考同一份试卷:最高34分 都没进决赛

头条要闻

563支AI队伍和姜萍考同一份试卷:最高34分 都没进决赛

体育要闻

莱夫利,让困难为我让路

娱乐要闻

江宏杰秀儿女刺青,不怕刺激福原爱?

财经要闻

新情况!高层对人民币的态度180°转弯

汽车要闻

东风奕派eπ008售21.66万元 冰箱彩电都配齐

态度原创

时尚
手机
亲子
艺术
房产

艳压四方的刘亦菲,也没能赢她

手机要闻

小米澎湃OS再次公布进展通报:多项问题优化中,且全是内置应用!

亲子要闻

儿童“婚礼”寓教于乐,不必过度解读

艺术要闻

穿越时空的艺术:《马可·波罗》AI沉浸影片探索人类文明

房产要闻

万华对面!海口今年首宗超百亩宅地,重磅挂出!

无障碍浏览 进入关怀版