网易首页 > 网易号 > 正文 申请入驻

一手实测美团首个视频大模型,原生输出5分钟写实长视频

0
分享至

周一美团发布了他们第一个AI视频模型,

LongCat-Video,

13.6B参数,单个模型就能完成文生视频,图生视频,视频续写,以及生成超长视频,输出的视频参数是720p,30fps 。但我自己电脑有点拖不动比较完整/长时间的测试,所以发动了面子果实,找到美团LongCat团队帮我开了内部测试权限。


所以在这篇文章你能看到LongCat-Video完全真实的效果,它到底能不能生成5分钟不崩的长视频,以及美团为什么要做AI视频?

先说结论,

美团LongCat-Video给我的感觉是,它玩的就是真实。

就比如这个视频,你能看出从第几秒开始是我用LongCat-Video续写出来的吗?

答案是2秒之后全部都是生成的内容,整个画面延续了原片自行车行驶的速度、环境,动态非常流畅真实。

LongCat-Video很擅长这种第一视角的穿越视频,甚至可以一次性生成5分钟的穿越视频,中间过程非常自然连贯,与真实世界非常相似。

技术团队给LongCat-Video的定位是世界模型,跟普通的视频模型追求生成风格多样、场景多样的视频的目标不同,世界模型,要理解现实世界的动态、物理规律和因果关系。

英伟达在GTC上反复强调这个概念,他们给出的应用case,是给智能汽车模拟不同的交通流量模式、路况、天气和光照,是给机器人开发空间智能,是给交通枢纽给人群提供视频分析。

换而言之,世界模型的核心,不是电影制作机,它是模拟器,能投射出真实世界的状态。

所以我们这次测评,会专注于它对物理世界和因果逻辑的理解,尽可能的去看LongCat-Video对于真实世界的呈现程度。首先我做了一个经典滑板动作,和以往不同,我这次强调让它做出一个指定的Ollie动作,

对于这种非普遍的固定动作的完成,我没有补充说明,LongCat-Video靠“Ollie”这个提示词就跳起来然后稳稳落地,画面中各个元素的变化,包括人物和滑板之间的力作用里都很真实,可惜的是滑板本体转动的时候出现变形。

再看看LongCat-Video做出来的吃播视频,

是真的有在吃进去,食物进到了嘴巴里的同时盘子中的分量在减少,并且人物是有相应的表现力吃播表情的,如果清晰度和画面的打光可以少点锐化就好了。以后美团点外卖不会给每道菜都插入吃播吧。。。

再来就是人物讲解说话的镜头,

重点看人物的嘴形、眨眼、手部动作,虽然目前是没有声音的,但一分钟的画面里面没有出现过嘴形来回循环播放的片段,而且手部晃动这个香水的时候,瓶子里的液体也会对应细微晃动。

看完这几个case,我最大的感受是,LongCat-Video的世界观是朴素且正确的。

它可能画不出Sora那种宏大瑰丽、充满想象力的超现实史诗,但它能模拟出一个我们每天生活的、符合牛顿定律的世界。 而对于美团来说,后者远比前者重要一百倍。

最后我搞了点大白话说一下这次LongCat-Video的技术亮点,

为什么可以原生输出5分钟的不穿帮的视频,


它依托了一种叫视频续写任务的预训练方式。在训练的时候,LongCat-Video看的不是零碎的短片,而是大量的连续剧。它的大脑天生就在思考接下来会发生什么,而不是这个画面应该长什么样。

模型在看连续剧的时候,不是一帧一帧地看,而是一段一段、一个事件一个事件地看。它理解的是“动作的起承转合”,这是一种叫Block-Causal Attention的机制,这样生成的长时间的动作不会轻易断裂。

在生成长视频时,LongCat-Video还会把前面算过的不变的东西,比如背景里的那栋楼,先缓存起来,不用每一帧都重新算一遍,这样就可以提升到5分钟了

https://meituan-longcat.github.io/LongCat-Video/

这里面还有更多放出来的case,可以看到更多风格,现实交互和人物运动等等等等。

其实AI视频发展到现在,视频生成模型的分野已经出现了。

一类是为内容服务的,要的是视觉奇观,是多样化的画面风格,是创造一个又一个故事。

而另一类,就是世界模型,它们的目标是模拟现实,是做推演,为产业提供数据模拟。

他们并不是完全独立,切割开的,一个好的世界模型也会是好的视频模型。

对美团来说是早晚会踏出的一步,

他们的核心业务,本质上就是一场规模庞大,每秒都在发生的物理实验。

不需要AI去生成一个赛博朋克城市,

但需要AI告诉他们,

几点钟,哪个路口会开始堵车? 一个骑手在暴雨天气下,穿过一个有积水的十字路口,需要额外多花多少秒? 一个无人机配送包裹,在十五公里的时速下,侧面吹来的三级风,会如何影响它的电量消耗和稳定性?

这些,全部都是世界模型可以解决的问题。

我期待它能接入更多来自美团自有业务的真实世界数据,

模拟一场从国贸到望京的晚高峰拥堵,模拟一个外卖订单在雷暴天气下的最优配送路径,模拟一栋写字楼在午餐高峰期的电梯运行和人流动态?

当一个AI视频模型开始真正理解并模拟我们脚下的这片土地时,

它就不再是少数人的工具。

这是美团做AI视频,

让我感到兴奋的点。

@ 作者 / 卡尔 & 阿汤

最后,感谢你看到这里如果喜欢这篇文章,不妨顺手给我们点赞|在看|转发|评论

如果想要第一时间收到推送,不妨给我个星标

更多的内容正在不断填坑中……


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
李新翔绝杀,上海U20击败福建,全运会小组赛两连胜!

李新翔绝杀,上海U20击败福建,全运会小组赛两连胜!

五星体育
2025-11-03 22:03:01
人均600万到欠400亿,毁掉“天下第一村”的不是别人,是他们自己

人均600万到欠400亿,毁掉“天下第一村”的不是别人,是他们自己

一家说
2025-05-23 15:05:58
陕西女护士遇害后续:毕业十年没谈过对象,被男友下药拍照威胁

陕西女护士遇害后续:毕业十年没谈过对象,被男友下药拍照威胁

热风追逐者
2025-11-03 09:46:18
又暴雷,48小时卷走129亿,200万会员血本无归,“传销巨头”凉了

又暴雷,48小时卷走129亿,200万会员血本无归,“传销巨头”凉了

法老不说教
2025-11-03 22:32:15
阿根廷大豆突然生变!中国货轮集体掉头,人民币成救命稻草

阿根廷大豆突然生变!中国货轮集体掉头,人民币成救命稻草

前沿天地
2025-11-03 15:11:57
宋朝之前连棉被都没有,零下几十度的寒冬,古人是怎么熬过去的?

宋朝之前连棉被都没有,零下几十度的寒冬,古人是怎么熬过去的?

法老不说教
2025-11-03 19:36:43
九旬李明启谈到容嬷嬷为自己发声:我是个好人,当年属于救场行为

九旬李明启谈到容嬷嬷为自己发声:我是个好人,当年属于救场行为

蜜桔娱乐
2025-11-03 16:30:18
美国最不愿看到的事发生,英国媒体:中国开始测试DUV光刻机

美国最不愿看到的事发生,英国媒体:中国开始测试DUV光刻机

泠泠说史
2025-11-03 17:35:11
印度全村搞诈骗,还想逆天改命打破种姓制?被高种姓一秒打回原形:你也配?!

印度全村搞诈骗,还想逆天改命打破种姓制?被高种姓一秒打回原形:你也配?!

英国那些事儿
2025-11-02 23:22:33
你听过最离谱的八卦是什么?网友:留着上夜班的时候慢慢看

你听过最离谱的八卦是什么?网友:留着上夜班的时候慢慢看

解读热点事件
2025-11-02 00:05:08
被叶柯榨干!47岁黄晓明大变样,满脸褶子还秃顶,小餐馆吃面太憔悴

被叶柯榨干!47岁黄晓明大变样,满脸褶子还秃顶,小餐馆吃面太憔悴

八星人
2025-11-03 16:17:52
连续三部电影票房为零,中国内地市场被《哪吒2》榨干了

连续三部电影票房为零,中国内地市场被《哪吒2》榨干了

影视高原说
2025-11-01 08:28:10
她这大体格 真的很少见,五官精致绝美,气质非凡,一脸旺夫相

她这大体格 真的很少见,五官精致绝美,气质非凡,一脸旺夫相

阿废冷眼观察所
2025-11-03 14:41:22
东契奇让出一些球权给里夫斯后,湖人的进攻也变得更加流畅了?

东契奇让出一些球权给里夫斯后,湖人的进攻也变得更加流畅了?

稻谷与小麦
2025-11-04 00:33:06
英超最新积分战报:纽卡爆冷被灌3球,曼城升第2,曼联第8名

英超最新积分战报:纽卡爆冷被灌3球,曼城升第2,曼联第8名

足球狗说
2025-11-03 07:58:25
江苏思威博回应产品涉“毒营养土”:涉事人员和产品系冒充

江苏思威博回应产品涉“毒营养土”:涉事人员和产品系冒充

澎湃新闻
2025-11-03 21:46:27
北约威胁抹去莫斯科,普京亮出波塞冬核鱼雷,先拿一国测试下?

北约威胁抹去莫斯科,普京亮出波塞冬核鱼雷,先拿一国测试下?

第一军情
2025-11-03 11:45:03
西部排名又乱了:马刺爆冷输球,湖人高歌猛进,7队排名互换

西部排名又乱了:马刺爆冷输球,湖人高歌猛进,7队排名互换

篮球大视野
2025-11-03 16:54:18
华为Mate新机引起争议,反转把我看傻了

华为Mate新机引起争议,反转把我看傻了

3C毒物
2025-11-03 00:05:19
“治港败类”曾荫权:治理香港7年,为何却在卸任后,获刑20个月

“治港败类”曾荫权:治理香港7年,为何却在卸任后,获刑20个月

卷史
2025-09-15 11:50:59
2025-11-04 00:56:49
卡尔的AI沃茨 incentive-icons
卡尔的AI沃茨
前大厂算法工程师,3家科技公司技术总监|致力打造最系统的Al学习体系,让1万人通过Al提高生产力
144文章数 42关注度
往期回顾 全部

科技要闻

余承东内部信:鸿蒙下一步要实现上亿覆盖

头条要闻

郑丽文公开表态愿意访问大陆100次:要来解决2个问题

头条要闻

郑丽文公开表态愿意访问大陆100次:要来解决2个问题

体育要闻

开拓者官宣召回杨瀚森 队记解析核心原因

娱乐要闻

男导演曝丑闻 蒋欣的含金量还在上升

财经要闻

最新省市GDP:谁在飙升,谁掉队了?

汽车要闻

环比增长28.7% 方程豹品牌10月销量31052辆

态度原创

游戏
家居
本地
健康
公开课

steam恐怖新游开启demo测试:如何证明我是我?

家居要闻

岁月柔情 现代品质轻奢

本地新闻

全网围观,到底多少人被这个野人大学生笑疯了

超声探头会加重受伤情况吗?

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版