网易首页 > 网易号 > 正文 申请入驻

腾讯、阿里、阶跃星辰入局,视频生成模型掀起开源潮

0
分享至

大模型开源潮从文本模型蔓延到了视频生成领域。2月25日,阿里巴巴开源了万相2.1视频生成模型,3月6日,腾讯开源图生视频模型,阶跃星辰也计划在本月开源图生视频模型。

据腾讯介绍,新开源的图生视频模型总参数量130亿,适用于写实视频制作、动漫角色制作生成等,开源内容包含权重、推理代码和LoRA训练代码。用户上传一张图片,并简短描述希望画面如何运动、镜头如何调度,就能生成5秒短视频。用户也可以输入文字或音频,让图片中的人物对口型说话或唱歌。

腾讯展示的视频生成案例包括爱因斯坦吃苹果、梵高喝红酒、机械马走动、虚拟人物念绕口令等。从演示视频看,视频中的主体运动较为流畅,对口型也比较真实。

2月,阿里开源的万相2.1视频生成模型则有14B(B为10亿)和1.3B两个参数规格,万相2.1的特点包括支持无限长1080P视频的高效编解码,以及首次实现中文文字视频生成功能。

就视频生成的成熟度和开源的作用,腾讯混元多模态生成技术负责人凯撒去年12月接受第一财经等媒体采访时表示,视频生成开源生态不是很成气候,最大的问题是开源的视频生成底模(基座模型)与闭源差距太大。视频生成所需算力、数据消耗量和图像生成相比是数量级的差距,业内不想把自己花大成本做出来的模型开源出来。而在这种闭门造车的情况下,很多人没有用到最好的模型,混元于是在去年12月开源了文生视频模型。

此外,也有业内人士告诉记者,视频生成模型的技术路径未完全清晰,行业还在摸索。在技术打磨阶段,开源也能推动行业进步。

记者留意到,随着近期多家大模型厂商推动开源,在能力较突出的视频生成大模型中,开源模型已占有一席之地。记者在视频生成模型评测体系VBench榜单看到,万相2.1模型目前列该榜单第一,总分86.22%,超过闭源的Sora。除此之外,排名前20的模型中还有另外6款模型标注为开源模型。腾讯去年12月推出的HunyuanVideo位列第12位,智谱旗下的CogVideoX1.5-5B位列第15位,这两款均是开源模型。而在该榜单第20名至第50名中,开源模型的数量则远超闭源模型。

图像生成模型作为图生视频模型的基础,记者还从香港大学经管学院获悉,该学院今日发布了《人工智能模型图像生成能力综合评测报告》。在新图像生成内容质量(包括图文一致性、美感等维度)方面,字节即梦AI位列第一,在该榜单前20名内,包括DALL-E3、Hunyuan-DiT在内的多个模型是开源模型。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
2-0完胜4届大满贯冠军,世界第一强势晋级法网女单八强

2-0完胜4届大满贯冠军,世界第一强势晋级法网女单八强

凌空倒钩
2026-06-02 07:20:59
体检报告出现这几个字,距离癌症只有一步之遥!别等得癌了才后悔

体检报告出现这几个字,距离癌症只有一步之遥!别等得癌了才后悔

健康之光
2026-06-01 08:56:18
割四赔五风波升级,崔培军给员工发钱带薪收麦,评论区出奇一致

割四赔五风波升级,崔培军给员工发钱带薪收麦,评论区出奇一致

阿凫爱吐槽
2026-06-03 03:54:38
6300万欧加盟1年就想走?18岁的他正寻找信任

6300万欧加盟1年就想走?18岁的他正寻找信任

慢享生活集
2026-06-03 01:48:41
文班亚马和唐斯交手6次,唐斯场均19.2分,而文班亚马是这种数据

文班亚马和唐斯交手6次,唐斯场均19.2分,而文班亚马是这种数据

林子说事
2026-06-02 09:08:54
15万亿重磅落地!中国或将成全球首个城市更新王国,有房的都笑了

15万亿重磅落地!中国或将成全球首个城市更新王国,有房的都笑了

混沌录
2026-06-02 22:37:48
印度拟购114架“阵风”战机,军方称必要时准备“辛杜尔行动2.0”

印度拟购114架“阵风”战机,军方称必要时准备“辛杜尔行动2.0”

澎湃新闻
2026-06-02 19:30:33
张雪机车4848万元购得新生产基地

张雪机车4848万元购得新生产基地

财闻
2026-06-02 15:11:24
王鹤棣直播痛哭,情绪崩溃,让粉丝心疼不已!

王鹤棣直播痛哭,情绪崩溃,让粉丝心疼不已!

小椰的奶奶
2026-06-03 00:50:23
24小时已过,普京政府准时断供,航油不卖中国,欧盟启动应急方案

24小时已过,普京政府准时断供,航油不卖中国,欧盟启动应急方案

云上乌托邦
2026-06-02 17:15:44
嘉宾晒奚梦瑶婚礼第三套造型,白色裙搭配一身珍珠,不浮夸很漂亮

嘉宾晒奚梦瑶婚礼第三套造型,白色裙搭配一身珍珠,不浮夸很漂亮

童叔不飙车
2026-06-02 22:17:06
震惊!一高考家长要物业驱夜鸟,网友:温度高,是否把太阳射下来

震惊!一高考家长要物业驱夜鸟,网友:温度高,是否把太阳射下来

火山詩话
2026-06-02 15:21:11
打脸!巴萨 8000 万核心刚表忠心,转头就接近加盟阿森纳

打脸!巴萨 8000 万核心刚表忠心,转头就接近加盟阿森纳

澜归序
2026-06-02 07:29:35
深挖 | 纳塔莉:从贫民窟水果姐到LV“太子妃”,44岁的人生太彪悍!

深挖 | 纳塔莉:从贫民窟水果姐到LV“太子妃”,44岁的人生太彪悍!

新民周刊
2026-06-02 10:16:41
上海城投变了,杭迎伟没有退路

上海城投变了,杭迎伟没有退路

新浪财经
2026-06-02 16:46:12
日本汽车全线爆雷!七大车企集体崩盘

日本汽车全线爆雷!七大车企集体崩盘

象视汽车
2026-06-03 07:00:07
演员魏宗万去世,享年89岁,俩女儿发讣告,最后露面剃光头发暴瘦

演员魏宗万去世,享年89岁,俩女儿发讣告,最后露面剃光头发暴瘦

180视角
2026-06-02 21:33:29
有资格续签4年1.79亿!名记:哈滕大概率会留在雷霆

有资格续签4年1.79亿!名记:哈滕大概率会留在雷霆

体坛周报
2026-06-02 09:45:20
直到薛桂生成封导接班人,才知封导为何一夜白头,退出剧团工作

直到薛桂生成封导接班人,才知封导为何一夜白头,退出剧团工作

容妃
2026-06-01 13:34:28
关门贴告示也没用!跑男工作人员“强闯”咖啡店吃喝留垃圾

关门贴告示也没用!跑男工作人员“强闯”咖啡店吃喝留垃圾

南万说娱26
2026-06-02 10:54:26
2026-06-03 07:35:00
第一财经资讯 incentive-icons
第一财经资讯
第一财经官方账号
255011文章数 622594关注度
往期回顾 全部

科技要闻

烧掉千亿后,美团、阿里、京东谁先止血?

头条要闻

演员魏宗万去世 曾在94版《三国演义》中饰演"司马懿"

头条要闻

演员魏宗万去世 曾在94版《三国演义》中饰演"司马懿"

体育要闻

1米74的业余联赛替补,在英超踢中卫

娱乐要闻

奚梦瑶何猷君补办婚礼超幸福

财经要闻

智元和宇树的“暗战”愈演愈烈

汽车要闻

星途神秘新车轮廓曝光 又一款性能SUV要来了?

态度原创

家居
本地
时尚
亲子
房产

家居要闻

流线型轮廓 包容多元身形

本地新闻

用剪纸的方式,打开江苏扬州

蓝色系下装看着清爽不闷,裤子、裙子都凉快,随便穿都不出错

亲子要闻

不少婴儿孕妇中招,央视再曝新毒物!长期用会致癌,已流窜至全国

房产要闻

5200巨量投资曝光!未来五年,海南格局大变!

无障碍浏览 进入关怀版