网易首页 > 网易号 > 正文 申请入驻

腾讯多模态团队正在进行一系列调整

0
分享至

记者:李昂、吴洋洋

编辑:吴洋洋

第一财经「新皮层」获悉,腾讯多模态团队正在进行一系列调整。

接近腾讯的人士告诉「新皮层」,继7月初麻省理工学院博士、曾在OpenAI与姚顺雨共事过的田永龙加入混元多模态团队,负责多模态理解模型(VLM)的研发并直接向腾讯首席AI科学家姚顺雨汇报,以及混元文生视频和文生图片算法负责人钟钊离职后,混元多模态业务原负责人薄列峰也可能变动,而不久前从可灵离职的高级研究员则于近期回到腾讯,不过他入职的不是混元(TEG,技术工程事业群)的多模态部门,而是腾讯游戏业务(IEG,互动娱乐事业群)的多模态团队。

腾讯在7月24日调整了混元的组织架构,将原本由姚顺雨和薄列峰分别管理的大语言模型和多模态模型部门合并,成立基础模型部,统一由姚顺雨负责。接近腾讯的人士称,田永龙之后可能接手更多工作,成为姚顺雨统领的混元下多模态板块的实际负责人。

这一系列人事和架构调整与混元在多模态方向的成果有限有关。

公开资料显示,,主要负责多模态方向,向腾讯副总裁、时任混元整体项目负责人蒋杰汇报。加入腾讯前,薄列峰是阿里通义实验室视觉负责人。

去年9月和11月,混元先后发布图像生成模型HunyuanImage 3.0和视频生成模型HunyuanVideo 1.5,后者有83亿参数,不具备音画同步的端到端生成能力,即做不到输入提示词后直接一步生成音画一体的视频,也没有解决人物说话口型同步问题。

去年11月至今,混元没有再发布过新的多模态模型。而在此期间,阿里巴巴、字节跳动和可灵先后突破了视频生成的音画一体化能力,并在多模态生成的推理能力上取得进展,其中字节在此期间更新了Seedance 2.0和Seedance 2.5两代模型。

公开资料显示,今年3月钟钊领导的团队与浙江大学联合发布过一个叫OmniWeaving的开源视频生成模型,探索方向也是「理解-生成一体化」,尝试让模型从被动的像素渲染器变成主动的智能生成器,即当用户输入的需求含糊时,模型能主动推理用户意图,从而生成更符合用户需要的视频内容,而不再像过去那样只是将用户输入的语言直接碎片化地翻译成像素。

钟钊与浙大的联合团队在OmniWeaving论文中称,「Seedance2.0(字节)、Kling-3.0(快手)、SORA(OpenAI)、Veo3(Google)已在很大程度上实现了下一代Omni(理解与生成一体化)能力智能视频生成,但底层技术未披露,留下了显著的研究空白。」

OmniWeaving可以被视作混元多模态团队在与Seedance 2.0类似方向上的一次尝试,不过效果与后者存在差距。这个模型也从未正式——以HunyuanVideo的名义——发布。

知乎博主「微卷的大白」测试Seedance、Kling(可灵)和OmniWeaving发现,Seedance和Kling都能在少数抽卡次数下生成自然、大体符合物理规律的视频,而OmniWeaving在抽卡20次后生成的视频仍然极为违反物理规律,视频中的橙子在被刀切开之前就已经分开了。

另一位接近腾讯的人士告诉「新皮层」,今年上半年,腾讯内部测试一款名为WorkRally的漫剧视频创作产品时,产品可调用的多模态模型包括Seedance、可灵、Veo(Google)和HappyHorse(阿里),不包括混元的多模态生成模型。

钟钊不久前在朋友圈发文称「也许即将发布的版本将是我在心爱的HunyuanVideo和HunyuanImage中的最终版本」,言下之意,HunyuanVideo和HunyuanImage可能将有新版本推出。不过7月24日宣布的架构调整为这项发布增加了不确定性。

在腾讯内部,有多个事业部都在尝试从多模态领域中寻求突破,混元只是其中之一。

上述接近腾讯的人士称,IEG已经在内部推出过自己的多模态模型,仍在开发中的一款办公助手中调用的音频生成模型也来自IEG,而非混元。

微信事业群自研的WeLM模型目前还不是个多模态模型,不过其公开招聘信息已在招募多模态预训练、视觉‑语言对齐算法岗位。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
年薪1000万欧!67岁安帅在巴西四面楚歌:战绩糟糕 被多人要求下课

年薪1000万欧!67岁安帅在巴西四面楚歌:战绩糟糕 被多人要求下课

风过乡
2026-11-19 08:04:21
黄仁勋不复职就集体辞职!

黄仁勋不复职就集体辞职!

中国半导体论坛
2026-11-19 21:58:21
玄学提醒:如果一个人还在穿着10年前的衣服,只说明几个问题

玄学提醒:如果一个人还在穿着10年前的衣服,只说明几个问题

木言观
2026-08-01 13:58:35
彻底破防!深圳这场盛会火遍全网,宝岛网友看呆:中国家底真的藏不住了!真的太感慨了!

彻底破防!深圳这场盛会火遍全网,宝岛网友看呆:中国家底真的藏不住了!真的太感慨了!

魔都姐姐杂谈
2026-11-19 08:55:34
别买!基本假的!又一产品大翻车,成本只有 10 元,很多人长期上当

别买!基本假的!又一产品大翻车,成本只有 10 元,很多人长期上当

云居历史
2026-11-20 00:35:53
月销最少仅4台,66亿巨债!扬言造出“中国版宾利”的巨头倒下了

月销最少仅4台,66亿巨债!扬言造出“中国版宾利”的巨头倒下了

云霄纪史观
2026-10-28 04:59:51
董路:中国足球小将不是青训!我不想和30年碌碌无为的行业相提并论

董路:中国足球小将不是青训!我不想和30年碌碌无为的行业相提并论

念洲
2026-11-19 19:50:43
孔蒂揭秘离开国米原因,张康阳曾要求卖掉几乎所有球员

孔蒂揭秘离开国米原因,张康阳曾要求卖掉几乎所有球员

懂球帝
2026-11-19 21:42:55
黄仁勋想回英伟达被打脸,与黄乐早期私密视频曝光

黄仁勋想回英伟达被打脸,与黄乐早期私密视频曝光

壹月情感
2026-11-18 13:49:29
民调:52%的美国人认为民主党在2028年选出的候选人将入主白宫,28%的人认为共和党将获胜

民调:52%的美国人认为民主党在2028年选出的候选人将入主白宫,28%的人认为共和党将获胜

阿尔卑斯瞭望
2026-11-19 18:51:50
首次访华中国当场撤走仪仗队,下马威已给出:态度摆正,想好了再来!

首次访华中国当场撤走仪仗队,下马威已给出:态度摆正,想好了再来!

壁炉公子
2026-11-19 07:25:11
丰盈不是累赘,饱满身姿更显大气

丰盈不是累赘,饱满身姿更显大气

穿的像个人样
2026-11-17 08:01:36
俄军奋力防守仍没能守住,克里米亚大桥的惨状,全世界都看见了

俄军奋力防守仍没能守住,克里米亚大桥的惨状,全世界都看见了

古书奇谈
2026-11-18 15:15:03
阿森纳计划升级:再次求购皇马1.5亿欧维尼修斯;有意3000万欧C罗接班人!

阿森纳计划升级:再次求购皇马1.5亿欧维尼修斯;有意3000万欧C罗接班人!

福酱的小时光
2026-11-19 12:13:33
那不勒斯为德布劳内标价700万欧元,埃因霍温仍有意

那不勒斯为德布劳内标价700万欧元,埃因霍温仍有意

竞技风云录
2026-11-20 01:41:16
红果短剧再踩雷,一切都结束了!

红果短剧再踩雷,一切都结束了!

广告创意
2026-11-18 18:38:58
ESPN爆料詹姆斯向76人教练组提出要求,遭詹姆斯社媒直接开怼

ESPN爆料詹姆斯向76人教练组提出要求,遭詹姆斯社媒直接开怼

夜白侃球
2026-11-19 19:40:55
朋友面试谈薪报价2w,HR非得压到1.9,还反问他:你就差这1000块钱?后来背调时问了他前同事十几个问题,对方最后直接挂了

朋友面试谈薪报价2w,HR非得压到1.9,还反问他:你就差这1000块钱?后来背调时问了他前同事十几个问题,对方最后直接挂了

纯洁的微笑
2026-11-18 21:51:39
CCTV5直播!22点,U17世界杯:中国队时隔21年首秀,最新消息传来

CCTV5直播!22点,U17世界杯:中国队时隔21年首秀,最新消息传来

大秦壁虎白话体育
2026-11-19 20:33:32
姚笛分享近况,住大房子连凳子都是LV的,但并不开心焦虑到躯体化

姚笛分享近况,住大房子连凳子都是LV的,但并不开心焦虑到躯体化

八怪娱
2026-11-18 09:29:26
2026-11-20 01:56:49
第一财经资讯 incentive-icons
第一财经资讯
第一财经官方账号
273070文章数 624077关注度
往期回顾 全部

科技要闻

提前三个月加薪!英伟达全员会稳军心

头条要闻

李在明乘机返回韩国 发文:感谢中国热情接待

头条要闻

李在明乘机返回韩国 发文:感谢中国热情接待

体育要闻

文班亚马也防不住这"巨兽" 无奈吐槽:悲哀

娱乐要闻

后会友期 文吉儿公然怼谈话老师陈晓楠

财经要闻

Anthropic的算力赌局

汽车要闻

方程豹钛9实测 堪称比亚迪最强混动的DMS到底怎么样?

态度原创

旅游
亲子
本地
教育
公开课

旅游要闻

深圳游客打卡山城!重庆文旅集团秋假专属礼包获好评,大家感叹不虚此行

亲子要闻

每个男孩妈妈都有一段很难走的路

本地新闻

乌兰察布:以前种土豆,现在种Token

教育要闻

不另起炉灶,不做加法,一地用6件日常小事破解研修痛点

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版