网易首页 > 网易号 > 正文 申请入驻

阿里Qwen3.5-Omni发布:音视频交互新突破,全模态能力登顶全球

0
分享至

来源:雷科技


雷科技AI硬件组 |

编辑:小林同学 | 监制:罗超

全球全模态大模型竞赛迎来新变数。

3月30日,阿里巴巴正式推出千问系列新一代全模态大模型Qwen3.5-Omni。

这款模型在音视频理解、跨模态推理、实时交互等215项第三方评测中拿下SOTA(State of the Art),直接对标并超越了谷歌Gemini-3.1 Pro的诸多核心指标。


与市面上多数“拼接式”多模态方案不同,Qwen3.5-Omni采用混合注意力MoE架构,在海量文本、视觉数据及超过1亿小时的音视频素材上完成了端到端的原生预训练。

这意味着,Qwen3.5-Omni并非简单地将语音转文字再处理,而是真正具备对视频画面、人物情绪、对话逻辑的深层次理解能力。

据官方披露,Qwen3.5-Omni支持113种语言及方言的语音识别(包括毛利语、海南方言等小语种),以及36种语言的语音合成。在考察抗噪能力的WenetSpeech测试中,其错误率远低于Gemini;而在Multi-Lingual 30语言语音生成评测中,表现同样压过Gemini-2.5-Pro-TTS一头。


更值得关注的是其实时交互的“情商”——Qwen3.5-Omni能精准区分用户的有效指令与随口附和,自主判断是否需要调用工具获取实时信息(如天气查询),对话流畅度已接近真人水平。

如果说年初爆火的Vibe Coding还停留在文字/图片生成代码阶段,Qwen3.5-Omni则直接将这一概念推进到了音视频维度。

用户只需打开摄像头,对着草图或实物口述需求,哪怕是包含复杂产品逻辑的描述,模型也能直接输出带UI界面的产品原型代码。有意思的是,这一能力并非人工刻意调教的结果,而是模型在扩展原生多模态能力过程中自然涌现的副产品。

这种所见即所得的编程方式,对于产品经理、设计师乃至普通用户而言,意味着从想法到原型的路径被压缩到了分钟级。

除此之外,Qwen3.5-Omni在专业内容生产领域同样展现出降本增效的潜力。

模型可对视频画面主体、人物关系、情绪起伏进行像素级拆解,自动完成章节切片与时间戳标注,支持超过10小时的长音频输入。以往需要数小时的人工后期梳理工作,如今可被缩短至秒级。短视频平台、直播平台、内容审核机构、游戏厂商等内容密集型行业,或将成为首批受益者。

难能可贵的是,阿里在商业化路径上延续了千问系列的高性价比策略。

目前,Qwen3.5-Omni已通过阿里云百炼平台开放Plus、Flash、Light三档API接口,普通用户也可在Qwen Chat免费体验。定价方面,每百万Tokens输入价格不到0.8元人民币,不足Gemini-3.1 Pro的十分之一。

据第三方数据,千问系列目前稳居中国企业级大模型调用市场头把交椅,覆盖互联网、金融、消费电子及汽车等行业的超100万家企业客户。

过去半年,市场注意力被OpenAI和谷歌多模态迭代牵引,国内厂商多被质疑为跟随者。但这次,阿里在音视频理解、方言识别和实时交互等细分维度实现了反超,且选择了完全开放的API策略。这或许正是中国AI企业在全球化竞争中找到的有效路径:不追求在所有榜单上霸榜,但在特定高价值场景建立不可替代性。

如今大模型技术门槛被抹平,剩下的就是执行力的较量了。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
日本全面叫停种植牙?种牙潜藏的风险与后遗症,一次为你讲明白

日本全面叫停种植牙?种牙潜藏的风险与后遗症,一次为你讲明白

垚垚分享健康
2026-04-11 08:51:57
销量碾压,利润惨败!为何3000 万辆国产车的利润不及丰田的一半?

销量碾压,利润惨败!为何3000 万辆国产车的利润不及丰田的一半?

音乐时光的娱乐
2026-04-27 10:57:32
恒大集团与特朗普合作往事

恒大集团与特朗普合作往事

地产微资讯
2026-04-24 18:09:33
博主不喜欢游戏出现大雷美女!称喜欢这种的人太可悲

博主不喜欢游戏出现大雷美女!称喜欢这种的人太可悲

游民星空
2026-04-27 11:06:30
华为又一款新品上市,4月25日,正式开售!

华为又一款新品上市,4月25日,正式开售!

科技堡垒
2026-04-25 00:21:56
日本男老师为满足欲望,竟偷拍高中生更衣照?日网:……被拍的竟是男生!?

日本男老师为满足欲望,竟偷拍高中生更衣照?日网:……被拍的竟是男生!?

日本通
2026-04-27 10:31:34
一个家庭最大的灾难,不是贫穷而是父母六七十岁,还深陷3种状态

一个家庭最大的灾难,不是贫穷而是父母六七十岁,还深陷3种状态

游戏收藏指南
2026-04-27 13:02:43
河北小伙娶乌克兰美女,结婚11年后,妻子出轨,如今怎么样了

河北小伙娶乌克兰美女,结婚11年后,妻子出轨,如今怎么样了

番外行
2026-03-13 11:01:27
中俄朝3国都看懂了,打美军航母先放一放:必须先打日本导弹基地

中俄朝3国都看懂了,打美军航母先放一放:必须先打日本导弹基地

杰丝聊古今
2026-04-27 06:20:36
作风狠辣!利物浦母公司FSG再度铁血换帅,整套教练组全员裁掉

作风狠辣!利物浦母公司FSG再度铁血换帅,整套教练组全员裁掉

夜白侃球
2026-04-27 08:58:50
世界倒退最快的国家:从全球第六到一贫如洗,只用了短短五年时间

世界倒退最快的国家:从全球第六到一贫如洗,只用了短短五年时间

明天见灌装冰块
2026-04-15 07:21:32
何猷君家保姆买彩票中了3000万,保姆乐坏了,拒不辞职!转头第一句话是:你想要什么,我都买给你

何猷君家保姆买彩票中了3000万,保姆乐坏了,拒不辞职!转头第一句话是:你想要什么,我都买给你

美芽
2026-04-21 18:21:15
从1-4惨败到主帅瘫坐教练席!泰山换帅选谁?答案就在这几个人里

从1-4惨败到主帅瘫坐教练席!泰山换帅选谁?答案就在这几个人里

曹老师评球
2026-04-26 20:05:54
华国锋题字“为人民服务”,颜楷风格引发热议!

华国锋题字“为人民服务”,颜楷风格引发热议!

书画相约
2026-04-27 08:26:50
为了给前NBA状元霍华德生孩子,篮球宝贝壮壮究竟付出了多大代价

为了给前NBA状元霍华德生孩子,篮球宝贝壮壮究竟付出了多大代价

罗氏八卦
2026-03-10 18:00:03
李提香:没有人愿意输球,如果保持这种状态就不会赢得胜利

李提香:没有人愿意输球,如果保持这种状态就不会赢得胜利

懂球帝
2026-04-26 21:58:39
太尴尬!网传西安年入百万小伙因坚持婚检,与女友谈崩,真相扎心

太尴尬!网传西安年入百万小伙因坚持婚检,与女友谈崩,真相扎心

火山詩话
2026-04-25 18:24:26
遇到这些奇葩的“中国好邻居”,只想卖房走人,给大家晒晒

遇到这些奇葩的“中国好邻居”,只想卖房走人,给大家晒晒

巢客HOME
2026-04-27 04:05:03
甩出6个停火条件后,伊朗外长急访普京,给特朗普留足考虑时间

甩出6个停火条件后,伊朗外长急访普京,给特朗普留足考虑时间

大中国
2026-04-27 12:35:11
别人对你说“咱俩加个微信”,千万别说 “您扫我还是我扫您?” 高情商的人这样做

别人对你说“咱俩加个微信”,千万别说 “您扫我还是我扫您?” 高情商的人这样做

德鲁克博雅管理
2026-04-23 17:02:27
2026-04-27 13:56:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
3021605文章数 6949关注度
往期回顾 全部

科技要闻

打1折!DeepSeek输入缓存降价

头条要闻

白宫枪手路径首披露:房卡放行 在隔间组枪直冲宴会厅

头条要闻

白宫枪手路径首披露:房卡放行 在隔间组枪直冲宴会厅

体育要闻

最抽象的天才,正在改变瓜迪奥拉

娱乐要闻

《奔跑吧14》刚播就把一手好牌打稀烂

财经要闻

DeepSeek融资、字节加码 AI开始真烧钱了

汽车要闻

在不确定中寻找确定性:大众汽车的中国解法

态度原创

本地
家居
亲子
艺术
军事航空

本地新闻

云游中国|逛世界风筝都 留学生探秘中国传统文化

家居要闻

江景风格 流动的秩序

亲子要闻

你听懂这3句话,躺平的孩子很快就能好起来了!

艺术要闻

你绝对想不到,摄影能让她成为女神!

军事要闻

伊朗总统:不会在压力、威胁下进行谈判

无障碍浏览 进入关怀版