网易首页 > 网易号 > 正文 申请入驻

阿里巴巴发布Qwen3.8-Omni-Flash 多项表现逼近Gemini 3.8 Flash

0
分享至

阿里巴巴旗下Qwen团队近日发布新一代原生全模态模型Qwen3.8-Omni-Flash,进一步将音频、视频理解与AI智能体能力结合起来。该模型支持文本、图像、音频和视频四种输入形式,并提供100万Token上下文窗口。与上一代Qwen3.5-Omni-Plus相比,Qwen官方称其在29项基准测试中的平均成绩提升超过25%,同时大幅降低了音频和音视频处理成本。


Qwen3.8-Omni-Flash最大的变化之一,是其并非简单地将语音识别、图像识别等能力拼接在一起,而是从模型层面原生处理不同类型的信息。阿里巴巴希望借此让模型不只是“看懂”或“听懂”音视频内容,而是能够在理解这些信息之后进一步规划任务、调用工具并完成实际工作。

在音频能力方面,Qwen3.8-Omni-Flash的表现尤其突出。按照Qwen公布的数据,该模型在部分音频基准测试中已经超过Gemini 3.8 Flash。例如在WildClawBench-MM多模态工具调用测试中,Qwen3.8-Omni-Flash获得71.0分,而Gemini 3.8 Flash为58.9分;在DailyOmni测试中,Qwen为85.1分,Gemini为84.0分;在SpotSoundBench中,两者分别为67.2分和39.7分;MMAU测试中则为81.8分和76.9分。

多说话人会议语音识别同样是此次升级的重点。Qwen公布的AliMeeting测试数据显示,Qwen3.8-Omni-Flash的说话人错误率DER为3.35,带说话人归属的词错误率cpWER为17.18,而上一代Qwen3.5-Omni-Plus分别为88.11和89.61。这意味着新模型在这一测试中的变化幅度非常明显。

不过,Qwen3.8-Omni-Flash并不是在所有项目上都领先Gemini 3.8 Flash。例如在AgenticVBench测试中,Gemini 3.8 Flash获得45.0分,Qwen为36.8分;OmniGAIA中则分别为78.6分和74.0分。在部分视频理解测试中,Gemini同样保持优势。因此,Qwen所强调的“逼近Gemini”更多体现在整体音频和音视频能力,而并非意味着在所有多模态项目中全面领先。

Qwen3.8-Omni-Flash的另一项重要变化是价格。Qwen表示,与此前的模型相比,其音频输入的估算成本每小时下降超过98%,音频加视频输入的成本每小时下降超过93%。按照官方计算方式,所谓“每小时”成本是以两分钟素材的处理价格乘以30计算,其中视频采用720p、每秒1帧的输入条件。

目前阿里云公布的国际区域价格为每百万Token输入0.15美元,命中缓存的输入Token为0.016美元,每百万输出Token为0.47美元。中国大陆以及部分其他区域的价格还会有所不同。由于音频和视频可以直接作为模型输入,这种定价结构尤其适合会议记录、长音频分析、视频审核、字幕生成以及大量媒体内容处理等场景。

100万Token上下文窗口则进一步放大了这一优势。Qwen3.8-Omni-Flash最大输入长度接近99.2万Token,在思考模式下最大输入长度约为98.4万Token,最大输出长度达到13.1万Token。这意味着开发者可以将规模非常大的音频或视频内容直接交给模型处理,而不必像过去一样频繁切片、抽帧,再通过多个模型分别完成语音识别、视觉理解和文本推理。

阿里云的官方资料显示,Qwen3.8-Omni-Flash能够处理113种语言和方言的音频输入,并支持空间音频分析。通过相关参数,模型可以处理双声道立体声以及四声道空间音频。同时,该模型支持函数调用、联网搜索、上下文缓存等能力,可以被直接用于更加复杂的智能体工作流。

从应用方向来看,Qwen团队此次重点强调的是“智能体交付”。例如,模型可以分析长视频、定位其中的关键内容,并进一步调用工具完成视频编辑、内容整理、会议总结、字幕生成等任务。Qwen还公布了面向多模态智能体开发的Qwen-MM-Plugins,并计划推出Qwen-Live-Harness,以帮助开发者进一步构建基于音视频输入的智能体应用。

与上一代Qwen3.5-Omni相比,这次升级的重点因此并不只是提高传统意义上的识别准确率,而是试图改变音视频AI的使用方式。过去的多模态应用通常需要先把视频抽帧、音频转写,再把不同结果交给语言模型处理;Qwen3.8-Omni-Flash则试图将这些环节尽可能统一到一个原生全模态模型中,并利用100万Token上下文直接处理更长的原始内容。

Qwen3.8-Omni-Flash目前通过阿里云百炼提供服务,支持北京、新加坡、中国香港、日本东京、德国法兰克福和美国弗吉尼亚等区域。该模型本身并未像部分Qwen此前的模型那样直接开放权重,阿里巴巴此次主要开放的是配套的多模态插件和相关开发工具。

整体来看,Qwen3.8-Omni-Flash此次更新的核心并不只是模型跑分提升,而是同时压低音视频处理成本、扩大上下文规模,并将音视频理解与工具调用结合起来。尤其是超过98%的音频输入成本降幅,如果实际使用成本能够达到官方测算水平,将使长时间会议录音、播客、直播和视频素材的大规模自动分析变得更加容易,也进一步加剧了Qwen与Google Gemini等多模态模型之间的竞争。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
缅北蛇蝎美人明珍珍,用老虎笼折磨受害人,她残忍到无法想象

缅北蛇蝎美人明珍珍,用老虎笼折磨受害人,她残忍到无法想象

富强巨靠谱
2025-02-26 09:21:46
特朗普将向硅谷大佬颁奖 马斯克等人斩获科技领域最高荣誉

特朗普将向硅谷大佬颁奖 马斯克等人斩获科技领域最高荣誉

财联社
2026-10-08 09:59:23
答应签约又反悔!NBA全明星后卫婉拒CBA合同

答应签约又反悔!NBA全明星后卫婉拒CBA合同

国篮会自强
2026-10-08 10:05:03
范波任江苏省委副书记,边学文任江苏省委常委、省纪委书记

范波任江苏省委副书记,边学文任江苏省委常委、省纪委书记

澎湃新闻
2026-10-08 11:44:31
广东万年青制药:东航客舱冲突事件涉事旅客非董事长欧先涛

广东万年青制药:东航客舱冲突事件涉事旅客非董事长欧先涛

澎湃新闻
2026-10-07 16:54:03
柯志恩曾说:去过台湾的大陆人,回去后不会再提统一、更不提武统

柯志恩曾说:去过台湾的大陆人,回去后不会再提统一、更不提武统

探索新高度
2026-09-27 05:33:11
爆冷才两小时,孙颖莎发言句句破防,想退赛,央视其实早预料到了

爆冷才两小时,孙颖莎发言句句破防,想退赛,央视其实早预料到了

浩舞纆画
2026-10-08 11:20:56
“再宠下去,你女儿33岁都嫁不出去”,爸爸喂饭视频火了,外人不给面子

“再宠下去,你女儿33岁都嫁不出去”,爸爸喂饭视频火了,外人不给面子

世界圈
2026-10-02 21:25:54
安理会举行联合国秘书长遴选第五轮意向性投票

安理会举行联合国秘书长遴选第五轮意向性投票

新华社
2026-10-08 01:30:05
第一批国庆返程的油车车主,优越感被彻底击碎

第一批国庆返程的油车车主,优越感被彻底击碎

娱乐圈的笔娱君
2026-10-07 13:02:41
台海局势升温!两岸舰船对峙中美外长通话,中方严肃表明态度

台海局势升温!两岸舰船对峙中美外长通话,中方严肃表明态度

潋滟晴方DAY
2026-10-07 16:10:58
他当爸爸了?他和胖冰的过往,还有人记得吗?

他当爸爸了?他和胖冰的过往,还有人记得吗?

BenSir本色说
2026-10-07 22:06:36
与王皓分手后,她拿世界冠军退役嫁老乡,陈梦当伴娘,今儿女双全

与王皓分手后,她拿世界冠军退役嫁老乡,陈梦当伴娘,今儿女双全

娱圈办事处
2026-10-07 15:20:12
2026年的6位诺奖得主,到底发表了多少篇CNS?

2026年的6位诺奖得主,到底发表了多少篇CNS?

必记本
2026-10-07 22:48:02
不要小看了老美,美国在对华政策上,基本可以说没多大失误,他们没压制住中国的崛起那是因为中国这发展路子太独特了,超出了他们的理解

不要小看了老美,美国在对华政策上,基本可以说没多大失误,他们没压制住中国的崛起那是因为中国这发展路子太独特了,超出了他们的理解

扶苏聊历史
2026-10-07 15:43:46
女子连麦张雪哭诉“男友进ICU”要退车!企业一查:人在车行提车,诊断书写的是骨折

女子连麦张雪哭诉“男友进ICU”要退车!企业一查:人在车行提车,诊断书写的是骨折

听心堂
2026-10-08 12:12:14
蔡康永事件再升级,遭官媒批评,陶晶莹为其发声,网友:这是补刀

蔡康永事件再升级,遭官媒批评,陶晶莹为其发声,网友:这是补刀

呼呼历史论
2026-10-07 20:57:15
一个奇怪现象 : 为何网上失业哀鸿遍野 , 现实中大家都按部就班的工作

一个奇怪现象 : 为何网上失业哀鸿遍野 , 现实中大家都按部就班的工作

青史卷中人
2026-10-03 02:55:17
一定要告诉孩子:读书为什么要“拼命”?不是为了考第一,是为了人生有退路

一定要告诉孩子:读书为什么要“拼命”?不是为了考第一,是为了人生有退路

好爸育儿
2026-10-06 19:02:20
凌晨于北京离世?同时交往8个男友?75岁刘晓庆私生活谣言多离谱

凌晨于北京离世?同时交往8个男友?75岁刘晓庆私生活谣言多离谱

林轻吟
2026-10-08 09:37:18
2026-10-08 13:24:49
cnBeta.COM incentive-icons
cnBeta.COM
提供IT行业即时资讯
71943文章数 70327关注度
往期回顾 全部

科技要闻

微软新Surface来了,2599美元起

头条要闻

女子买房多年不知客厅楼板上方有座坟 原房主联系不上

头条要闻

女子买房多年不知客厅楼板上方有座坟 原房主联系不上

体育要闻

从骑马舞到开口全中文 德约在北京不止七冠

娱乐要闻

给吴奇隆点赞的同时,再看蔡康永事件

财经要闻

美联储会议纪要:年内或将再上调利率一次

汽车要闻

智能化再提升 2027款东风标致、东风雪铁龙新车更人性化了

态度原创

教育
艺术
旅游
健康
手机

教育要闻

572个中学生票选最伤人的一句话,竟是父母这句口头禅

艺术要闻

柳州轻轨梦碎了,砸186亿换来一道城市伤疤,未来该怎么办?

旅游要闻

超62万人次!南京江宁解锁乡村旅游最火的打开方式

刷酸祛痘,为什么有人翻车?

手机要闻

阶跃首款大模型原生智能体手机定档!STEPX Neo官宣10月13日发布

无障碍浏览 进入关怀版