网易首页 > 网易号 > 正文 申请入驻

字节跳动Seed Audio、阿里千问TTS同日“亮剑”,语音大模型的竞争从云端API向端侧设备迁移

0
分享至

语音大模型迭代速度明显加快,从最初的基础语音合成到实时对话,再到如今具备情绪表达的拟人化语音,技术边界不断扩展。

在此背景下,互联网头部厂商均在押注语音赛道。2026年7月20日,字节跳动Seed团队正式发布音频创作模型Seed Audio 1.0。据字节跳动方面介绍,该模型面向完整声音场景,在统一框架下联合建模人声、音效和环境声等多种音频要素,端到端完成影视级音频创作。

也是在7月20日,阿里千问推出语音合成大模型Qwen-Audio-3.0-TTS(以下或简称阿里千问TTS)。

《每日经济新闻》记者了解到,语音能力已成为大模型厂商的必争之地,一方面语音是人机交互最自然的入口,另一方面该能力也是内容生产的核心基础设施以及多模态大模型闭环中不可或缺的一环。而在此赛道,竞争的维度正在从声音质量转向体系化的作战能力。

从“语音合成”到“音频创作”

《每日经济新闻》记者注意到,Seed Audio 1.0带来的最核心变化,是交付形态的改变。过去,完整音频内容的生产通常依赖多环节拼接,生成人声后再对音效和环境声另外生成,最后人工混音对齐。Seed Audio 1.0则可以直接输出一段完整可用的声音作品。

技术上,字节跳动训练了一个通用声学编码器,将人声、音效、环境声视为同一声音场景的组成部分,映射到统一的声学表征中,而非作为独立任务分别编码。基于这种统一建模方式,模型能够更自然地组织角色语气、背景氛围和声音节奏,输出更接近完整的作品。

字节跳动方面表示,这也是将其定义为“音频创作模型”而非语音合成模型的原因。具体能力体现在三个维度:一是多要素统一编排,一条prompt(提示词)即可编排带有特定情绪的对白、关键音效和环境声,并按时间线控制进场;二是音色风格可控且长时稳定,支持文本与参考音频输入,单次可生成约两分钟音频,并可在此基础上继续延长,同时保持角色音色与表达方式一致;三是多语种零样本生成,支持20余种语种,使声音在节奏、重音、停顿与情绪等细节上贴合目标语言的表达习惯。

就字节跳动语音产品的演进路径看,这一步跃迁有清晰的铺垫。2025年1月,豆包实时语音大模型上线,主打端到端语音对话;同年6月,语音播客模型发布,可将文本自动转成双人对话形式的播客;同年10月,语音合成模型2.0和声音复刻模型2.0推出,重点提升情感表达和复刻精度。

日前,在接受《每日经济新闻》记者采访时,快思慢想研究院院长、特邀评论员田丰将其形容为音频生产流水线的“合并报表”,模型把原本分属配音、作曲、拟音、混音四个工种的工作,压缩进一次模型推理。

在田丰看来,这和英国人工智能公司ElevenLabs的路径有本质区别,ElevenLabs的Studio是“分别生成、手动组合”,TTS、音乐、音效是三个独立API(应用程序编程接口),用户需要在时间轴上逐轨对齐,Seed Audio 1.0试图用一次推理替代这条链路的前几个环节。技术上的核心难点,在于长时音色一致性和音色与风格的解耦控制,这两点决定了模型能否从Demo(示范)级走向生产级。

不过,田丰也提醒,成本优势仍需实测验证。其表示,当前,AI配音仍集中在短视频旁白、有声书、课件等对质量容忍度较高的场景;在影视、广告等高端音频中,甲方仍优先选择真人声音。对于长篇有声书这类长音频场景,按分钟计费的成本结构能否低于传统配音叠加音乐授权、音效库的组合成本,还需要进一步验证。

语音能力已成“资格赛”门槛

2026年,从字节跳动的大模型迭代节奏来看,Seed Audio 1.0诞生背后是其越来越清晰的全模态布局轮廓。

2026年2月,字节跳动发布Seedance 2.0,同年4月开放模型API;同年6月,该模型再一次升级,Seedance 2.5面世,同时还发布了Seedream 5.0 Pro,在数月内完成全模态能力升级。与此同时,豆包大模型系列的迭代,也始终围绕推理能力和多模态理解等能力持续升级。

这种全栈布局的优势在于协同。视频生成需要配音,图文内容可以转语音,智能体需要语音交互接口。当所有模态的模型都掌握在手中,自然会提升跨模态应用的打通效率。

事实上,押注语音赛道的大厂,不止字节跳动一家。就在Seed Audio 1.0发布的同一天,即2026年7月20日,阿里千问推出Qwen-Audio-3.0-TTS,同样瞄准下一代语音合成。

阿里千问TTS包含面向实时交互的Flash版本(首包延时300ms级别)和面向高质量生成的Plus版本,在细粒度标签控制、“freestyle”指令遵循、多语种与方言覆盖以及复杂声学鲁棒性等方面实现系统性提升。阿里千问TTS发布后,还登上了“Artificial Analysis”全球语音合成榜单首位。

《每日经济新闻》记者注意到,阶跃星辰则走了另一条路线。2026年4月发布的StepAudio 2.5 TTS主打语境感知能力,首次把语境理解引入语音生成全流程,通过全局语境控制定义整段语音的情绪基调、角色状态和场景氛围,发布约一个月后即跻身Artificial Analysis榜单前三。

由此来看,语音合成的技术竞争已经进入精细化比拼阶段,各家在数据、算法和工程化上持续投入。

在田丰看来,三家解决的,其实是三个不同层级的问题:Seed Audio的建模对象是“场景”,优化目标是多要素编排的协调性,解决批量生产音频内容的问题;阿里千问TTS的建模对象是“单人语音表演”,优化目标是单条语音的表现力,解决如何让合成语音更像专业配音演员的问题;StepAudio 2.5 TTS的建模对象是“实时对话中的人”,核心是副语言感知,解决AI在实时对话中如何更像真人的问题。

那么,头部厂商为什么都在加码语音能力?

《每日经济新闻》记者了解到,原因在于交互入口的争夺。当下,不论是智能助手、车载系统还是智能家居都离不开高质量语音交互。但田丰指出,在“文本-图像-视频-音频”的多模态矩阵中,语音是技术链条最长的一环,同时涉及ASR、NLU、推理、TTS四个环节,每个环节的延迟叠加直接决定用户体验。

而这一战场还在延伸。7月15日,阿里千问宣布将集成至Apple智能设备,为iOS、iPadOS、macOS和visionOS的中国用户提供服务。对此,田丰认为,这意味着语音大模型的竞争,正从云端API向端侧设备渗透,对延迟和功耗的要求会更加极端。

从产业视角看,田丰进一步指出,还有一个被忽略的背景,AI公司的估值逻辑正在从模型能力转向多模态覆盖度,没有语音能力的大模型公司,可能会在下一轮融资中处于结构性劣势,语音已经从锦上添花变成“资格赛”门槛。

语音大模型的竞赛还远没到终局,技术路线仍在分化,应用场景也在持续探索。但田丰判断,单纯比音质的窗口期已经结束,价格和融合深度才是下一轮淘汰赛的筛子。真正的竞争转折点,在于谁能率先实现语音理解和语义推理在同一个神经网络内端到端联合训练,而非“先想清楚再说出来”的两段式流程。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
2026年上调退休人员养老金通知,正式下发了么?算清三笔民生账!

2026年上调退休人员养老金通知,正式下发了么?算清三笔民生账!

白昼说故事
2026-07-22 09:52:05
网传清华NLP实验室博士年薪600万起步,网友:另一边一堆人抢月薪6000块的工作

网传清华NLP实验室博士年薪600万起步,网友:另一边一堆人抢月薪6000块的工作

六子吃凉粉
2026-07-22 13:08:07
耐克在中国最大零售合作商宣布:2027年起全面终止线上平台销售 滔搏大跌超20%

耐克在中国最大零售合作商宣布:2027年起全面终止线上平台销售 滔搏大跌超20%

闪电新闻
2026-07-22 11:24:52
上海40岁女子自曝丈夫和侄女保持关系2年,破坏18年婚姻

上海40岁女子自曝丈夫和侄女保持关系2年,破坏18年婚姻

九方鱼论
2026-07-22 06:39:14
邓正红软实力哲学:宇宙演化基本模式 从微观粒子到宏观星系全部演化过程

邓正红软实力哲学:宇宙演化基本模式 从微观粒子到宏观星系全部演化过程

邓正红软实力
2026-07-22 16:02:46
金融时报:中国拟扩大AI出口管制,或禁台积电代工,限制模型权重出境

金融时报:中国拟扩大AI出口管制,或禁台积电代工,限制模型权重出境

闪存猎手
2026-07-22 00:25:15
太炸裂了!一大妈发帖炫耀儿子有貌有才,北美留学,家里有钱有房有车,结果被扒出儿子已成白人老头的“小娇夫”

太炸裂了!一大妈发帖炫耀儿子有貌有才,北美留学,家里有钱有房有车,结果被扒出儿子已成白人老头的“小娇夫”

火山詩话
2026-07-21 15:23:18
抖音张一鸣捐出10个亿,全网关注

抖音张一鸣捐出10个亿,全网关注

电商派Pro
2026-07-22 11:01:48
全国最后一位长征女红军王全英逝世,享年105岁

全国最后一位长征女红军王全英逝世,享年105岁

红星新闻
2026-07-22 09:09:36
中小学入学迎来重大调整,教育部已经下达通知,2026年9月1日全国统一执行

中小学入学迎来重大调整,教育部已经下达通知,2026年9月1日全国统一执行

每天分享天下事
2026-07-20 17:30:27
“深夜扰嫖”,拍门少年仍“错不至死”啊!

“深夜扰嫖”,拍门少年仍“错不至死”啊!

新动察
2026-07-22 10:20:47
明天大暑,使劲吃这菜,一降火、二强筋骨、三健脾胃,现在正当季

明天大暑,使劲吃这菜,一降火、二强筋骨、三健脾胃,现在正当季

阿龙美食记
2026-07-22 08:32:19
德拉帕蒂取代西尔斯基:乌军最激烈最彻底的变革!乌克兰一定会打赢两场战争

德拉帕蒂取代西尔斯基:乌军最激烈最彻底的变革!乌克兰一定会打赢两场战争

鹰眼Defence
2026-07-22 12:14:30
阿媒:20年来只有阿根廷观看对手捧杯,其他亚军早就离场

阿媒:20年来只有阿根廷观看对手捧杯,其他亚军早就离场

桃叶渡春
2026-07-22 12:02:05
装傻听不懂、拒不配合上岸!东湖公开水域被印度游客当成私人泳池

装傻听不懂、拒不配合上岸!东湖公开水域被印度游客当成私人泳池

行者聊官
2026-07-21 15:36:42
进入灭亡倒计时?韩国或将成为世界上,首个自然消失的国家

进入灭亡倒计时?韩国或将成为世界上,首个自然消失的国家

麓谷隐士
2026-07-22 07:00:03
难怪去世后着急火化!谢贤离婚的主因并非赌王,他和张柏芝是一类

难怪去世后着急火化!谢贤离婚的主因并非赌王,他和张柏芝是一类

晓肂爱八卦
2026-07-22 12:21:26
1956年定陵考古发掘现场,郭沫若直接用手抓取文物,导致三千多件珍贵宝物损毁过半

1956年定陵考古发掘现场,郭沫若直接用手抓取文物,导致三千多件珍贵宝物损毁过半

人生录
2026-07-21 00:05:07
70万打水漂了!丈夫掏空全部积蓄未能救回患癌妻子,发现妻子手机里写给初恋:当初要是嫁给你就好了

70万打水漂了!丈夫掏空全部积蓄未能救回患癌妻子,发现妻子手机里写给初恋:当初要是嫁给你就好了

火山詩话
2026-07-21 17:21:28
挚友临终托付!大姐带6个孩子辞职来深圳,只有3个是亲生!网友:侠女人生

挚友临终托付!大姐带6个孩子辞职来深圳,只有3个是亲生!网友:侠女人生

南方都市报
2026-07-22 14:48:06
2026-07-22 17:24:49
每日经济新闻 incentive-icons
每日经济新闻
中国主流财经全媒体平台。
1620015文章数 2727337关注度
往期回顾 全部

科技要闻

怕了?美财长扬言:严查中国AI

头条要闻

半年被骗近2万 88岁退休教授遭77万条未读信息"包围"

头条要闻

半年被骗近2万 88岁退休教授遭77万条未读信息"包围"

体育要闻

阿根廷的亚军:单核足球的极限?

娱乐要闻

谢贤:人可以风流,但不能下流!

财经要闻

美国想对中国AI动手?"大人,时代变了"

汽车要闻

上汽贾健旭谈汽车全球化:出海要合规 欧洲人只爱小车是误解

态度原创

教育
旅游
家居
公开课
军事航空

教育要闻

32岁小镇做题家vs23岁海淀鸡娃:高考后的幸存人生,谁失望了,谁想通了

旅游要闻

高温热浪再度来袭!上海各大主题乐园各出妙招,解锁夏日清凉新体验

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

乌克兰高层爆发严重内斗 泽连斯基撤换"屠夫"总司令

无障碍浏览 进入关怀版