网易首页 > 网易号 > 正文 申请入驻

B站开源IndexTTS-2.0:突破自回归TTS时长与情感控制瓶颈

0
分享至

近日,哔哩哔哩(B站)Index团队正式宣布,其自主研发的情感可控、时长可调的自回归零样本文本转语音(TTS)系统——IndexTTS-2.0,已全面开源

该系统的发布被广泛视为零样本TTS技术迈向实用化阶段的关键里程碑。

在语音合成领域,精准的时长控制与自然的情感表达一直是长期存在的技术难题。

IndexTTS-2.0 在这一背景下推出两项核心创新:

  • 时间编码机制:首次在自回归TTS架构中引入时间编码,有效解决了传统模型在语音时长控制上精度不足的问题,实现了更稳定、更自然的语音节奏调控;
  • 音色与情感解耦建模:通过创新性的解耦建模方式,系统支持多维度灵活的情感调节。用户不仅可基于单一音频参考,还能通过独立的情感参考音频、情感向量或文本描述等多种方式,精准调控合成语音的情感表达,显著提升生成语音的表现力与适用性。

基于上述技术架构,IndexTTS-2.0在语音生成方面表现出极高的灵活性。

从官方示例来看,该系统可广泛应用于AI配音、有声读物、动态漫画、视频翻译、语音对话及播客制作等多种场景,极大拓展了语音合成技术的创作与应用边界。

尤其值得关注的是,IndexTTS-2.0为全球内容出海提供了重要技术支撑

凭借高质量的情感复现与精准的时长匹配,跨语言视频可实现近乎“无差别”的本地化体验。

无论是海外用户观看中文视频,还是中文用户聆听外语内容,均能在保留原声风格与情感的基础上,获得更加自然、沉浸的听觉体验。

这一突破不仅大幅降低了优质内容跨语言传播的门槛,也为AIGC技术在全球范围内的落地提供了坚实基础。

目前,IndexTTS-2.0 已同步开源项目论文、完整代码、模型权重及在线体验页面

IndexTTS团队表示,未来将持续推进模型性能优化,并逐步释放更多资源与工具,与开发者社区共同构建开放、繁荣的语音技术生态,助力推动多语种交流与全球文化互联互通。

GitHub地址:

GitHub - index-tts/index-tts: An Industrial-Level Controllable and Efficient Zero-Shot Text-To-Speech System

论文地址:

[2506.21619] IndexTTS2: A Breakthrough in Emotionally Expressive and Duration-Controlled Auto-Regressive Zero-Shot Text-to-Speech

Demo展示地址:

IndexTTS2: A Breakthrough in Emotionally Expressive and Duration-Controlled Auto-Regressive Zero-Shot Text-to-Speech

模型下载地址:

魔搭社区|IndexTTS-2
Hugging Face| IndexTTS-2

在线体验地址:

https://huggingface.co/spaces/IndexTeam/IndexTTS-2-Demo

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中国农民倒了什么血霉,被这样的人研究

中国农民倒了什么血霉,被这样的人研究

多村来信
2026-03-18 16:29:30
44岁柳岩一袭蓝裙封神,这若隐若现的腰臀比,谁看了不迷糊?

44岁柳岩一袭蓝裙封神,这若隐若现的腰臀比,谁看了不迷糊?

娱乐领航家
2026-03-26 22:00:03
蓝莓再次被关注?研究发现:蓝莓或可在30小时内清除体内45%因子

蓝莓再次被关注?研究发现:蓝莓或可在30小时内清除体内45%因子

岐黄传人孙大夫
2026-03-24 22:55:03
中央定调,养老金调整方向明确,2026年若上涨,企退能多涨3%吗?

中央定调,养老金调整方向明确,2026年若上涨,企退能多涨3%吗?

有范又有料
2026-03-26 14:35:52
3月26日俄乌最新:靴子终于落地了

3月26日俄乌最新:靴子终于落地了

西楼饮月
2026-03-26 19:48:54
IGN怒打9分 玩家好评如潮:这款游戏销量破50万!

IGN怒打9分 玩家好评如潮:这款游戏销量破50万!

游民星空
2026-03-26 11:58:13
亲戚借车从不加油,这次他故意空着油箱给她,她老公却急了:我上次不是刚加了600块的油吗!

亲戚借车从不加油,这次他故意空着油箱给她,她老公却急了:我上次不是刚加了600块的油吗!

品读时刻
2026-03-25 09:04:33
老子二千年前就说透了:上天会用各种方式,把你引到你该走的路上

老子二千年前就说透了:上天会用各种方式,把你引到你该走的路上

千秋文化
2026-03-24 21:30:09
OpenAI宣布关闭Sora视频应用,终止与迪士尼10亿美元合作

OpenAI宣布关闭Sora视频应用,终止与迪士尼10亿美元合作

澎湃新闻
2026-03-25 09:38:08
广东3消息!徐杰胡明轩齐发声,徐昕无缘回归,焦泊乔伤愈复出

广东3消息!徐杰胡明轩齐发声,徐昕无缘回归,焦泊乔伤愈复出

多特体育说
2026-03-26 22:41:13
大学生的天塌了,月薪800起搞个毛线啊?

大学生的天塌了,月薪800起搞个毛线啊?

涛哥锐评
2026-03-26 17:54:00
郑裕彤家族为什么不自救?不是说香港豪门隐形资产很多么?

郑裕彤家族为什么不自救?不是说香港豪门隐形资产很多么?

担扑
2026-03-26 17:02:51
举国之力也找不到完整夏朝,为何?网友的神预言正在被考古证实

举国之力也找不到完整夏朝,为何?网友的神预言正在被考古证实

超人强动物俱乐部
2026-03-26 16:54:48
汪小菲马筱梅基因太绝!家中“小炸毛”萌翻全网这颜值太招人疼!

汪小菲马筱梅基因太绝!家中“小炸毛”萌翻全网这颜值太招人疼!

孤酒老巷QA
2026-03-24 05:34:17
参加世界杯,每人先交1.5万刀!特朗普政策影响多个世界杯参赛国

参加世界杯,每人先交1.5万刀!特朗普政策影响多个世界杯参赛国

全景体育V
2026-03-26 08:16:09
张雪峰追悼会周六将在苏州殡仪馆举行

张雪峰追悼会周六将在苏州殡仪馆举行

界面新闻
2026-03-26 07:04:27
Anthropic冲塔ASI自进化,要做全球操作系统!Claude OS一刀砍向6.4万亿帝国

Anthropic冲塔ASI自进化,要做全球操作系统!Claude OS一刀砍向6.4万亿帝国

新智元
2026-03-25 19:40:39
麦迪:杨瀚森球商高有注定长期竞争力,打法让我想到约基奇

麦迪:杨瀚森球商高有注定长期竞争力,打法让我想到约基奇

懂球帝
2026-03-26 11:45:09
张雪峰生前推荐的6所高校,性价比极高,记得默默收藏!

张雪峰生前推荐的6所高校,性价比极高,记得默默收藏!

教育导向分享
2026-03-25 22:32:02
拉里贾尼继任者不到一天被杀,川普加派82空降师开赴中东

拉里贾尼继任者不到一天被杀,川普加派82空降师开赴中东

移光幻影
2026-03-26 09:56:37
2026-03-27 02:03:00
量子位 incentive-icons
量子位
追踪人工智能动态
12348文章数 176425关注度
往期回顾 全部

科技要闻

美团发布外卖大战后成绩单:亏损超200亿

头条要闻

特朗普:伊朗允许10艘油轮通行霍尔木兹海峡

头条要闻

特朗普:伊朗允许10艘油轮通行霍尔木兹海峡

体育要闻

申京努力了,然而杜兰特啊

娱乐要闻

刘晓庆妹妹发声!称姐姐受身边人挑拨

财经要闻

油价"驯服"特朗普?一到100美元就TACO

汽车要闻

一汽奥迪A6L e-tron开启预售 CLTC最大续航815km

态度原创

时尚
旅游
健康
数码
艺术

400万人爱过的女孩,被黄谣网暴180天后

旅游要闻

河南开封万岁山武侠城,游客买300元门票:给妻子拍照被保安阻拦

转头就晕的耳石症,能开车上班吗?

数码要闻

英特尔发Q1.26版Arc Pro专业显卡驱动,支持B70 / B65显卡

艺术要闻

北京大兴机场和青岛胶东机场“撞脸”,长得像就是抄袭?

无障碍浏览 进入关怀版