网易首页 > 网易号 > 正文 申请入驻

清华大学与巨人网络首创多方言语音合成框架,数据代码方法全开源

0
分享至

10月15日消息,巨人网络 AI Lab 与清华大学电子工程系 SATLab 的研究团队联合首创多方言语音合成大模型框架DiaMoE-TTS,数据代码方法全开源,借此推动方言语音合成的公平与普惠。



在当今大模型引领的语音合成时代,通用 TTS 系统已展现出令人惊叹的能力,但方言 TTS 依然是相关从业者难以触及的“灰色地带”。现有的工业级模型往往依赖巨量专有数据,这让方言 TTS 从业者和研究者几乎无从下手:缺乏统一的语料构建方法,更缺乏一个可实现多语言的端到端开源框架。

双方联合首创的 DiaMoE-TTS,这是一个在一定程度上媲美工业级方言 TTS 模型的开源全套解决方案。他们基于语言学家的专业经验,构建了一个统一的 IPA 表达体系,并且在仅依赖开源方言 ASR 数据的前提下提出这一方案。

在推出广东话、四川话、上海话等中文方言版本之前,研究团队已在英语、法语、德语、荷兰比尔茨语等多语种场景中进行过验证,确保该方法具备全球范围内多语言的可扩展性与稳健性。

巨人网络 AI Lab 与清华大学电子工程系 SATLab 希望借此推动方言语音合成的公平与普惠,让任何研究者、开发者乃至语言文化保护工作者都能自由使用、改进与扩展这一框架;让小众语言与方言的声音不再被淹没在通用大模型的洪流中,而能通过开源的力量被更广泛地听见与传承。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
金价银价突然大跳水,网友急了:我刚买就跌

金价银价突然大跳水,网友急了:我刚买就跌

每日经济新闻
2025-10-18 12:14:14
谁顶得住!香港第一网红的身材和颜值,真的绝了!你喜欢她吗?

谁顶得住!香港第一网红的身材和颜值,真的绝了!你喜欢她吗?

素然追光
2025-10-19 04:40:03
贵州女老师赵庆梅执行死刑,22名男生遭毒手,全班仅两人幸免

贵州女老师赵庆梅执行死刑,22名男生遭毒手,全班仅两人幸免

第四思维
2025-08-26 09:14:41
漫画都画不出的剧情,大谷翔平超神发挥拿到国联冠军系列赛MVP!

漫画都画不出的剧情,大谷翔平超神发挥拿到国联冠军系列赛MVP!

田先生篮球
2025-10-18 13:39:42
破防了!小S金钟奖泪中带笑,全网恍惚:这分明是大 S 回来了

破防了!小S金钟奖泪中带笑,全网恍惚:这分明是大 S 回来了

情感大头说说
2025-10-19 03:45:43
我退休后存了200万,侄女打听,我说只有20万,次日她带孩子上门

我退休后存了200万,侄女打听,我说只有20万,次日她带孩子上门

张道陵秘话
2025-10-16 20:02:59
日本为何揪着北方四岛不放?在外蒙156万平方公里面前,这算什么

日本为何揪着北方四岛不放?在外蒙156万平方公里面前,这算什么

历史摆渡
2025-10-18 18:30:02
赵本山:我拯救了一个恶毒女人的演艺生涯,她却忘恩负义踩我上位

赵本山:我拯救了一个恶毒女人的演艺生涯,她却忘恩负义踩我上位

芳芳历史烩
2025-07-23 17:53:28
一旦失业,你拿什么来养活自己?网友:啃老,啃老,还是啃老

一旦失业,你拿什么来养活自己?网友:啃老,啃老,还是啃老

解读热点事件
2025-09-13 00:15:07
2-1,29岁拜仁旧将萨内闪耀土超:无敌双响炮,率队9轮不败排第一

2-1,29岁拜仁旧将萨内闪耀土超:无敌双响炮,率队9轮不败排第一

侧身凌空斩
2025-10-19 03:02:45
都反水了!ASML、荷兰光刻机供应商相继宣布,外媒:事情闹大了

都反水了!ASML、荷兰光刻机供应商相继宣布,外媒:事情闹大了

振华观史
2025-10-18 15:42:20
40岁暴击:连脚都开始“提要求”,才发现半生都在糊弄自己!

40岁暴击:连脚都开始“提要求”,才发现半生都在糊弄自己!

妈咪OK
2025-10-17 14:57:02
你见过最脏的人有多脏?网友:这些文字连起来看的我想吐

你见过最脏的人有多脏?网友:这些文字连起来看的我想吐

带你感受人间冷暖
2025-09-24 00:10:06
澳大利亚猛然惊醒:铁矿石改规矩了,美元订单停了,最大买家要走

澳大利亚猛然惊醒:铁矿石改规矩了,美元订单停了,最大买家要走

别人都叫我阿腈
2025-10-10 04:30:25
93分钟绝杀+脱衣狂奔!巴萨搏命登顶西甲 弗里克吃红牌无缘战皇马

93分钟绝杀+脱衣狂奔!巴萨搏命登顶西甲 弗里克吃红牌无缘战皇马

风过乡
2025-10-19 00:42:32
风流父亲哄骗别人妻子做情人,一纸荒唐协议,用十三岁女儿做抵偿

风流父亲哄骗别人妻子做情人,一纸荒唐协议,用十三岁女儿做抵偿

长安一孤客
2025-10-17 21:24:53
连刷全集,Netflix这部新剧太够劲了

连刷全集,Netflix这部新剧太够劲了

来看美剧
2025-10-17 17:45:03
看情况给战斧,美印协议、布达佩斯会面、APEC峰会将决定大局

看情况给战斧,美印协议、布达佩斯会面、APEC峰会将决定大局

邵旭峰域
2025-10-18 11:59:31
演员张艺洋已执行死刑!中国娱乐圈首例,倪大红、李雪健被牵连

演员张艺洋已执行死刑!中国娱乐圈首例,倪大红、李雪健被牵连

阿纂看事
2025-07-25 17:12:19
49岁林心如官宣了

49岁林心如官宣了

乡野小珥
2025-10-18 16:07:33
2025-10-19 06:08:49
松果财经 incentive-icons
松果财经
专注商业研究,挖掘新商业机会
4710文章数 4888关注度
往期回顾 全部

科技要闻

物理学家杨振宁先生逝世

头条要闻

郑丽文高票当选国民党主席 竞选时明确"支持一个中国"

头条要闻

郑丽文高票当选国民党主席 竞选时明确"支持一个中国"

体育要闻

泰州队总分9-8点杀南京队 晋级苏超决赛

娱乐要闻

陈伟霆何穗无预警官宣结婚生子

财经要闻

特朗普软了:对华高额关税讹诈 不可持续

汽车要闻

全新领克03家族上市限时售价10.38万起

态度原创

房产
时尚
旅游
数码
本地

房产要闻

珠江畔再启新章!未来方洲二期亮相,为广州定制“一生幸福之城”

今年秋天,有这几件单品就够了

旅游要闻

热闻|清明假期将至,热门目的地有哪些?

数码要闻

1Kg 重量:联想预热来酷 Air 16 轻薄本将于本月发布

本地新闻

考上警犬专业,我和修勾一起卷编制

无障碍浏览 进入关怀版