网易首页 > 网易号 > 正文 申请入驻

Deepgram把多语言语音模型做成了"即插即用"

0
分享至

你正在开发一个跨国客服语音机器人。用户突然从英语切换到印地语,系统需要:先检测语言→切换模型→重新建立连接。整个过程可能要2-3秒,对话早已冷场。

Deepgram今天发布的Flux Multilingual,想把这套复杂流程压缩成一次模型调用。


一个模型塞了10种语言

Flux Multilingual把英语、西班牙语、法语、德语、印地语、俄语、葡萄牙语、日语、意大利语、荷兰语打包进单一模型和单一接口。Deepgram称其为"首个多语言对话语音识别模型",区别于传统自动语音识别(自动语音识别)——后者为转录优化,前者为对话流设计。

关键能力在于实时语言检测和通话中切换。系统可以接受开发者预设的语言提示,也能自动检测。当说话者在同一段对话中混用语言时,模型原生支持代码切换(code-switching),无需外部路由层介入。

传统方案需要开发者拼接多个转录模型、语言检测层和路由逻辑。这种架构的代价是延迟和脆弱的系统交接。Flux Multilingual用单一感知模型替代整个技术栈。

400毫秒内的对话节奏

模型采用基于模型的轮次检测(model-based turn detection),而非传统的静音检测来判断说话者是否结束发言。端到端决策时间在400毫秒以内。

Deepgram声称该系统在所有10种支持语言上达到单语言级别的准确率,并原生处理打断。发布版本与现有Flux接口向后兼容,可通过云端接口或私有化部署获取,提供欧盟节点和软件开发工具包。

「语音智能体很快将成为全球企业与客户互动的默认方式,」Deepgram联合创始人兼首席执行官Scott Stephenson表示,「Flux Multilingual让开发者能用单一感知模型构建全球语音智能体,具备通话中切换语言的能力。现在企业可以向任何市场、任何客户提供同样无缝的体验。」

20万开发者的选择

据Deepgram披露,超过20万名开发者和1300家组织使用其平台,覆盖语音转文本、文本转语音和完整语音对语音能力。该公司累计处理超过5万年的音频,转录超过1万亿词。

Deepgram为风险投资支持的创业公司,累计融资约2.16亿美元,包括今年1月的1.3亿美元轮次。投资方包括Madrona Venture Group、Tiger Global Management、Wing Venture Capital等。

Flux Multilingual现已全面可用。Deepgram正提供限时促销价,覆盖Flux Multilingual和Nova-3模型的流式语音转文本服务。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
国际油价,快速下跌

国际油价,快速下跌

第一财经资讯
2026-05-01 22:19:51
国民副主席被逼到墙角,黄复兴系统没人说话,季麟连到底算谁的人

国民副主席被逼到墙角,黄复兴系统没人说话,季麟连到底算谁的人

娱乐的宅急便
2026-05-02 00:35:12
以色列终究没要那些血粮!参联会主席承认:俄罗斯帮伊朗对抗美军

以色列终究没要那些血粮!参联会主席承认:俄罗斯帮伊朗对抗美军

鹰眼Defence
2026-05-01 16:43:31
银行员工转走储户1800万炒股,银行不担责,老百姓还能信吗?离谱

银行员工转走储户1800万炒股,银行不担责,老百姓还能信吗?离谱

眼光很亮
2026-05-01 14:08:04
刚看到湖南的一纸通报,荒诞到连编剧都不敢这么写

刚看到湖南的一纸通报,荒诞到连编剧都不敢这么写

小陆搞笑日常
2026-05-01 15:31:33
谜底揭晓、国民党大获全胜!郑丽文就“统一”发声,赖清德丢尽脸

谜底揭晓、国民党大获全胜!郑丽文就“统一”发声,赖清德丢尽脸

共工之锚
2026-05-01 00:22:26
别再吹天生美貌!朱珠真实原生脸曝光,整容前后差距一目了然

别再吹天生美貌!朱珠真实原生脸曝光,整容前后差距一目了然

小娱乐悠悠
2026-04-27 09:21:13
莫氏鸡煲开多家分店后老店热度不减,9名剁鸡师傅每天工作十三四个小时,老板娘发声:人多人少都开心

莫氏鸡煲开多家分店后老店热度不减,9名剁鸡师傅每天工作十三四个小时,老板娘发声:人多人少都开心

极目新闻
2026-05-01 18:33:42
醪糟再次被关注!医生发现:高血脂患者喝醪糟,不用多久4大变化

醪糟再次被关注!医生发现:高血脂患者喝醪糟,不用多久4大变化

芹姐说生活
2026-04-19 15:52:53
你最接近生理极限的一次经历是什么?网友分享让人目瞪口呆!

你最接近生理极限的一次经历是什么?网友分享让人目瞪口呆!

夜深爱杂谈
2026-04-09 19:39:13
随着森林狼4-2爆冷淘汰掘金,西部半决赛定3席!最终4强基本如下

随着森林狼4-2爆冷淘汰掘金,西部半决赛定3席!最终4强基本如下

小火箭爱体育
2026-05-01 12:32:21
半年打一针,4000万慢性鼻窦炎有新药了

半年打一针,4000万慢性鼻窦炎有新药了

医学界
2026-04-29 19:56:22
退休人员速查!1992年前干过这4类工作 每月多领一笔钱 别白吃亏

退休人员速查!1992年前干过这4类工作 每月多领一笔钱 别白吃亏

混沌录
2026-04-22 19:51:07
Starz出品,这3部黄暴爽剧别看删减版

Starz出品,这3部黄暴爽剧别看删减版

来看美剧
2026-05-01 19:58:14
两难啊!儿子月薪6000,儿媳无业,竟要父母拿30多万养老钱还房贷

两难啊!儿子月薪6000,儿媳无业,竟要父母拿30多万养老钱还房贷

火山詩话
2026-04-30 15:03:29
金靖近照大变样!暴瘦脱相撞脸女星,网友:没以前有灵气了

金靖近照大变样!暴瘦脱相撞脸女星,网友:没以前有灵气了

草莓解说体育
2026-05-01 14:41:01
全票通过!FCC彻底封杀中国实验室,75%美企电子测试陷入绝境

全票通过!FCC彻底封杀中国实验室,75%美企电子测试陷入绝境

蓝色海边
2026-05-01 15:00:29
石破茂曾说得很透彻,中国军力再强也吓不倒高市,日本还会走老路

石破茂曾说得很透彻,中国军力再强也吓不倒高市,日本还会走老路

动漫里的童话
2026-05-01 23:55:42
事态升级!恩利喝女网红嘴里饮料,伊能静发文硬刚,评论区炸锅

事态升级!恩利喝女网红嘴里饮料,伊能静发文硬刚,评论区炸锅

揽星河的笔记
2026-05-01 18:15:19
上海医保新政落地!5月起配药这部分费用提高了

上海医保新政落地!5月起配药这部分费用提高了

看看新闻Knews
2026-05-01 13:24:05
2026-05-02 02:04:49
摸鱼算法
摸鱼算法
致力于用最前沿的AI技术,换取更多发呆时间的三十岁青年。
2083文章数 20关注度
往期回顾 全部

科技要闻

DeepSeek发布多模态论文又连夜删除

头条要闻

美军对伊朗最新打击方案披露 包含出动地面部队

头条要闻

美军对伊朗最新打击方案披露 包含出动地面部队

体育要闻

无奈!约基奇:这要在塞尔维亚 全队早被炒了

娱乐要闻

马筱梅产后身材恢复超好 现身户外直播

财经要闻

GPU神话松动,AI真正的战场变了

汽车要闻

限时9.67万起 吉利星越L/星瑞i-HEV智擎混动上市

态度原创

数码
房产
时尚
公开课
军事航空

数码要闻

原相光学鼠标传感器新品PAW3955将至,VGN、阿斯盾官宣采用

房产要闻

所有户型全卖爆!海口TOP级豪宅,景观样板间五一全线开放!

这个夏天,彩色裤子又火了!

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

伊朗:持续推进海上封锁的行为不可容忍

无障碍浏览 进入关怀版