网易首页 > 网易号 > 正文 申请入驻

网易开源两款同传模型,延迟、准确率开源SOTA,快嘴也能实时翻译

0
分享至


AI应用风向标(公众号:ZhidxcomAI)
作者|毕伟豪
编辑|漠影

智东西9月16日报道,在刚刚结束的网易有道AI Open Day发布会上,网易有道发布并开源了两款全新的同传模型子曰4-R2T2和子曰4-T3PO,两款模型均具备流式输出能力,可以提供极低时延、高流畅度的实时同传体验。


同时,网易有道发布并开源了办公Agent应用LobsterAI的2.0版本,在开源项目兼容、团队共享等方面进行了升级,并全面兼容了OpenClaw2.0版本。


现场网易有道还发布了网易首个AI原生语音Agent网易叭哥说,可以提供实时语音输入和翻译能力,支持100多种语言实时互译,并宣布终身免费


数据方面,据网易有道CEO周枫现场披露,有道AI同传累计服务用户超过2500万,使用次数同比增长近一倍;口语学习产品Hi Echo用户突破1000万;办公Agent LobsterAI用户规模突破100万,活跃用户次日留存超过80%。


Hi Echo升级为了Agent口语私教,采用端到端全双工语音对话,能识别对话中的语气与情绪。


一、语音交互能力开源SOTA,超快语速稳定输出

本次发布会上,网易有道发布并开源了两款同传模型,其中子曰-R2T2是一款低延迟、高精度的真流式自动语音识别(ASR)模型。

该模型的平均延迟仅为200至600毫秒,在各类benchmark中,子曰4-R2T2的延迟和识别质量均达到了开源模型中的最先进水平(SOTA),和闭源模型相比也并不逊色。


该模型采用一套特殊的数据构建技术进行训练,包括稳定前缀数据、强制时间对齐数据和词元级音频分割。训练中还结合了最长稳定前缀(LSP)学习范式,在流式输出设计下,R2T2在离线识别中仍保持了很高的准确率。


子曰4-T3PO则是一款拥有140亿参数的文本到文本同步机器翻译(SiMT)模型,有道团队通过高质量分段对齐数据构建、翻译模型流式冷启动以及基于帕累托感知的强化学习进行模型训练。


该模型同样采用全流式输出,同时用户可以对延迟模式进行调节,根据不同的使用场景,选择从低延迟到高质量的不同模式。

此外,T3PO可以与外部流式自动语音识别(ASR)模型联动,实现从语音到文本的实时转换。现场演示了一段超快语速的实时翻译和流式输出,可以看到两款模型的组合下,语音被清楚地翻译成了中文,输出速度非常快。


二、网易叭哥说上线,超百种语言实时翻译,永久免费

网易叭哥说是网易首个AI原生语音Agent,定位为“从语音转文字走向语音转意图”的产品。


该产品在语音识别之后继续做语义理解,把口语表达中的重复、停顿、改口整理为可以直接使用的文字,可用于聊天、邮件、文档等场景。


叭哥说支持100多种语言的实时语音翻译,在计算机、金融、医学等领域,有道称翻译准确率可达98%以上。


产品承诺终身免费,声音仅在本地处理,不上传、不记录,也不用于模型训练。目前Mac与Windows桌面端已全量上线,移动端还在开发中。


口语学习产品Hi Echo累计用户突破1000万。这次升级后,产品定位为Agent口语私教,采用端到端全双工语音对话,支持随时打断,并能识别对话中的语气与情绪。


系统从第一次对话开始评估用户水平,据此生成学习计划,后续动态调整,底层是有道自研的Helix目标驱动型自进化学习系统。场景覆盖口语考试、商务谈判与求职面试,新版将在下周上线应用市场。


有道同时宣布与雅思官方达成合作,Hi Echo成为BC雅思官方模拟测评系统首家全面合作伙伴。

三、LobsterAI 2.0升级,全面兼容新版龙虾

LobsterAI是国内首个100%开源的桌面级办公Agent,今年2月19日发布。截至目前,产品用户规模突破100万,活跃用户次日留存超80%,人均每日token消耗超2000万,GitHub Star超6000,累计发布79个版本。


2.0版本最大的变化是生态兼容,其全面兼容OpenClaw 2.0,底座同步升级,这一版本有900多位贡献者、1.6万个PR,是龙虾史上最大的一次更新。


另外两项更新偏向产品和商业模式。新增的Sites功能让Agent生成的结果可以一键拥有公网可访问地址,并支持设置分享码;新增的Teams功能面向团队协作,取消了席位费,只按实际用量收费。


周枫在采访中提到,LobsterAI与同类产品最大的不同在于开源,不锁定生态,可以对任何应用开放适配。

除此之外,周枫还提到,网易在用户群体上面呈现出年轻化的特征。很多用户在使用网易有道词典等产品时,也会接触到网易有道的Agent产品。

结语:从模型到Agent,网易有道加速AI落地

从实时语音模型、语音Agent到办公Agent,有道此次发布的产品主要落在学习和工作两大场景。周枫在媒体问答中提到,公司目前关注学习、工作和广告营销三大方向,其中广告营销业务已占公司近一半,但此次新发布暂未涉及这一业务线。

对有道而言,模型能力和产品形态已经进一步向Agent化延伸,但从技术能力走到规模化应用,仍要看真实工作流中的任务完成率、用户使用频次以及由此形成的商业价值。

接下来,这些产品能否从单点体验进一步进入高频工作场景,将是验证这套AI布局的重要指标。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
东吴大学正式移除蒋介石像,网友:忘恩负义!没有他哪有东吴大学

东吴大学正式移除蒋介石像,网友:忘恩负义!没有他哪有东吴大学

点燃好奇心
2026-09-17 09:41:20
美国中将公开承认:打完伊朗,我才看清中国到底有多强大!

美国中将公开承认:打完伊朗,我才看清中国到底有多强大!

果妈聊娱乐
2026-09-17 08:20:56
黑天鹅!今夜,一个国家,股市崩了

黑天鹅!今夜,一个国家,股市崩了

中国基金报
2026-09-17 00:00:21
已击毙!乌克兰宣布重大战果!

已击毙!乌克兰宣布重大战果!

故事终将光明磊落
2026-09-17 08:13:53
好莱坞“最帅建模脸”43岁近照曝光,断崖式衰老引热议:差点认不出...

好莱坞“最帅建模脸”43岁近照曝光,断崖式衰老引热议:差点认不出...

英国那些事儿
2026-09-17 00:47:38
德国不再“踩刹车”!默茨作出决断:支持欧盟加强对华贸易措施

德国不再“踩刹车”!默茨作出决断:支持欧盟加强对华贸易措施

闻识
2026-09-17 13:41:30
生化危机导演点名她演Lady D,这选角你服不服?

生化危机导演点名她演Lady D,这选角你服不服?

渡川5
2026-09-17 00:02:19
光刻胶,接下来怕是要“火”了!日本三巨头突然官宣:10月1日起,面向全球客户的光刻胶价格全线提涨15%。更狠的是,现货价直接跳涨38%

光刻胶,接下来怕是要“火”了!日本三巨头突然官宣:10月1日起,面向全球客户的光刻胶价格全线提涨15%。更狠的是,现货价直接跳涨38%

扶苏聊历史
2026-09-17 15:07:35
佛州38岁女子与宠物狗发生不当行为被捕,丈夫查监控抓现行

佛州38岁女子与宠物狗发生不当行为被捕,丈夫查监控抓现行

环球趣闻分享
2026-09-17 13:10:13
55岁港星王贤志欠债跑路到国外,家里有30亿也扛不住,妹妹宣布划清界限

55岁港星王贤志欠债跑路到国外,家里有30亿也扛不住,妹妹宣布划清界限

开开森森
2026-09-17 07:40:02
万亿资产归零,全国第四大保险集团破产,1.5万亿保单怎么样了?

万亿资产归零,全国第四大保险集团破产,1.5万亿保单怎么样了?

米果说识
2026-08-17 19:17:49
香山论坛突发意外!中方受邀贵宾被扣,总理斡旋,对方登门谢罪

香山论坛突发意外!中方受邀贵宾被扣,总理斡旋,对方登门谢罪

杜鱂手工制作
2026-09-16 16:20:14
9月17日,人社部、财政部关于2026年上调退休人员基本养老金通知公布之前,看病就医率先迎来了3个好消息

9月17日,人社部、财政部关于2026年上调退休人员基本养老金通知公布之前,看病就医率先迎来了3个好消息

白昼说故事
2026-09-17 09:40:26
“从鬼门关走了一遭”,陈建州术后发文:把累当回事、认得心肌梗塞症状、把睡觉当最重要的工作;自称不抽烟不喝酒不应酬,但长期晚睡早起

“从鬼门关走了一遭”,陈建州术后发文:把累当回事、认得心肌梗塞症状、把睡觉当最重要的工作;自称不抽烟不喝酒不应酬,但长期晚睡早起

扬子晚报
2026-09-17 21:38:08
中国免签捅马蜂窝了?韩国近6万人突然联署,要求叫停中国团客免签,发生了什么?

中国免签捅马蜂窝了?韩国近6万人突然联署,要求叫停中国团客免签,发生了什么?

青青子衿
2026-09-16 16:58:57
男子钓鱼买1斤蚯蚓放后备箱近百条蚯蚓出逃,车主发声:4s店报价拆车清洗要大几千

男子钓鱼买1斤蚯蚓放后备箱近百条蚯蚓出逃,车主发声:4s店报价拆车清洗要大几千

大众网
2026-09-17 11:12:35
特朗普不愿看见的一幕,还是发生了

特朗普不愿看见的一幕,还是发生了

上观新闻
2026-09-17 13:17:54
金与正:朝鲜拥核地位从物理和法律上永久固定!

金与正:朝鲜拥核地位从物理和法律上永久固定!

IN朝鲜
2026-09-17 12:19:36
刚刚,大涨!马斯克,突爆大消息

刚刚,大涨!马斯克,突爆大消息

数据宝
2026-09-17 20:11:02
罗永浩否认为钟薛高造势

罗永浩否认为钟薛高造势

封面新闻
2026-09-17 23:10:09
2026-09-18 02:27:00
智东西 incentive-icons
智东西
智东西,AI产业新媒体,专注报道人工智能的前沿技术发展,和技术应用带来的千行百业产业变革。
12610文章数 117168关注度
往期回顾 全部

科技要闻

影视飓风Tim反掰iPhoneDuo被质疑

头条要闻

永和豆浆视频被指擦边:女子穿蕾丝吊带 脱黑丝袜洗澡

头条要闻

永和豆浆视频被指擦边:女子穿蕾丝吊带 脱黑丝袜洗澡

体育要闻

逆转朝鲜,国足亚运队“啃老”过关

娱乐要闻

rapper赵涛恋情曝光!带甜馨妈妈散步

财经要闻

缺钱的追觅 隐藏的债务?

汽车要闻

小鹏G9L限时售23.18万 旗舰级的配置/诱人的价格

态度原创

教育
房产
本地
公开课
军事航空

教育要闻

认知篇:顶级留学生会戒掉的几种学生思维!

房产要闻

突发!三亚安居房出台新政!

本地新闻

不止胖东来!许昌藏着半部三国史

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

韩国外长表态:尚未决定是否向霍尔木兹海峡派兵

无障碍浏览 进入关怀版