网易首页 > 网易号 > 正文 申请入驻

赛道Hyper | 字节推出实时双语真人互译模型

0
分享至

作者:周源/华尔街见闻

技术的进步不在于发明更复杂的工具,而在于让工具更贴合人的需求。

——科技哲学家刘易斯・芒福德

全球化的推进让跨语言交流需求日增,在经济、文化、科技等活动中,顺畅沟通至关重要。

7月24日,字节跳动Seed团队推出端到端同声传译模型Seed LiveInterpret 2.0,在中英语音同传的效率与效能上表现不俗。

据称Seed LiveInterpret 2.0是首个延迟&准确率接近人类水平的产品级中英语音同传系统,在中英同传翻译质量达到业界SOTA的同时,实现了极低的语音延迟水平——这为跨语言交流提供了新选项。

这个模型引入了强化学习机制,在延迟、译文准确率和节奏控制上进行联合建模优化,从技术原理上为低延迟提供了支持。

目前,该模型已全量上线火山方舟平台。

Seed LiveInterpret 2.0主要在同声传译常见的延迟和准确率问题上实现了改进。就公开消息来看,其改进幅度较大,但在真实场景中的实际体验,仍需要时间做出回答。

传统机器同传系统,需等语音识别完成后再翻译生成译文,延迟明显,影响交流顺畅度。

但Seed LiveInterpret 2.0采用全双工语音理解与生成框架,接收源语言语音时即可开始生成目标语言语音,一定程度上能实现“边听边处理”。

据官方信息,该系统能实现语音延迟低至2s-3s,较传统机器同传平均等待时间减少超60%;在语音到文本场景中,其输出首字平均延迟仅2.21s,而在语音到语音场景中,输出延时也只有2.53s。

翻译准确率方面,专业同传译员按中英双向RealSI标准数据集打分,语音到文本的中英互译平均得分74.8分(满分100分);语音到语音翻译译音质量得分66.3分。

中英双向RealSI标准是字节跳动Seed团队用于评估中英同声传译系统性能的标准数据集。RealSI很可能是Remote Simultaneous Interpretation(远程同声传译)的缩写。

这些表现得益于团队技术调整。

引入双通路语音理解与生成架构,减少中间环节,有助提高效率和准确度;同时运用强化学习机制,在延迟、译文准确率和节奏控制上综合优化,设计结合单步与全局反馈的奖励机制,保障片段语义一致和整体逻辑连贯。

Seed LiveInterpret 2.0具备“0样本声音复刻”功能:无需提前录说话人声音,能实时采集对话语音即可模仿用户音色,用“原声”输出目标语言译文。

在会议、演讲等跨语种交流场景,这能降低听众理解难度,更好传递说话人语义和情绪,故而交流无滞涩,很自然。

在多次语音评测中,这套系统支持“中英双向语音到语音同传+声音克隆”,SVIP(语音译文有效信息比例)在zh-en方向67.8,en-zh方向64.7,音质、节奏和语调接近真人。

如国际会议中,发言人能听到自身音色的外语译文,利于把握节奏,也让听众更易接受信息。

语言学家诺姆・乔姆斯基认为,语言不仅是交流工具,更是思维和情感载体。该功能在传递信息时也传递情感,让交流更有温度。

Seed LiveInterpret 2.0的功能使其在多领域有用武之地。

比如在国际商务场景中,跨境谈判、跨国会议对实时准确翻译需求极强。以往语言障碍导致翻译环节耗时且质量不稳,该模型或能提升商务沟通效率与准确性,对国际贸易和投资有促进作用。

在教育领域,跨国学术交流和国际在线课程增多。该模型能为师生提供实时翻译,打破语言壁垒,方便获取国外教育资源,促进学术合作。

旅游场景也是双语交流需求的强维度,目前出境人数增多,语言问题常困扰游客。

若有人开发出基于Seed LiveInterpret 2.0模型的终端,比如整合进智能手机,那么终端就能成为更智能、体验更好的“随身翻译”,解决异国沟通麻烦。

字节跳动Seed团队发布Seed LiveInterpret 2.0,可能会给同声传译行业带来变化。

市场层面,以往同声传译多依赖人工,成本高且资源有限。随着机器同传技术发展,这类系统可能占据一定市场份额。这会促使传统服务提供者改进,如结合人工智能提升服务质量和效率,适应市场变化。

硬件设备制造商也迎来机会。Ola Friend耳机计划8月底接入该系统,成为首个支持其语音同传功能的硬件。未来或有更多智能硬件与之结合,提供更方便的跨语言交流工具。

目前Seed LiveInterpret 2.0仅支持中英互译,但端到端同传框架可扩展,未来有望支持更多语言,方便不同语言交流。

除现有场景,这个系统在其他领域也有潜力。

比如智能客服,跨国公司可用其提供多语言服务,提升体验;影视作品跨国传播时用其实时配音,方便观众用母语观看,促进文化交流。

所谓“技术的真正力量不在于它本身有多强大,而在于它能连接多少可能性”(凯文・凯利),该模型未来拓展正连接更多跨语言交流可能。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
大连女歌手被座椅架挤压重伤,抢救无效身亡,同类悲剧多次发生!

大连女歌手被座椅架挤压重伤,抢救无效身亡,同类悲剧多次发生!

可乐谈情感
2025-11-16 00:02:00
刚刚,交易所重拳出击:重点监控!释放什么信号?下周要变天了?

刚刚,交易所重拳出击:重点监控!释放什么信号?下周要变天了?

云鹏叙事
2025-11-16 08:05:02
大衣哥官宣女儿订婚,将择吉日完婚,女婿是邻村种地的老实人

大衣哥官宣女儿订婚,将择吉日完婚,女婿是邻村种地的老实人

娱慧
2025-11-14 17:25:14
又暴雷!48小时卷走129亿,200万会员血本无归,“传销巨头”凉了

又暴雷!48小时卷走129亿,200万会员血本无归,“传销巨头”凉了

墨印斋
2025-11-11 16:31:34
62岁刘德华晒三餐:三十年如一日地吃几乎同样的食物!

62岁刘德华晒三餐:三十年如一日地吃几乎同样的食物!

诗意世界
2025-11-16 18:03:56
81岁林豆豆现状:已退休23年,独居在北京老房子,用阅读打发时间

81岁林豆豆现状:已退休23年,独居在北京老房子,用阅读打发时间

揽星河的笔记
2025-11-12 12:36:17
太有爱了!姚明带女儿回苏州探亲,父女散步姿势神复制网友看呆

太有爱了!姚明带女儿回苏州探亲,父女散步姿势神复制网友看呆

篮球国度
2025-11-16 10:56:06
金鸡奖紧急除名祖峰!男配和编剧提名均已取消,网友曝片方出事了

金鸡奖紧急除名祖峰!男配和编剧提名均已取消,网友曝片方出事了

叨唠
2025-11-16 06:09:55
山东的雪来了!刚刚,济宁发布天气预警!

山东的雪来了!刚刚,济宁发布天气预警!

济宁生活网
2025-11-16 19:22:03
日本民众82%支持涉台武力表态 中日军力对决风险下的亚太局势变局

日本民众82%支持涉台武力表态 中日军力对决风险下的亚太局势变局

行者聊官
2025-11-12 16:59:14
官方提醒国人“避免前往”:日本旅游雪上加霜?

官方提醒国人“避免前往”:日本旅游雪上加霜?

环球旅讯
2025-11-15 09:58:16
火箭3换1追哈登?名宿支招:2新人+添头成筹码,快船不要申京

火箭3换1追哈登?名宿支招:2新人+添头成筹码,快船不要申京

熊哥爱篮球
2025-11-16 11:39:56
又轰27分12板10助,MVP榜第一!抱歉威少,你的历史三双王真悬了

又轰27分12板10助,MVP榜第一!抱歉威少,你的历史三双王真悬了

锅子篮球
2025-11-16 14:23:27
陈英已任重庆市委组织部副部长(主持日常工作)

陈英已任重庆市委组织部副部长(主持日常工作)

澎湃新闻
2025-11-16 19:18:28
神兽为何变成了淫兽?

神兽为何变成了淫兽?

最爱历史
2025-11-16 19:41:07
双十一没落了?23年销售额1.13万亿,24年1.44万亿,25年让人惊讶

双十一没落了?23年销售额1.13万亿,24年1.44万亿,25年让人惊讶

奇思妙想草叶君
2025-11-14 23:39:25
生涯砍下70场以上40+有多难?历史仅10人做到,榜首抡了271场

生涯砍下70场以上40+有多难?历史仅10人做到,榜首抡了271场

老郎体育汇
2025-11-16 18:13:41
长治反杀案反转!外地律师凭伤口与凶器不符破局,重金花得太值了

长治反杀案反转!外地律师凭伤口与凶器不符破局,重金花得太值了

阿燕姐说育儿
2025-11-16 15:04:58
央媒发文,28岁樊振东高调官宣喜讯,全网恭喜,终于等到这一天

央媒发文,28岁樊振东高调官宣喜讯,全网恭喜,终于等到这一天

阿紵美食
2025-11-16 17:55:55
北京市公安局副局长董亦军突发疾病去世,中央政法委发文号召学习

北京市公安局副局长董亦军突发疾病去世,中央政法委发文号召学习

澎湃新闻
2025-11-15 10:34:28
2025-11-16 21:55:00
华尔街见闻官方 incentive-icons
华尔街见闻官方
中国领先的金融商业信息提供商
137603文章数 2651472关注度
往期回顾 全部

科技要闻

雷军,怒了!刚刚连发多条微博

头条要闻

日高层:高市早苗今后应该不会再有此类发言

头条要闻

日高层:高市早苗今后应该不会再有此类发言

体育要闻

最佳新秀候选!2028美国男篮有他一个位置

娱乐要闻

CEO爆料肖战《藏海传》狂赚几十亿!

财经要闻

房源暗中调价 央企举报广州国资房企

汽车要闻

"冰彩沙"全配齐 红旗HS6 PHEV预售17.88万起

态度原创

手机
本地
艺术
家居
时尚

手机要闻

OPPO Reno15宋雨琦限定款手机明天限量发售:专属编号+镌刻符号

本地新闻

沈阳都市圈“冷资源”点燃“热联动” “组团”北上“圈粉”哈尔滨

艺术要闻

俄罗斯风景油画欣赏 | Panov Eduard

家居要闻

现代简逸 寻找生活的光

秋天怎么穿出时尚感?避开老气的着装方式,美得自然又大方

无障碍浏览 进入关怀版