网易首页 > 网易号 > 正文 申请入驻

GPT-5级推理能力塞进语音模型,OpenAI把同传翻译成本砍穿地板价

0
分享至

听雨 发自 凹非寺量子位 | 公众号 QbitAI

OpenAI上新三款实时语音模型,不仅集成了GPT-5级的推理能力,还重击了一拳同传行业:

能紧跟发言人节奏的同声传译,现在每分钟成本两毛五

三款模型分别是GPT-Realtime-2GPT-Realtime-TranslateGPT-Realtime-Whisper,把端到端推理语音、同声传译、流式转写三件事打包进了同一套API。



效果有点炸裂。

OpenAI员工Jason Liu对着麦克风说英语,GPT-Realtime-Translate直接实时把它翻译成了日语。

整个过程流式进行,不需要等说话人说完一整句,翻译就开始跟随输出。

【此处无法插入视频,遗憾……可到量子位公众号查看~】

网友Claire Vo用ChatPRD结合GPT-Realtime-2,对着麦克风说了一句话:帮我写一份产品需求文档。

接下来的十分钟里,她没有碰过一次键盘,仅凭语音对话,AI就生成了一份完整的PRD。

她再用语音要求改格式,AI实时更新。全程对话驱动,没有键盘。

【此处无法插入视频,遗憾……可到量子位公众号查看~】

还有网友Ben Badejo,他把GPT-Realtime-2和OpenClaw集成在一起,语音指挥AI操控浏览器:打开Google,跳转到华尔街日报。

AI一边执行,一边还主动汇报进度:正在打开浏览器……现在跳转中。

【此处无法插入视频,遗憾……可到量子位公众号查看~】

他表示,自己三月份就在琢磨如何给自己的龙虾搭建语音对讲系统,现在只需要把OpenClaw连接新的OpenAI模型就行了。

仅仅几分钟就完成了重大升级。



OpenAI这次放出的三款模型,也是各有定位:

  • GPT-Realtime-2:带着GPT-5级推理说人话办人事;
  • GPT-Realtime-Translate:能把70多种语言实时翻译成13种语言输出,每分钟约2毛5。
  • GPT-Realtime-Whisper:负责边说话边出文字的低延迟转录。

官方表示,语音正逐渐成为人们使用软件最自然的方式之一。这三款模型一起,把语音从简单的听话回话,推向了真正「能干活的交互界面」——

这下,大模型真的能像人类一样,跟你边聊天边把活干了。

三款新模型:能听、能译、能推理

GPT-Realtime-2是这次的重头戏。

这是OpenAI首款搭载GPT-5级推理的语音模型,真正把推理能力塞进了端到端的语音交互里。

最直接的升级是上下文窗口:从32K直接拉到128K,翻了4倍。

这意味着语音Agent可以支撑更长的对话,处理更复杂的任务流,而不会聊着聊着就忘了前面说了什么。

推理强度还可以5档调节:minimal、low、medium、high、xhigh,默认low。

问个天气用low秒回,丢给它一个商业分析大题用xhigh慢慢推演。

但最体现GPT-5级推理的,是它开始学会边说话边干活了。

以前的语音助手,你说一句它回一句,脑子里一次只能想一件事。

GPT-Realtime-2现在支持并行工具调用,可以一边嘴里说着正在查您的日程表,一边后台同时调用地图、日历、租房软件。

【此处无法插入视频,遗憾……可到量子位公众号查看~】

官方demo中,负责人Romain Huet对着手机上的个人助手说一句:

  • 我马上有个客户会议,能帮我看一下日程吗?

模型会立刻查看日历,回复说12分钟后有一个跟Sablecrest Robotics 的CTO Alex Kim的会议。接着更新CRM,把今天的会议摘要和后续步骤录入系统。

它还学会了Preambles,也就是前置语。后台在拉数据的时候,会先对你说「让我核实一下」,或者「稍等片刻」。

这个看似废话的设计,最大程度缓解了等待时的焦虑。人在思考的时候也会说「呃让我想想」,现在AI也学会了。

语气也是可控的,平静、共情、兴奋,按需切换。

跑分怎么样?

Big Bench Audio这项评估音频推理能力的榜单上,GPT-Realtime-2(high档)拿了96.6%,上代是81.4%,提升了15.2个点。



Audio MultiChallenge测多轮对话指令跟随,xhigh档跑出48.5%,上代只有34.7%,又涨了13.8个点。



定价方面,GPT-Realtime-2按token计费,$32/1M音频输入token,$64/1M音频输出token,缓存输入只要$0.40。

和上一代GPT-Realtime-1.5价格持平,但能力大幅跃升。

在企业实测中,Zillow拿最难的对抗性基准跑了一遍,通话成功率从69%直接跳到95%,提升了26个百分点。

Zillow的SVP Josh Weisberg表示:

  • GPT-Realtime-2在复杂语音交互中的智能和工具调用可靠性最突出,Fair Housing合规性也显著增强。

这意味着语音Agent不再只是接接电话,而是真的能处理高价值、高合规要求的业务场景了。

再来看另外两款模型。

GPT-Realtime-Translate,流式同声传译。

真的是把同声传译干到了白菜价。

支持70多种语言输入,13种语言输出。它不是说一句翻译一句的回合制,而是说话人边说母语,系统边实时输出翻译,几乎没有停顿。



定价$0.034/分钟,折合人民币约2毛5

按这个价,连续翻译一小时不到15块,甚至比一杯奶茶还便宜。



对口音和方言包容度也很高。印度AI公司BolnaAI拿印地语、泰米尔语、泰卢固语这些口音浓重的语言去测,WER(词错误率)比其他模型低12.5%,延迟能维持自然对话。



GPT-Realtime-Whisper,流式实时转录。

边说话边出文字,低延迟speech-to-text。

定价$0.017/分钟,折合人民币约1毛钱,一小时连续转写不到6块钱。

应用场景主要在实时字幕、会议速记、客服通话记录、课堂笔记。

以后开会,领导刚说完前半句,屏幕上的文字已经跟上了。

同传更有性价比了

OpenAI这三款语音模型,冲击最大的应该是同声传译行业。

如果算一笔账:

人工同声传译,英语语种一天收费1.2万到2.1万元;非英语语种,比如日语、韩语、阿拉伯语,1.8万元起。

通常需要2到3名译员轮换,折算下来每小时数千至上万元。

这还不算设备。同传间、耳机、接收器,一套专业设备租一天也要几千。

所以过去能用上同传的,基本是这几种场景:国际峰会、跨国企业董事会、高端医疗会诊、法律仲裁。

普通开发者、中小教育机构、出海创业公司,基本和这个词无缘。

但现在,OpenAI亲自下场把这件事做进了API:

GPT-Realtime-Translate,定价是$0.034/分钟,折合人民币0.25元/分钟

按这个价格,连续翻译8小时,总成本不到120块,还不到人工同传两分钟的价钱,其中的差距大约是66倍

人工智能冲击传统行业……又一次具象化了。



不过呢,AI同传和人工同传目前还不是完全替代关系。

更准确来说,OpenAI做的是「让同传这件事不再是特权」

过去只有大型企业、政府机构、高端会议才用得起的服务,现在任何开发者都可以把它接进自己的产品。

一个出海电商客服系统,一个跨国视频会议工具,一个在线教育平台,甚至一个个人Chrome插件,都能拥有实时多语言翻译能力。

可以想见,人类同传的价值会向上迁移。文化语境、创意表达、法律精确性、医疗专业性,这些机器短期内还替代不了。

但基础的、高频的、标准化的翻译需求,会被API大规模吞掉。

One More Thing

聊了这么多,三款新模型,如何接入呢?

最快的方式是打开OpenAI Playground(地址附在下方),浏览器里直接测,三款模型都可用,不需要写代码。

想接入自己的项目,官方提供了Codex prompt模板,一键把GPT-Realtime-2接进现有App或新建项目。

成本方面,Whisper最便宜,一小时连续转写约1美元;Translate中等,一小时约2美元。

Realtime-2按token计费,实际成本取决于对话量和推理强度,和上一代价格持平。

感兴趣的友友们,快去体验起来吧~

Playground地址:
https://platform.openai.com/login?next=%2Faudio%2Frealtime


[1]https://x.com/OpenAI/status/2052438194625593804
[2]https://openai.com/index/advancing-voice-intelligence-with-new-models-in-the-api/
[3]https://x.com/jxnlco/status/2052449634266812744

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
再见,掘金!王朝解体,掘金大超市要开张了

再见,掘金!王朝解体,掘金大超市要开张了

体育新角度
2026-05-07 20:35:54
6队仅1冠!欧洲三大杯迎来最弱决赛,却拥有最强主帅

6队仅1冠!欧洲三大杯迎来最弱决赛,却拥有最强主帅

嗨皮看球
2026-05-08 17:26:16
炸裂!奥运冠军发文痛斥76岁恩师:没底线,逼我吃药!

炸裂!奥运冠军发文痛斥76岁恩师:没底线,逼我吃药!

拳击时空
2026-05-08 06:12:50
2013年,金正哲联手张成泽发动朝鲜兵变,因一细节败露,双遭反杀

2013年,金正哲联手张成泽发动朝鲜兵变,因一细节败露,双遭反杀

阿胡
2025-03-11 13:28:03
“汉坦病毒”来势汹汹,建议:每家备好5样东西,关键时刻能救命

“汉坦病毒”来势汹汹,建议:每家备好5样东西,关键时刻能救命

健康科普365
2026-05-08 15:00:16
中国油轮首次在霍尔木兹海峡遇袭,这件事没那么简单

中国油轮首次在霍尔木兹海峡遇袭,这件事没那么简单

戗词夺理
2026-05-07 23:33:26
湿气最怕这菜!三天两头吃一次,体内湿气哗哗排,大肚腩变小了!

湿气最怕这菜!三天两头吃一次,体内湿气哗哗排,大肚腩变小了!

江江食研社
2026-05-07 17:30:11
成都南城都汇5000套房屋查封数年,业主翘首期待办证

成都南城都汇5000套房屋查封数年,业主翘首期待办证

中国房地产报官方号
2026-05-08 15:41:01
浙江宣传评世界杯转播权之争:与其花费巨资追捧海外赛事,不如投入本土足球

浙江宣传评世界杯转播权之争:与其花费巨资追捧海外赛事,不如投入本土足球

澎湃新闻
2026-05-08 12:24:10
秋千坠亡女子身后排队游客发声:该女子同行朋友开玩笑称“没绑紧”吓唬她,事发后其朋友一直哭泣,深感愧疚

秋千坠亡女子身后排队游客发声:该女子同行朋友开玩笑称“没绑紧”吓唬她,事发后其朋友一直哭泣,深感愧疚

洪观新闻
2026-05-07 14:44:22
凌晨突发!东莞银屏山出事了!

凌晨突发!东莞银屏山出事了!

东莞好生活
2026-05-08 16:19:21
“开除军籍、持外国绿卡、骗财骗色”,蒋大为身上标签哪个是真的

“开除军籍、持外国绿卡、骗财骗色”,蒋大为身上标签哪个是真的

寻墨阁
2026-03-25 12:40:35
被央媒点名批评!张本智和进四强仰天长啸 再次挑衅:中国没有特别强

被央媒点名批评!张本智和进四强仰天长啸 再次挑衅:中国没有特别强

漫川舟船
2026-05-08 09:37:22
中国“退步”最快的城市:曾与南京、上海齐名,如今却沦为三线

中国“退步”最快的城市:曾与南京、上海齐名,如今却沦为三线

长风文史
2026-05-08 13:02:57
16岁女孩景区内坠亡,目击者发声,赔偿金额曝光,景区运营仅49天

16岁女孩景区内坠亡,目击者发声,赔偿金额曝光,景区运营仅49天

温柔看世界
2026-05-06 11:48:44
生下三胎仅6个月,方媛官宣喜讯,全网恭喜,让郭富城也始料未及

生下三胎仅6个月,方媛官宣喜讯,全网恭喜,让郭富城也始料未及

一盅情怀
2026-05-08 10:58:52
新款 AirPods Pro 带摄像头版本即将发布!

新款 AirPods Pro 带摄像头版本即将发布!

XCiOS俱乐部
2026-05-08 09:16:39
打起来了!特朗普不宣而战,美军发起斩首行动,伊朗或再次上当

打起来了!特朗普不宣而战,美军发起斩首行动,伊朗或再次上当

张鴘喜欢软软糯糯
2026-05-08 15:12:19
蒋介石在他的日记里坦言:重庆谈判时放走毛泽东,全是因为这2点

蒋介石在他的日记里坦言:重庆谈判时放走毛泽东,全是因为这2点

伦伦妈爱历史
2026-05-02 10:01:48
国际足联要疯了,没有软肋的中国足球已经天下无敌

国际足联要疯了,没有软肋的中国足球已经天下无敌

枫冷慕诗
2026-05-07 11:32:38
2026-05-08 18:28:49
量子位 incentive-icons
量子位
追踪人工智能动态
12590文章数 176461关注度
往期回顾 全部

科技要闻

SK海力士平均奖金600万 工服成相亲神器

头条要闻

中国船东所有的油轮中东遇袭 中方:船上有中国籍船员

头条要闻

中国船东所有的油轮中东遇袭 中方:船上有中国籍船员

体育要闻

他把首胜让给队友,然后用一年时间还清账单

娱乐要闻

古天乐被曝隐婚生子,新娘竟是她

财经要闻

轮到豆包收割了?

汽车要闻

智能双舱大五座SUV 乐道L80将于5月15日正式上市

态度原创

艺术
家居
房产
健康
教育

艺术要闻

探索施密德的油画,感受无法抵挡的艺术魅力!

家居要闻

流动的尺度 打破家的形式主义

房产要闻

豪掷6.8亿拿地!何猷君大手笔投资三亚!

干细胞能让人“返老还童”吗

教育要闻

全年招聘!数量不限!这所学校发布招聘公告

无障碍浏览 进入关怀版