网易首页 > 网易号 > 正文 申请入驻

一夜之间,GPT-5.6 Sol被OpenAI加速了14倍

0
分享至

来源:市场资讯

(来源:机器之心)

机器之心编辑部

AI 开始卷信息不对等了?

8 月 14 日凌晨,OpenAI 联合 AI 芯片厂商 Cerebras 正式预览了其旗舰模型 GPT-5.6 Sol 的全新服务层级「超高速模式」(Ultrafast Mode)。

在该模式下,GPT-5.6 Sol 的输出速度最高可达 750 tokens/s,相比目前 Standard(标准)模式约 53 tokens/s 的推理基线,速度提升最高达 14 倍,同时不降低任何质量。横向对比的话,GPT-5.6 Sol 加速后比 Fable 5 快 11 倍,比 Opus 4.8 在 Fast 模式下快 5 倍。

Ultrafast 模式将率先在 OpenAI API 中推出,当前已面向部分客户推出有限预览版。


为此,OpenAI 与 Cerebras 还对当前先进 AI 大模型现在的速度和智力对比拉了个表格,GPT-5.6 Sol Ultrafast 处于绝对领先的位置:


在 Cerebras 的博客中,工程人员介绍了在「人类最后的考试」(Humanity's Last Exam, HLE)上进行的测试,他们把 Ultrafast 后的模型与直接竞对进行了对比。我们知道,HLE 是一项具有挑战性的模型基准,包含 2500 道题,通常只有化学、经济学和文学等领域的博士才能解答。

GPT-5.6 Sol 在超快模式下仅用 11 小时 11 分钟就回答了全部问题。而 Claude Fable 5 则需要 78 小时 27 分钟,也就是超过三天的连续计算才能得出相同的结论。GPT 超快模式仅用一个工作日就完成了人类知识的前沿领域,在准确率相近的同时,速度几乎是 Claude Fable 的 7 倍。


随着模型能力的不断提升,快速推理的应用范围也会扩大。GPT-5.6 Sol 是 OpenAI 迄今为止在法律文书、金融模型和工程报告方面表现最佳的模型。在 GDP-Val(衡量经济价值知识工作任务的基准)上,Ultrafast 实现了 5.6 倍的端到端速度提升,且质量未受影响,充分展现了更快的推理速度如何加速经济价值工作的开展。


更快的 AI 处理速度为新兴工作流增加了不少可能性,人们现在可以将智能体部署到问题的关键路径上。OpenAI 为你列举了一些应用场景:

  • 事件响应和可靠性:当关键系统发生故障时,AI 分析应用程序日志、最近的代码更改和工程师报告,以确定可能的原因,并在故障仍在发生时帮助准备修复方案。

  • 金融研究与安全:在市场形势瞬息万变的情况下,分析市场信号、评估交易并识别可疑活动。

  • 客户支持和语音:实时解决复杂的客户问题,即使找到答案需要多个步骤或系统,也不会中断对话。

  • 商务:在购物者还在犹豫不决时,回答产品问题、检查库存、个性化推荐并解决结账问题,避免犹豫演变成放弃购物车。

  • 实时研究和实验:将以前需要一夜才能完成的研究变成交互式工作会议,让团队测试想法、检查结果、调整方法,并在不中断工作流程的情况下进行另一次实验。

在 OpenAI 内部,开发人员在超快速模式下测试了 GPT-5.6 Sol,事件响应是使用 Ultrafast 的一个例子。当警报触发时,工程师需要在系统和证据仍在变化的情况下构建准确的事件图景。借助 Sol 级别的智能,团队可以快速读取日志、分析跟踪信息、汇总对话、确定下一步检查,并协助准备或验证修复方案。Ultrafast 模式缩短了从观察到信号、验证假设到选择下一步行动之间的延迟,同时工程师仍然负责判断和部署。

在研究方面,OpenAI 团队使用 Ultrafast 来快速搜索知识库、查询数据,并快速收集、整理和汇总来自不同工具的信息。以往研究中常见的流程是,团队成员在夜间启动一批实验,并在第二天早上查看结果。而有了 Ultrafast,发现的流程可以缩短,从而支持在工作日内进行多次迭代。

Ultrafast 模式的突破在于打破了传统 GPU 集群在大模型推理解码阶段的内存带宽瓶颈,其实现主要依赖于 Cerebras 的晶圆级硬件架构。


在 AI 芯片厂商行列中,Cerebras 的解决方案独树一帜:其历代芯片采用整片晶圆制成,在单片上集成了海量计算核心与超高速互联网络。

传统 GPU 在运行大模型自回归解码生成 Token 时,受限于显存带宽,需要不断将庞大的模型权重在片外 HBM 和计算核心之间往返搬运;同时多卡切分还会带来跨芯片互连(PCIe/NVLink)的通信延迟。

而每块 Cerebras 最新的晶圆级芯片(WSE-3)集成了 4 万亿晶体管,125 petaflops 的 AI 算力和高达 44 GB 的片上高速 SRAM,模型参数直接全部常驻在超高带宽的片上 SRAM 中,避免了反复从片外内存加载权重的等待时间。

当然,GPT-5.6 Sol 作为前沿旗舰模型,完整参数量显然远超芯片容量。Cerebras 还有「多晶圆流水线并行(Pipelined across wafers)」机制,其将模型的各网络层分别分布于多颗晶圆上,每层参数常驻于各自芯片的 SRAM 中,能让 Token 在晶圆间无缝流水传输。

对于众多大模型用户来说,旗舰模型 14 倍速会意味着以前不少必须切换次级模型(如 Luna 和 Terra)的任务现在可以直接放心地满血跑,对于需要多轮工具调用、代码生成排错和复杂链式思考的 Agent 任务,原本需要几小时的流程可压缩至几分钟完成。

更快的速度或许也意味着我们使用 AI 的方式发生转变:


AI 社区里,人们已经在期待 Luna 和 Terra 版的超高速模式了,就是不知道 Cerebras 的芯片是否够用。

参考内容:

https://openai.com/index/previewing-ultrafast/

https://www.cerebras.ai/blog/accelerating-gpt-5-6-sol-ultrafast-with-openai

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中方这次绝不救市!日元抛售美债引爆死亡螺旋,美日彻底玩砸了!

中方这次绝不救市!日元抛售美债引爆死亡螺旋,美日彻底玩砸了!

共工之锚
2026-08-14 00:11:00
段誉和乔峰一人喝了20斤酒,放现在什么水平?换你也能喝下

段誉和乔峰一人喝了20斤酒,放现在什么水平?换你也能喝下

武侠百晓生
2026-08-14 00:16:22
郭德纲一句"妈咪妈咪哄",掀不起风浪

郭德纲一句"妈咪妈咪哄",掀不起风浪

凤眼论
2026-08-14 10:04:37
中疾控:7月报告新增新冠确诊病例52.2万例,其中重症487例

中疾控:7月报告新增新冠确诊病例52.2万例,其中重症487例

界面新闻
2026-08-13 22:55:41
二三十岁的青年赵本山,也是难得一见

二三十岁的青年赵本山,也是难得一见

娱你同欢
2026-08-13 20:48:06
中方不救,日本惨败!

中方不救,日本惨败!

戎评
2026-08-13 14:10:13
11岁广州“小孩哥”暑假在沙面为游客拍照,一个月赚1200元,本人回应:“比刷题好玩”

11岁广州“小孩哥”暑假在沙面为游客拍照,一个月赚1200元,本人回应:“比刷题好玩”

城事特搜
2026-08-13 21:44:01
才5天就崩盘!美国左翼女将倒在终点线前:22%优势一夜蒸发

才5天就崩盘!美国左翼女将倒在终点线前:22%优势一夜蒸发

而长终
2026-08-14 02:30:09
21岁美女校花爱上偏执男,担心女友给自己戴绿帽,联合2人将女友勒死

21岁美女校花爱上偏执男,担心女友给自己戴绿帽,联合2人将女友勒死

胖胖侃咖
2026-08-13 08:00:10
3-0!张本美和太强了 国乒主力爆大冷:6人进16强 日本名将1-3爆冷

3-0!张本美和太强了 国乒主力爆大冷:6人进16强 日本名将1-3爆冷

林子说事
2026-08-14 06:11:54
杨元庆:联想正成为全球AI基础设施领域领导者 今年营收将破1000亿美元

杨元庆:联想正成为全球AI基础设施领域领导者 今年营收将破1000亿美元

快科技
2026-08-13 16:51:10
胖东来撤店,周边商户如同晴天霹雳,有人刚续签三年房租,全完了

胖东来撤店,周边商户如同晴天霹雳,有人刚续签三年房租,全完了

华商天下
2026-08-13 20:55:22
今日重要赛事!8月14日,央视CCTV5直播乒乓球,CCTV5+节目表

今日重要赛事!8月14日,央视CCTV5直播乒乓球,CCTV5+节目表

薇说体育
2026-08-14 10:41:59
抗癌26年,李雪健的双耳,已经完全听不见了……

抗癌26年,李雪健的双耳,已经完全听不见了……

都市快报橙柿互动
2026-08-12 23:53:24
厨房里3种调料,导致中国人死亡率全球第一,专家:不能再这么吃

厨房里3种调料,导致中国人死亡率全球第一,专家:不能再这么吃

看世界的人
2026-08-02 16:21:29
俄媒:泽连斯基求美国卖导弹算盘打错了,几套“爱国者”救不了他

俄媒:泽连斯基求美国卖导弹算盘打错了,几套“爱国者”救不了他

徐云流浪中国
2026-08-14 11:06:44
英国刚没收敬业钢厂,转头喊比亚迪来建厂,比亚迪一句话让英国彻底破防

英国刚没收敬业钢厂,转头喊比亚迪来建厂,比亚迪一句话让英国彻底破防

浯江孤舟
2026-08-13 13:09:19
仅差182分!库里迎来神级里程碑,威少的纪录也保不住了

仅差182分!库里迎来神级里程碑,威少的纪录也保不住了

世界体育圈
2026-08-13 18:53:03
“苟住就是胜利”的含金量还在上升!

“苟住就是胜利”的含金量还在上升!

另子维爱读史
2026-08-13 21:10:06
今起正式进入末伏,四川多地热到37℃;这轮高温还会持续吗?最新预测来了

今起正式进入末伏,四川多地热到37℃;这轮高温还会持续吗?最新预测来了

掌上金牛
2026-08-14 08:20:13
2026-08-14 12:04:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4420395文章数 9274关注度
往期回顾 全部

科技要闻

DeepSeek大招:开发者狂喜 普通人用不明白

头条要闻

父亲来杭州养老走失14小时 女儿找了1夜哭着憋出3个字

头条要闻

父亲来杭州养老走失14小时 女儿找了1夜哭着憋出3个字

体育要闻

威少已下线,带走一份真

娱乐要闻

郭德纲会犯这种错,是因为被捧的太高

财经要闻

梁文锋,开始算账了

汽车要闻

售14.38万元 方程豹钛3 510KM后驱闪充版上市

态度原创

时尚
本地
家居
亲子
房产

这4种版型的牛仔裤,真的很好穿!

本地新闻

黄景藏用半刀泥刻瓷都魂

家居要闻

2026建博会(广州) 公装联探展交流活动

亲子要闻

充气城堡速通,笑不活了

房产要闻

金茂、招商,海南多个岗位招人!

无障碍浏览 进入关怀版