网易首页 > 网易号 > 正文 申请入驻

OpenAI两项改进让GPT-5.6 Sol在AI基准ARC-AGI-3上提分188%

0
分享至

来源:市场资讯

(来源:IT之家)

IT之家 7 月 31 日消息,OpenAI 公司今天(7 月 31 日)发布公告,宣布通过改进框架,让 GPT-5.6 Sol 模型的 ARC-AGI-3 提高了 188%。


IT之家注:ARC-AGI-3 由 ARC Prize 团队推出的全新交互式推理基准测试,是目前全球公认衡量 AI 通用智能(AGI)最严苛、最顶尖的交互式推理评测基准。

该基准完全打破了传统 AI“做题”和知识问答的静态测试模式,将 AI 直接扔进一个完全陌生的“游戏环境”中,来评估其是否具备像人类一样的实时探索、学习与自适应能力。


在未调整优化前,GPT-5.6 Sol 在 ARC-AGI-3 基准测试中的得分为 7.8%,而 GPT-5.5 模型的得分只有 0.4%。

OpenAI 公司在复盘后发现,GPT-5.6 系列模型官方框架存在 2 个影响 GPT-5.6 Sol 表现的机制:

针对上述问题,OpenAI 提出了推理保留(inference preservation)和上下文压缩(context compression)两个解决方案。

推理保留方面,OpenAI 使用 Responses API 重新实现 ARC-AGI-3 测试框架,对于 GPT-5.6,只需传入前一次 response ID,即可在工具调用和多轮交互中自动保留推理。


OpenAI 表示在启用推理保留后,GPT-5.6 不必每轮重新解释游戏,从而减少每次动作前花在思考上的时间,模型保留过去想法后,更善于随时间学习,并采用更连贯的策略。

在上下文压缩方面,官方 ARC-AGI-3 框架在对话上下文超过 175000 个字符后,会丢弃最早消息。OpenAI 称,滚动截断有 2 个缺点:模型会丢失早期观察和动作;模型在任务的大部分时间里会带着更满的上下文窗口运行,这可能轻微损害表现。

启用上下文压缩后,GPT-5.6 Sol 在较长任务中更能保留对每个游戏的已学信息,并以更少输出 token 获得更高得分。


而在使用官方 harness 后,GPT-5.6 Sol 在 ARC-AGI-3 的得分为 13.3%;在启用推理保留(inference preservation)和上下文压缩(context compression)后,GPT-5.6 Sol 在 Token 输出数量降低至六分之一的同时,得分达到 38.3%,成绩增长 188.42%。


harness(常被称为驭缰工程)是指包在大模型外部、为其提供运行环境、工具集成、规则约束与反馈机制的整套系统架构。

如果把强大的 AI 模型比作一匹充满力量但容易失控的烈马,那么 harness 就是它的缰绳、马鞍与骑手路线,不改变模型本身的架构,而是决定模型如何被安全、可靠地驾驭并真正完成复杂工作。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
54%民调断层第一,弹劾门槛却降到14票,莎拉越受欢迎,就越危险

54%民调断层第一,弹劾门槛却降到14票,莎拉越受欢迎,就越危险

健身狂人
2026-10-19 07:23:42
属蛇人,10月18-28日家里有人离开,别哭!是老天帮你清除负担

属蛇人,10月18-28日家里有人离开,别哭!是老天帮你清除负担

阿天爱旅行
2026-10-18 18:42:24
iPhone Duo首发日不卖现货!苹果要求零售员工劝退无预约顾客

iPhone Duo首发日不卖现货!苹果要求零售员工劝退无预约顾客

快科技
2026-10-19 09:00:07
21%的出口增速、1.1%的消费增速,没有内需,外需也走不远

21%的出口增速、1.1%的消费增速,没有内需,外需也走不远

子业一说财经
2026-10-18 11:08:38
阿塞拜疆独立后,为什么没有回归祖国呢?原因主要是三点

阿塞拜疆独立后,为什么没有回归祖国呢?原因主要是三点

老达子
2026-10-16 06:20:04
女主播在缅甸视频流出:状态涣散,眼神无助,可惜了这么好的身材

女主播在缅甸视频流出:状态涣散,眼神无助,可惜了这么好的身材

皮蛋儿电影
2026-09-23 10:51:15
郭士强现场见证!2米21国手中锋回归CBA首秀8分3犯攻守两端遭压制

郭士强现场见证!2米21国手中锋回归CBA首秀8分3犯攻守两端遭压制

狼叔评论
2026-10-18 23:28:26
2026乌镇戏剧节,“江郎才尽”的黄磊,让所有人见识到了他的江湖地位

2026乌镇戏剧节,“江郎才尽”的黄磊,让所有人见识到了他的江湖地位

娱乐圈十三太保
2026-10-17 19:44:22
房价很大可能重走1998年老路!所有人一定要提前做好心理准备

房价很大可能重走1998年老路!所有人一定要提前做好心理准备

偷喝一口奶
2026-09-11 08:36:30
在苏州,你可以说独墅湖的房子不好卖,但你不能说独墅湖的房子菜

在苏州,你可以说独墅湖的房子不好卖,但你不能说独墅湖的房子菜

说故事的阿袭
2026-10-19 05:48:41
梅艳芳骨灰疑被寺庙清洁工作人员“阿强”盗走!7月,该男子曾离开海会塔,形迹可疑走入后山树林不知所踪,事发后已离开香港前往东南亚

梅艳芳骨灰疑被寺庙清洁工作人员“阿强”盗走!7月,该男子曾离开海会塔,形迹可疑走入后山树林不知所踪,事发后已离开香港前往东南亚

都市快报橙柿互动
2026-10-18 20:57:27
大型打脸现场!穆里尼奥自相矛盾!皇马双核名不副实

大型打脸现场!穆里尼奥自相矛盾!皇马双核名不副实

澜归序
2026-10-19 08:21:24
67年徐帅怀仁堂拍桌:我不需要你保!毛主席笑:老实人也发火了

67年徐帅怀仁堂拍桌:我不需要你保!毛主席笑:老实人也发火了

旧书卷里的长安
2026-10-18 20:06:08
乌克兰首都基辅响起强烈爆炸声

乌克兰首都基辅响起强烈爆炸声

上观新闻
2026-10-19 06:21:29
“100元牵手拥抱,300元起可身体接触”,记者暗访“搭子”地下服

“100元牵手拥抱,300元起可身体接触”,记者暗访“搭子”地下服

涵豆说娱
2026-10-13 07:47:12
悲剧!信阳23岁程梦圆终于找到,尸体用树杈子捆住,用无人机操作吊下来,14天救援收工

悲剧!信阳23岁程梦圆终于找到,尸体用树杈子捆住,用无人机操作吊下来,14天救援收工

火山詩话
2026-08-10 16:49:19
2块钱一瓶的维生素B2!是糖尿病的“克星”?可惜很多人都不知道

2块钱一瓶的维生素B2!是糖尿病的“克星”?可惜很多人都不知道

医学科普汇
2026-10-18 18:30:12
为什么你的AI输出总是很平庸?问题可能出在这三步

为什么你的AI输出总是很平庸?问题可能出在这三步

字节漫游指南
2026-10-18 02:13:14
凯乐石怎么卖这么贵?

凯乐石怎么卖这么贵?

鹿鸣财经
2026-10-17 11:19:03
打平即夺冠,却0-3被打爆!蓉城5个冠军点全飞,下轮还能稳吗?

打平即夺冠,却0-3被打爆!蓉城5个冠军点全飞,下轮还能稳吗?

宝哥精彩赛事
2026-10-19 08:14:58
2026-10-19 09:36:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
5097559文章数 9801关注度
往期回顾 全部

科技要闻

王晟:近千亿资金涌入后 具身智能开始退烧

头条要闻

海南一村民称"祖辈百年古树被扣押后遭转赠" 官方通报

头条要闻

海南一村民称"祖辈百年古树被扣押后遭转赠" 官方通报

体育要闻

别在我的地盘夺冠!海港队史首次双杀蓉城

娱乐要闻

郭麒麟被传领证,女方戳破谣言

财经要闻

调查:四川多县用硫磺熏笋出售

汽车要闻

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

数码
时尚
教育
游戏
健康

数码要闻

不搞混合架构:Intel下代CPU做到16个纯大核!

重阳寻香:一炉香,一枚囊,她们以手传香

教育要闻

三角形ACD的面积为5,求阴影部分面积

仅发售两个月后 《轮回之兽》不再有重大更新支持

看着很健康的人,怎么会突然猝死?

无障碍浏览 进入关怀版