网易首页 > 网易号 > 正文 申请入驻

OpenAI两项改进让GPT-5.6 Sol在AI基准ARC-AGI-3上提分188%

0
分享至

来源:市场资讯

(来源:IT之家)

IT之家 7 月 31 日消息,OpenAI 公司今天(7 月 31 日)发布公告,宣布通过改进框架,让 GPT-5.6 Sol 模型的 ARC-AGI-3 提高了 188%。


IT之家注:ARC-AGI-3 由 ARC Prize 团队推出的全新交互式推理基准测试,是目前全球公认衡量 AI 通用智能(AGI)最严苛、最顶尖的交互式推理评测基准。

该基准完全打破了传统 AI“做题”和知识问答的静态测试模式,将 AI 直接扔进一个完全陌生的“游戏环境”中,来评估其是否具备像人类一样的实时探索、学习与自适应能力。


在未调整优化前,GPT-5.6 Sol 在 ARC-AGI-3 基准测试中的得分为 7.8%,而 GPT-5.5 模型的得分只有 0.4%。

OpenAI 公司在复盘后发现,GPT-5.6 系列模型官方框架存在 2 个影响 GPT-5.6 Sol 表现的机制:

针对上述问题,OpenAI 提出了推理保留(inference preservation)和上下文压缩(context compression)两个解决方案。

推理保留方面,OpenAI 使用 Responses API 重新实现 ARC-AGI-3 测试框架,对于 GPT-5.6,只需传入前一次 response ID,即可在工具调用和多轮交互中自动保留推理。


OpenAI 表示在启用推理保留后,GPT-5.6 不必每轮重新解释游戏,从而减少每次动作前花在思考上的时间,模型保留过去想法后,更善于随时间学习,并采用更连贯的策略。

在上下文压缩方面,官方 ARC-AGI-3 框架在对话上下文超过 175000 个字符后,会丢弃最早消息。OpenAI 称,滚动截断有 2 个缺点:模型会丢失早期观察和动作;模型在任务的大部分时间里会带着更满的上下文窗口运行,这可能轻微损害表现。

启用上下文压缩后,GPT-5.6 Sol 在较长任务中更能保留对每个游戏的已学信息,并以更少输出 token 获得更高得分。


而在使用官方 harness 后,GPT-5.6 Sol 在 ARC-AGI-3 的得分为 13.3%;在启用推理保留(inference preservation)和上下文压缩(context compression)后,GPT-5.6 Sol 在 Token 输出数量降低至六分之一的同时,得分达到 38.3%,成绩增长 188.42%。


harness(常被称为驭缰工程)是指包在大模型外部、为其提供运行环境、工具集成、规则约束与反馈机制的整套系统架构。

如果把强大的 AI 模型比作一匹充满力量但容易失控的烈马,那么 harness 就是它的缰绳、马鞍与骑手路线,不改变模型本身的架构,而是决定模型如何被安全、可靠地驾驭并真正完成复杂工作。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
有个体态娇小的妻子是什么体验?网友:终于知道腰间盘为啥突出了

有个体态娇小的妻子是什么体验?网友:终于知道腰间盘为啥突出了

夜深爱杂谈
2026-08-05 21:13:33
不打了!中国男篮VS卡塔尔!传来3好消息1坏消息,男篮赢球有戏

不打了!中国男篮VS卡塔尔!传来3好消息1坏消息,男篮赢球有戏

春日筆記
2026-08-20 05:07:41
没完没了!韩红风波又起,央视发布视频后,韩红所有糟心事都来了

没完没了!韩红风波又起,央视发布视频后,韩红所有糟心事都来了

刘拕说体坛
2026-07-24 17:48:25
除了性生活,就是打麻将!2000多县城普通人的生活现状只能这样?

除了性生活,就是打麻将!2000多县城普通人的生活现状只能这样?

流史岁月
2026-07-06 18:00:06
长江十年行 | 文润大江,解锁千年文脉的焕新密码

长江十年行 | 文润大江,解锁千年文脉的焕新密码

现代快报
2026-08-20 09:43:19
外国游客因护照上的“马丘比丘纪念章”被航空公司拒绝登机

外国游客因护照上的“马丘比丘纪念章”被航空公司拒绝登机

曼谷陈大叔
2026-08-18 15:13:57
53岁张惠妹破200斤,满身横肉、臀大腰圆,意外撞身“石矶娘娘”

53岁张惠妹破200斤,满身横肉、臀大腰圆,意外撞身“石矶娘娘”

文刀贰
2026-08-19 15:41:46
为什么东南亚国家总想在中美间玩平衡术?

为什么东南亚国家总想在中美间玩平衡术?

小眼睛小世界
2026-08-20 04:16:05
细思极恐!2男子应聘进深圳某快递公司,衣服里藏摄像头偷拍!3天超2万人信息被泄露

细思极恐!2男子应聘进深圳某快递公司,衣服里藏摄像头偷拍!3天超2万人信息被泄露

南方都市报
2026-08-20 10:59:58
阿森纳7500万豪购!巴西铁腰为何成真香之选?

阿森纳7500万豪购!巴西铁腰为何成真香之选?

糯米饭122
2026-08-21 00:21:02
60年后 ,伊朗和俄罗斯用行动证明,赫鲁晓夫当年的策略是正确的

60年后 ,伊朗和俄罗斯用行动证明,赫鲁晓夫当年的策略是正确的

贱议你读史
2026-08-01 22:40:32
selina和老公接娃放学,晚上10点吃夜宵胖成大妈,开28万车子节俭

selina和老公接娃放学,晚上10点吃夜宵胖成大妈,开28万车子节俭

椰黄娱乐
2026-08-19 16:11:19
发现没:只要孩子考上外地公务员,不管多远,父母都舍不得拦着

发现没:只要孩子考上外地公务员,不管多远,父母都舍不得拦着

户外阿毽
2026-08-14 01:57:50
恶性肿瘤去世者越来越多,医生苦劝:宁可坐着不动,别做六事

恶性肿瘤去世者越来越多,医生苦劝:宁可坐着不动,别做六事

健康科普365
2026-08-20 09:19:18
北宋有项特殊制度,外派到四川做官不能带家眷妻室,不少官员苦不堪言,一名地方知府反复琢磨之后想出奇招

北宋有项特殊制度,外派到四川做官不能带家眷妻室,不少官员苦不堪言,一名地方知府反复琢磨之后想出奇招

磊子讲史
2026-08-20 19:36:53
2500万人出走,变态的旅拍彻底凉了!资本再也割不动年轻人了

2500万人出走,变态的旅拍彻底凉了!资本再也割不动年轻人了

墨兰史书
2026-08-21 00:00:14
特朗普想跑都没机会,三千亿赔款一分不能少?美媒:最终代价降临

特朗普想跑都没机会,三千亿赔款一分不能少?美媒:最终代价降临

凝水文秋
2026-08-16 08:14:25
俄罗斯发现圣者遗物

俄罗斯发现圣者遗物

战争研究所
2026-08-20 23:27:22
徐向前晚年透露:若无西安事变,红军早已开启第二次长征

徐向前晚年透露:若无西安事变,红军早已开启第二次长征

芳芳历史烩
2026-08-18 19:09:42
批复同意!云南将建设这一项目

批复同意!云南将建设这一项目

昆明信息港
2026-08-20 21:35:28
2026-08-21 02:04:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4495198文章数 9329关注度
往期回顾 全部

科技要闻

快手Q2研发狂烧45亿:如何面对双面夹击

头条要闻

10岁男童两次校外徘徊后溺亡 监控显示多次遭老师殴打

头条要闻

10岁男童两次校外徘徊后溺亡 监控显示多次遭老师殴打

体育要闻

46岁小罗抵达意大利 将为拉文纳征战意丙

娱乐要闻

任重晒全家福官宣二胎喜讯

财经要闻

许家印被判处无期 恒大集团被罚88.2亿

汽车要闻

比总部还大?比亚迪藏在上海虹桥的巨无霸闪充站!

态度原创

手机
健康
本地
教育
公开课

手机要闻

华为OPPO阔直板新机齐曝光:麒麟9030S硬刚200Mp大底,16:9要成新主流?

脊柱侧弯到什么程度,需要戴支具?

本地新闻

先导片|攀登不止,让不同的故事在此连接

教育要闻

填写指南!山东综合素质评价云平台(山东教育云)!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版