网易首页 > 网易号 > 正文 申请入驻

OpenAI两项改进让GPT-5.6 Sol在AI基准ARC-AGI-3上提分188%

0
分享至

来源:市场资讯

(来源:IT之家)

IT之家 7 月 31 日消息,OpenAI 公司今天(7 月 31 日)发布公告,宣布通过改进框架,让 GPT-5.6 Sol 模型的 ARC-AGI-3 提高了 188%。


IT之家注:ARC-AGI-3 由 ARC Prize 团队推出的全新交互式推理基准测试,是目前全球公认衡量 AI 通用智能(AGI)最严苛、最顶尖的交互式推理评测基准。

该基准完全打破了传统 AI“做题”和知识问答的静态测试模式,将 AI 直接扔进一个完全陌生的“游戏环境”中,来评估其是否具备像人类一样的实时探索、学习与自适应能力。


在未调整优化前,GPT-5.6 Sol 在 ARC-AGI-3 基准测试中的得分为 7.8%,而 GPT-5.5 模型的得分只有 0.4%。

OpenAI 公司在复盘后发现,GPT-5.6 系列模型官方框架存在 2 个影响 GPT-5.6 Sol 表现的机制:

针对上述问题,OpenAI 提出了推理保留(inference preservation)和上下文压缩(context compression)两个解决方案。

推理保留方面,OpenAI 使用 Responses API 重新实现 ARC-AGI-3 测试框架,对于 GPT-5.6,只需传入前一次 response ID,即可在工具调用和多轮交互中自动保留推理。


OpenAI 表示在启用推理保留后,GPT-5.6 不必每轮重新解释游戏,从而减少每次动作前花在思考上的时间,模型保留过去想法后,更善于随时间学习,并采用更连贯的策略。

在上下文压缩方面,官方 ARC-AGI-3 框架在对话上下文超过 175000 个字符后,会丢弃最早消息。OpenAI 称,滚动截断有 2 个缺点:模型会丢失早期观察和动作;模型在任务的大部分时间里会带着更满的上下文窗口运行,这可能轻微损害表现。

启用上下文压缩后,GPT-5.6 Sol 在较长任务中更能保留对每个游戏的已学信息,并以更少输出 token 获得更高得分。


而在使用官方 harness 后,GPT-5.6 Sol 在 ARC-AGI-3 的得分为 13.3%;在启用推理保留(inference preservation)和上下文压缩(context compression)后,GPT-5.6 Sol 在 Token 输出数量降低至六分之一的同时,得分达到 38.3%,成绩增长 188.42%。


harness(常被称为驭缰工程)是指包在大模型外部、为其提供运行环境、工具集成、规则约束与反馈机制的整套系统架构。

如果把强大的 AI 模型比作一匹充满力量但容易失控的烈马,那么 harness 就是它的缰绳、马鞍与骑手路线,不改变模型本身的架构,而是决定模型如何被安全、可靠地驾驭并真正完成复杂工作。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
刚润美国就被铁拳暴击!痛骂“垃圾国家”,昔日公知大V沦为全网最搞笑的电子宠物!

刚润美国就被铁拳暴击!痛骂“垃圾国家”,昔日公知大V沦为全网最搞笑的电子宠物!

军机不可泄漏
2026-10-17 17:58:09
奢靡荒唐的白马会所:性交易泛滥,让无数富婆挥金如土

奢靡荒唐的白马会所:性交易泛滥,让无数富婆挥金如土

天启大世界
2026-10-13 17:17:54
太意外了!排名世界第一的松岛辉空,崇拜的偶像竟是国乒三位高手

太意外了!排名世界第一的松岛辉空,崇拜的偶像竟是国乒三位高手

生活新鲜市
2026-10-19 07:25:35
建设银行存款利率调整,20万存1年,到期能拿多少利息?答案来了

建设银行存款利率调整,20万存1年,到期能拿多少利息?答案来了

江启
2026-10-19 14:38:15
嫁到乌克兰的华人感慨:别听媒体吹牛,乌克兰相当于我国三线城市

嫁到乌克兰的华人感慨:别听媒体吹牛,乌克兰相当于我国三线城市

北海史记
2026-10-15 08:23:54
本田新车官宣:11月27日,即将首发亮相!

本田新车官宣:11月27日,即将首发亮相!

科技堡垒
2026-10-19 11:43:35
拖欠员工345万,却砸钱送女儿韩国出道:用打工人血汗钱给女儿铺星路

拖欠员工345万,却砸钱送女儿韩国出道:用打工人血汗钱给女儿铺星路

城事堂
2026-10-17 20:43:15
20岁小伙奔驰试驾70次不买,女销售:你下单,我任你处置,他买后傻眼

20岁小伙奔驰试驾70次不买,女销售:你下单,我任你处置,他买后傻眼

如烟若梦
2025-08-25 18:45:03
二十届五中全会10月26日召开!核心聚焦这一项大事

二十届五中全会10月26日召开!核心聚焦这一项大事

李博世财经
2026-10-19 10:08:58
CBA首轮打完,不得不说,最尴尬的是郭士强

CBA首轮打完,不得不说,最尴尬的是郭士强

球毛鬼胎
2026-10-19 09:03:08
商务部新闻发言人就英方称将共同应对中国汽车产业占主导地位事答记者问

商务部新闻发言人就英方称将共同应对中国汽车产业占主导地位事答记者问

界面新闻
2026-10-19 22:00:42
吃相难看!刘欢家属骗局曝光,吴越也深受其害,官媒下场了

吃相难看!刘欢家属骗局曝光,吴越也深受其害,官媒下场了

不似少年游
2026-10-19 14:58:29
中国面临两大战略缺口:一个是“台湾”问题,另一个曾动用300万大军才勉强堵住的致命防线

中国面临两大战略缺口:一个是“台湾”问题,另一个曾动用300万大军才勉强堵住的致命防线

林杰论事
2026-10-18 15:37:07
严查违法变道等!上海警方出手了

严查违法变道等!上海警方出手了

看看新闻Knews
2026-10-19 19:33:33
3大瓜!翟天临当爸、郭麒麟结婚、劣迹网红复出捞金,风波不断

3大瓜!翟天临当爸、郭麒麟结婚、劣迹网红复出捞金,风波不断

两只米老鼠
2026-10-18 18:10:00
提醒:今年冬天可能是50年以来少见的反常冬天,有5大特点

提醒:今年冬天可能是50年以来少见的反常冬天,有5大特点

健身狂人
2026-10-19 04:47:41
5年2.09亿美元!米勒正式续约黄蜂:成为新核心率队冲击季后赛

5年2.09亿美元!米勒正式续约黄蜂:成为新核心率队冲击季后赛

罗说NBA
2026-10-20 05:31:50
门口放两样东西,再穷也能翻身!不是迷信是真本事

门口放两样东西,再穷也能翻身!不是迷信是真本事

娱乐圈见解说
2026-10-18 06:34:41
39岁的留学生妈妈柯某,在英国结识24岁印度留学生,结果让人愤怒

39岁的留学生妈妈柯某,在英国结识24岁印度留学生,结果让人愤怒

岁月有情1314
2026-10-19 07:03:28
上海演员吴越凌晨发文怒斥:这位“花姐”骗了多少人的钱?请如数奉还!

上海演员吴越凌晨发文怒斥:这位“花姐”骗了多少人的钱?请如数奉还!

上观新闻
2026-10-18 09:53:50
2026-10-20 06:03:00
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
5113252文章数 9804关注度
往期回顾 全部

科技要闻

王晟:近千亿资金涌入后 具身智能开始退烧

头条要闻

中国留学生披旭日旗事件最新进展:目前已被遣返

头条要闻

中国留学生披旭日旗事件最新进展:目前已被遣返

体育要闻

从NBA退役10年后,他真去警局上班了

娱乐要闻

奚梦瑶回应重返维密:还是很开心的

财经要闻

黄奇帆之子往事:从广微系到魏桥的跳跃

汽车要闻

不知道二代海鸥多好玩? 上赛道跑两圈 很过瘾的

态度原创

家居
本地
时尚
艺术
公开课

家居要闻

2026建博会(广州) 公装联探展交流活动

本地新闻

因新荣记出圈,这座浙东小城才是吃货天堂

中国第一位女指挥:97岁,不退休,不退场

艺术要闻

俄罗斯90后摄影师比莉娅娃英这组写真,看完我直接跪了!最后一张绝了!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版