网易首页 > 网易号 > 正文 申请入驻

GPT-5大提升,o3对抗赛夺冠,但OpenAI越来越难让人惊艳了?

0
分享至

(文/观察者网 张广凯 编辑/吕栋)

北京时间8月8日凌晨,备受期待的OpenAI最新大模型ChatGPT-5终于正式发布,就在同时,谷歌举办的首届大模型国际象棋对抗赛中,o3也以4-0完胜Grok 4夺冠。这本该是对OpenAI双喜临门的一天,但作为一款关注度如此之高的产品,网友也很快发现了GPT-5的一些小小的瑕疵。

尽管大模型的能力仍然在快速进步,但其进步幅度越来越难以给人带了惊艳感了。这不是OpenAI自己的问题,甚至某种意义上,这也不是一件坏事,因为是之前人们的预期已经被拉到过高。但无论如何,在现有的算法范式下,AI大模型或许也离瓶颈越来越近了。

GPT-5水平如何?

作为OpenAI今年最受期待又屡屡跳票的重磅产品,ChatGPT-5今天的确给出了一些颇具说服力的测评数据,证明其推理能力有着显著进步。

例如,在数学能力测试AIME 2025上,GPT-5 Pro在开启推理模式并调用工具(Python)的情况下,拿下满分成绩。即使不调用工具,GPT-5 Pro仍能拿下96.7的高分,GPT-5标准版也能拿到94.65分,显著高于o3的88.9分。

编程方面,GPT-5在SWE-bench Verified上得到74.9分,高于o3的69.1和4o的30.8分。

博士水平的科学知识测试GPQA Diamond中,不调用工具的GPT-5 Pro推理模式拿到88.4分,创造新纪录。

多模态方面,GPT-5得到84.2分,比o3的82.9分有小幅提升。

高难度的Humanity's Last Exam(人性终极测试)上,GPT-5 Pro和GPT-5在不调用工具时分别得到30.7和24.8分,较o3的14.7分大幅提升。

大模型竞技场LM Arena的评分也已经出炉,GPT-5横扫所有单项的第一名。

此外,GPT-5推理模式的幻觉数量比o3少了六倍,成本方面则可以减少50-80%的token输出量。

这些数据都证明,GPT-5算得上是一次成功的大版本升级。

但另人尴尬的是,在发布会后,网友迅速发现GPT-5在解一道极其简单的方程时又犯了计算错误:

看起来,GPT-5还是没能解决小数比大小的问题。

而OpenAI发布会PPT里的小瑕疵,也引起了网友热议。大家发现在这张图表里,柱状图的高度出现了明显错误,但并不知道这是人为错误还是由AI生成。

有网友指出,在关于机翼升力原理的回答中,GPT-5也引用了一个广为流传的错误观点。当然,这样的问题归咎于AI未免过于苛刻。

马斯克则“嘴硬”称,Grok 4在ARC-AGI测试中仍然打败了GPT-5。

做题好是不是真的好?

那么,如何评价GPT-5的真实水平,或许日前的大模型国际象棋对抗赛恰好给我们提供了一个很好的参考。

同样在今天凌晨结束的对抗赛上,OpenAI旗下的o3以4-0完胜Grok 4,夺得最终冠军。尽管Grok 4在此前两轮中都表现出色,但在决赛中,随着对局长度增加,Grok 4也开始表现出棋力下降。

例如在第一局中,Grok 4莫名其妙地放弃了自己的象,并且没有获得任何明显的回报,而Grok 4也并未在推理中说明理由。

o3尽管表现相对出色,在昨天的半决赛中还下出过正确率评分100%的棋局,但纵观整个比赛过程,也不乏低级失误。

或许有人会质疑,让AI下棋究竟能证明什么?AI对抗赛的胜负,是不是仅仅取决于它们使用了多大规模的训练数据?DeepSeek下棋不好,但是作诗是不是更好?

事实上,如果只纠结于下棋或者作诗的技能水平,说明并未理解谷歌采用这种比赛形式的逻辑。

此次国际象棋比赛的意义,并非考验大模型的算力,而是考验其推理能力。

如果大模型在接受了大量棋谱训练之后,体现出高超棋力,这只能证明AI的记忆力或者算力强大,而这件事在2017年就已经被AlphaGo证明过了。

但是由于这些通用大模型都没有接受过专门的棋谱训练,因此往往只能在开局阶段凭借记忆下出经典开局。在几个回合之后,大模型已经无法找到人类棋谱作为参考,它们的思维结构也并非像AlphaGo那样专为下棋设计。因此,这时候的AI推理,是跟人类相同的推理方式,通过语言逻辑来推演棋盘变化。

上述无工具的数学测试,起到的也是类似作用:考验AI用人类逻辑进行计算的能力,而不是使用专门的机器算法。

因为无论是AlphaGo也好,还是计算工具也好,这样的AI在特定任务中无比强大,但是却毫无泛化性,不能解决任何其它问题。只有使用人类逻辑推理的模型,才能在人类世界中拥有最好的泛化性。

而在这个维度上,我们可以看到,无论是o3、Grok 4,还是最新升级的GPT-5,哪怕他们大部分时间都能够解决复杂问题,但也还会犯下对人类来说的低级错误。这是现有的Next Token Predicting范式下仍然难以完全克服的问题,也说明它们或许离AGI的最终形态还有遥远距离。

OpenAI显然也不再希望把外界的胃口掉得过高。在本次发布会上,我们可以看到OpenAI花了更多时间介绍GPT-5在垂直场景应用的能力,例如生成小游戏、回答健康问题的能力,这都是为了让AI与人类更好地共存与协作。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
国乒落地北京!王皓被球迷追着合影 莎莎满脸疲惫 林诗栋被老人拍肩鼓励

国乒落地北京!王皓被球迷追着合影 莎莎满脸疲惫 林诗栋被老人拍肩鼓励

颜小白的篮球梦
2026-09-30 08:54:01
仅4.97英寸,这可能是今年最有意思的手机了

仅4.97英寸,这可能是今年最有意思的手机了

刘奔跑
2026-09-29 18:04:12
突发! 只因一句话, 华人被赶下澳洲航班! 同机乘客曝光真相…

突发! 只因一句话, 华人被赶下澳洲航班! 同机乘客曝光真相…

澳微Daily
2026-09-30 10:10:02
公务员严查再升级!这5类行为,已纳入纪检跟踪名单!

公务员严查再升级!这5类行为,已纳入纪检跟踪名单!

细说职场
2026-09-30 12:47:50
中塔领土之争的真相:并不是他不想归还所有土地,而是有人不让还

中塔领土之争的真相:并不是他不想归还所有土地,而是有人不让还

清清河边草
2024-12-16 23:35:12
教师工资不再看县财政脸色!教育部部署,千万老师迎来定心丸

教师工资不再看县财政脸色!教育部部署,千万老师迎来定心丸

陈博世财经
2026-09-30 10:46:47
全世界都被普京骗了?打乌克兰只是幌子,真正目标其实已悄悄布局四年

全世界都被普京骗了?打乌克兰只是幌子,真正目标其实已悄悄布局四年

扶苏聊历史
2026-08-27 16:15:02
蒋介石晚年反复痛悔:一生中最错误的决定,就是抗战结束后没有及时把主力部队撤出东北

蒋介石晚年反复痛悔:一生中最错误的决定,就是抗战结束后没有及时把主力部队撤出东北

磊子讲史
2026-07-20 15:48:31
卖猫的你给我出来,你也没说这猫能长这么大啊

卖猫的你给我出来,你也没说这猫能长这么大啊

铲屎官阿伟
2026-09-22 18:40:07
女孩到地下车库喂猫,小猫躺在经常投喂的地方,网友:它死在了觉得有人疼的地方!

女孩到地下车库喂猫,小猫躺在经常投喂的地方,网友:它死在了觉得有人疼的地方!

超人强动物俱乐部
2026-09-30 05:05:43
突然宣布离队!勇士已经批准,这个内线太脆弱了!

突然宣布离队!勇士已经批准,这个内线太脆弱了!

德译洋洋
2026-09-30 12:55:26
上海医生给老师捐100万!他说:我所有技术、地位,都离不开华山医院

上海医生给老师捐100万!他说:我所有技术、地位,都离不开华山医院

文汇报
2026-09-29 21:43:59
王思聪带女友懒懒环球旅行 欧洲街拍回头率200% 颜值和身材有多绝

王思聪带女友懒懒环球旅行 欧洲街拍回头率200% 颜值和身材有多绝

白鹭爱八卦
2026-09-30 09:31:56
热搜第一!鲍师傅超长蛋挞被指全是皮没蛋液,回应来了!本月北京刚关一店,还剩12家…

热搜第一!鲍师傅超长蛋挞被指全是皮没蛋液,回应来了!本月北京刚关一店,还剩12家…

北京商报
2026-09-29 12:45:42
蔡国庆每月给弟弟蔡军发2万工资,发了20年,一共480万,条件就一个:在家全职照顾得阿尔茨海默症的母亲

蔡国庆每月给弟弟蔡军发2万工资,发了20年,一共480万,条件就一个:在家全职照顾得阿尔茨海默症的母亲

LULU生活家
2026-09-02 19:51:47
视频来了!台湾岛中央山脉清晰可见,专家:显然是对“台独”分裂势力与日菲勾连的警告

视频来了!台湾岛中央山脉清晰可见,专家:显然是对“台独”分裂势力与日菲勾连的警告

环球时报国际
2026-09-29 18:52:11
国防部罕见说重话!直接用出"根除"二字,一旦开打势必连根拔起

国防部罕见说重话!直接用出"根除"二字,一旦开打势必连根拔起

共工之锚
2026-09-29 00:38:23
反华反得断了粮,被美台狠踹一脚,总统下死命令:给中国一个交代

反华反得断了粮,被美台狠踹一脚,总统下死命令:给中国一个交代

甜到你心坎
2026-06-24 04:41:13
安洗莹创下10大女单新纪录!直言想要继续赢下去,完成零瑕疵夺冠

安洗莹创下10大女单新纪录!直言想要继续赢下去,完成零瑕疵夺冠

排球黄金眼
2026-09-30 09:51:35
拍出这张照片的人就是天才!网友:不得不佩服

拍出这张照片的人就是天才!网友:不得不佩服

摄影技巧入门教程
2026-09-18 16:18:32
2026-09-30 14:44:49
观察者网 incentive-icons
观察者网
全球视野,中国关怀
152616文章数 1851371关注度
往期回顾 全部

科技要闻

OpenAI凌晨大上新!新助手dots迎战Muse

头条要闻

特朗普贸易顾问讲到中国上头了:加拿大说客滚出美国

头条要闻

特朗普贸易顾问讲到中国上头了:加拿大说客滚出美国

体育要闻

石雨豪:亚运金牌与背后的十年

娱乐要闻

金鹰这夜,演员争辉,有惊喜,反差

财经要闻

中央财政首次贴息房贷 定向支持首套刚需

汽车要闻

多项黑科技加身/预计40万级 方程豹钛9将于四季度上市

态度原创

健康
房产
时尚
本地
军事航空

刷酸祛痘,为什么有人翻车?

房产要闻

海棠湾这个低密大盘现房取证!这或许是未来高端旅居的新趋势!

老板,我的脑子好像忘在家里了

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

军事要闻

美军最后2500人撤离伊拉克

无障碍浏览 进入关怀版