网易首页 > 网易号 > 正文 申请入驻

马斯克押注的"预言测试",自家AI差点垫底

0
分享至


2026年3月29日,一份叫FutureX的全球榜单更新了。北京中关村学院信息智能团队做的Milkyway系统,拿了60.9分,直接登顶。

作为参照,马斯克旗下xAI的Grok-4,只拿到25.9分。Milkyway比它高出一倍还多——而Grok-4曾经是这榜单的首期冠军。

陈天桥团队的MiroFlow框架(用的GPT-5),也有57.5分。它在最难的Level 4还能逼近50分,对复杂不确定性的把控相当稳。

智谱GLM-5-thinking 37.3分,DeepSeek-V3.2-thinking 31.2分,阿里Qwen-3.5-plus-thinking 26.9分排第17。

Grok-4以25.9分落在第18位。马斯克说过:"预测未来的能力,是对模型智能性最好的测试。"

这场"预言能力"的试炼,把传统大模型靠"刷静态题库"撑起来的体面,撕了个口子。

过去几年,主流大模型在MMLU、HumanEval这些学术题库里,基本都能刷到90%以上。但商业世界不需要做题家。市场真正想问的是:能预测下周哪款爆品卖爆吗?能判断地缘博弈往哪走吗?

一部分团队已经交卷了。FutureX公开的实战记录里,存着大量被AI成功拆解的真实考题:

微观商业——2025年底,AI自主抓取网页和历史数据,预测Temu美国区某商户12月5日的单品销量。

宏观气候——基于NASA的Gistemp数据,推演12月全球平均气温较历史基准的偏差。

甚至还有地缘政治和体育赛事——2026年1月葡萄牙总统选举谁能进第二轮;墨西哥甲级联赛克雷塔罗对蒂华纳的赛果。

这些问题,瞎蒙没用。系统得像顶级情报分析师,在全球碎片信息里找信号、过滤假新闻,最后给出一个不带模糊地带的答案。

为什么巨头都在盯FutureX?因为它是真正的"闭卷实战"。

这个由字节Seed、斯坦福、复旦、普林斯顿等联合发起的评测基准,干掉了一个作弊温床——数据污染。

以前的静态考题,模型训练时可能早就背过答案。但FutureX考的是还没发生的未来事件。它每天从全球195个信源实时抽新题,模型根本没法提前准备。

FutureX用"折叠式"评分,拒绝靠蒙"是与否"刷分。它压缩了二元对立事件的数量,难度分四级:

Level 1基础事件,权重只占10%。

Level 2考察带变量的趋势预测,占20%。

Level 3(多步深度推理)和Level 4(极高不确定性的宏观预测)合计占70%——前面选择题30分,后面70分全是压轴大题。

这种高压测试下,2026年3月的榜单呈现出冰冷的技术分化。

以被反超的Grok-4为例,拆解成绩单会发现致命伤:Level 1简单任务拿了71.43分,但Level 3深度推理断崖跌到8.21分。而第三方Agent接入的GPT5.2更惨,像失去方向感的盲人,仅得10.3分。

不过总分低不代表全输。FutureX专门设了"细分预测任务"(含基础事件和高精度的FutureX-Pro垂直领域),直接暴露各家"偏科"体质:

政治与科技:擅长逻辑推理的GPT-5以72%和68%准确率领跑,DeepSeek-R1和Claude-3.7跟上。

体育赛事(高频动态博弈):DeepSeek-R1第一(64%),Claude-3.7(60%)第二。

金融(FutureX-Finance):预测财报和宏观指标,误差须控在5%以内。GPT-5-high和Grok-4找回主场,分别以46.37和41.25分领先。

零售(FutureX-Retail):考验销量与供应链预测。Claude-Opus和Kimi-K2在评估不确定性概率分布上得分最高。

公共卫生(FutureX-PublicHealth):解读官方公报预测疾病指标。GPT-5-High和Kimi-K2-thinking靠极高问题覆盖率占榜首。

此外,字节豆包(Seed1.6)和谷歌Gemini Deep Research在高难度交叉分析榜单里稳居前四。

Milkyway和MiroFlow能在综合榜超越这些"偏科"算力怪兽,秘密不在参数量,而在"Harness层(脚手架)"和"验证机制"的深耕。它们引入DAG(有向无环图)推理协议和双层验证器——在模型内部建了个"风控中台",每搜一条信息、每推一步,都有机制实时审计、强制纠错。

FutureX的榜单更迭,不只是技术圈的狂欢。它向创业者和普通人释放了一个信号:

大模型的价值不再是写诗写邮件,而是走向"Action Engine(行动引擎)"。谁能在红海物流停摆前两周帮企业调供应链?谁能在金融市场里捕捉到微弱的宏观信号?高价值的"预见力"才是下一步的真金白银。

没有一个模型能通吃所有细分领域。这正是创业者的机会——搭更优的智能体外壳、设计更抗干扰的验证流、在特定垂直领域投喂高质量反馈信号。

未来的赢家,不一定是GPU最多的人,但一定是最懂如何在不确定性里建立规则、驯服AI的人。

FutureX的每日考题仍在滚动更新。Milkyway团队内部流传着一个细节:系统在某次Level 4预测中,曾连续否决了37次自身推理路径,直到第38次才输出最终答案——而那次预测,与真实结果仅差1.2%。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
迟重瑞与陈丽华大孙女同框,这哪是继爷爷,分明就是亲爷爷!

迟重瑞与陈丽华大孙女同框,这哪是继爷爷,分明就是亲爷爷!

情感大头说说
2026-04-14 13:48:43
我45岁住家女保姆,那晚雇主请客,我发现酒不对劲后装醉

我45岁住家女保姆,那晚雇主请客,我发现酒不对劲后装醉

小月故事
2026-02-26 18:48:17
美媒:美国海上封锁伊朗 超15艘美军舰已到位

美媒:美国海上封锁伊朗 超15艘美军舰已到位

新华社
2026-04-14 11:38:02
心态蜕变!张本智和公开喊话国乒,态度大转变,背后原因揭晓

心态蜕变!张本智和公开喊话国乒,态度大转变,背后原因揭晓

体育见习官
2026-04-14 13:13:40
反转!巴西部长强行封杀比亚迪,卢拉深夜震怒:立刻卷铺盖走人!

反转!巴西部长强行封杀比亚迪,卢拉深夜震怒:立刻卷铺盖走人!

我想把最好的一面展现给你
2026-04-15 08:05:20
广东海洋大学宿舍成’废弃仓库’?1700元住宿费背后,高校经费去哪了

广东海洋大学宿舍成’废弃仓库’?1700元住宿费背后,高校经费去哪了

金哥说新能源车
2026-04-14 16:38:32
今日!CCTV5直播NBA开拓者VS太阳,中国男篮国手杨瀚森能否出战?

今日!CCTV5直播NBA开拓者VS太阳,中国男篮国手杨瀚森能否出战?

晚池
2026-04-15 01:08:06
苹果手表跑30英里只偏1%,但 Garmin 每秒测心率让专业选手犹豫了

苹果手表跑30英里只偏1%,但 Garmin 每秒测心率让专业选手犹豫了

灰度测试中
2026-04-14 09:09:23
2-1拒爆冷!王欣瑜连续3场逆转挺进16强,最大短板曝光,争冠太难

2-1拒爆冷!王欣瑜连续3场逆转挺进16强,最大短板曝光,争冠太难

大秦壁虎白话体育
2026-04-14 23:39:11
4月14日下午!斯诺克传来2消息:赵心童被投诉、丁俊晖一数据领跑

4月14日下午!斯诺克传来2消息:赵心童被投诉、丁俊晖一数据领跑

生活新鲜市
2026-04-14 18:56:32
偷鸡不成蚀把米!以为能“毁掉”全红婵,不料自己先被扒个底朝天

偷鸡不成蚀把米!以为能“毁掉”全红婵,不料自己先被扒个底朝天

聊历史的阿稼
2026-04-15 07:37:21
难!重庆市超高层地标凯悦大厦第14次拍卖,从8亿降到2亿还是流拍

难!重庆市超高层地标凯悦大厦第14次拍卖,从8亿降到2亿还是流拍

天天话事
2026-04-15 08:14:33
活久见!网传重庆全女健身房生意火爆,限女性顾客和男性教练进去

活久见!网传重庆全女健身房生意火爆,限女性顾客和男性教练进去

火山詩话
2026-04-13 09:18:54
乔致庸临终告诫后人:一个家族想要富过三代,秘诀只有三个字

乔致庸临终告诫后人:一个家族想要富过三代,秘诀只有三个字

千秋文化
2026-03-28 21:09:01
油价暴跌!92、95号汽油立降420元/吨,4月21日再迎大调整!

油价暴跌!92、95号汽油立降420元/吨,4月21日再迎大调整!

沙雕小琳琳
2026-04-14 10:39:24
新娘确实漂亮,但我更喜欢戴眼镜那个。

新娘确实漂亮,但我更喜欢戴眼镜那个。

动物奇奇怪怪
2026-04-12 12:44:36
迪拜富豪来中国旅游一个月,回国感叹:中东与中国差距真的太大了

迪拜富豪来中国旅游一个月,回国感叹:中东与中国差距真的太大了

千秋文化
2026-04-11 20:15:45
49元买块屏幕贴墙上,小米生态链把开关卷成了电子便签

49元买块屏幕贴墙上,小米生态链把开关卷成了电子便签

灰度测试中
2026-04-14 15:55:44
特朗普已做好开战准备?王毅曾警告:中美一旦冲突,结局只剩一个

特朗普已做好开战准备?王毅曾警告:中美一旦冲突,结局只剩一个

微风轻拂面
2026-04-14 15:44:00
巨星范!巴萨欧冠出局 18岁亚马尔没哭:安慰全队 昂首离开

巨星范!巴萨欧冠出局 18岁亚马尔没哭:安慰全队 昂首离开

叶青足球世界
2026-04-15 08:53:36
2026-04-15 09:39:00
字节漫游指南
字节漫游指南
有态度网友ytd
2166文章数 21关注度
往期回顾 全部

科技要闻

手机无死角上网?亚马逊砸百亿硬刚马斯克

头条要闻

辽宁车牌号带8888奔驰疑作为陪葬品下葬 当地再发声

头条要闻

辽宁车牌号带8888奔驰疑作为陪葬品下葬 当地再发声

体育要闻

带出中超最大黑马!他让球迷们“排队道歉”

娱乐要闻

网曝钟丽缇代孕要了个男孩 备孕近10年

财经要闻

特朗普称美国对伊朗的战争已经结束

汽车要闻

售12.99万起/续航2000km 风云T9L上市

态度原创

艺术
游戏
手机
时尚
军事航空

艺术要闻

郑丽文火了!她的签名竟然让人惊呆了!

传《战神》将有中国和日本神话 还有凝胶方块同伴

手机要闻

iOS 26泄露案动态:普罗瑟未完全遵循传票要求,苹果拟申请强制令

坏事做尽的疯女人,集体翻红了

军事要闻

万斯:对当前美伊局势进展“感到乐观”

无障碍浏览 进入关怀版