网易首页 > 网易号 > 正文 申请入驻

MiniMax的低价攻势,撞上“背题”疑云

0
分享至

文 | 数智奔流,作者 | 熵野,编辑 | 沈校

“老题全会,新题抓瞎?”

10月19日,MiniMax新模型M3.1Flash发布后,围绕它的讨论,很快从榜单高分转向了疑似背题。

有用户在帖子中转发AI评测博主“猫老板”的测试反馈:“咋说呢,m31f,老题接近满分,新题接近0分。”

在Linux.do论坛的相关讨论中,有人讨论模型是否背题,还有人进一步猜测,厂商是否从输入中识别出了评测题,并针对测试做了特殊处理。


这款模型刚交出一份明显进步的成绩单。独立评测机构Artificial Analysis(下称AA)在发布当日给M3.1 Flash的综合智能指数打出42分,比6月发布的M3高出13分,只比DeepSeek V4.1 Flash-1017低3分。

但用户Binkg展示的一次改题测试,进一步加重了怀疑。他从AA的公开样题中选出一道生产管理题,改变了决定答案的条件。DeepSeek V4.1 Flash-1017和Gemini 4 Argon跟着换了答案,M3.1 Flash却仍然答出原题答案。

质疑之外,新模型也迎来了大量试用。据报道,M3.1 Flash上线72小时处理的Token超过100万亿,期间多个平台提供限时免费调用。

截至10月25日,仅在OpenRouter的近七日榜单上,它的免费版本就处理了约13.7万亿Token,排名第三;DeepSeek V4.1 Flash-1017以33.6万亿Token排名第一。

一边是大量调用,一边是“背题”质疑。我们也拿着那道修改后的题目试了一遍:英文提问时,MiniMax答错了;换成中文,另开一个对话,它又答对了。


被质疑之前,M3.1Flash已经以另一个名字收获过一波关注。

9月,匿名模型Space Bunny Alpha,也就是大家口中的“太空兔”,登陆OpenRouter开放免费调用。随后,太空兔连续十天在OpenRouter调用量第一,跑出56.7万亿token,创下该平台匿名模型的最高纪录。

10月19日,MiniMax官号发出一句“Welcomeback.SpaceBunny.”揭晓答案,太空兔即是M3.1Flash的早期版本,在匿名公测期间已经处理超过200万亿Token。公司进一步披露,正式版在coding、多步骤智能体任务等能力上继续优化,同时成本下降了70%。

在AA的测试中,跑完同一个任务,M3.1Flash的平均费用约为0.22美元,不到M3 0.51美元的一半,也比DeepSeek V4.1 Flash-1017的0.26美元还便宜。

按官方 API 标准价,M3.1 Flash每百万 Token 的输入、输出价格分别为0.15美元和0.60美元,比M3便宜约一半还多。与DeepSeek V4.1 Flash-1017的高峰价格相比,M3.1 Flash的输入、输出价也都低了一半。

因此,有用户用“闲时梁文谷,忙时闫俊峰”,调侃两家Flash模型贴身价格战的态势。


但知名博主猫老板的反馈,却很快把引爆的情绪从“提高了多少分”,变成了“分数是怎么来的”。

在国内开发者圈子里,猫老板是私人榜单“致知”的维护者,在国内AI开发者圈有不小的影响力。

该榜单聚焦模型逻辑、数学与代码能力,使用按月迭代的私有题库,规避网络公开原题。题库题型偏向真实落地场景,比如从服务器日志排查线索、带约束条件的地图寻路、在无说明的对局里自行归纳游戏规则。

它的评测规则是,每道题重复测试三次,取最优结果,不仅要求答案正确,推导过程也必须合规,单纯蒙对答案不计分。持续滚动的题库,会留存一部分旧题,同步纳入新题,用来对照观察模型的能力变化。

他本次提出的核心疑点,就是M3.1Flash在新旧题目上的能力割裂。

他观测到两个反常现象:

-模型在留存旧题上得分接近满分,面对新增题目时得分近乎归零;

-同时Token消耗模式也很反常,模型平均每一题要消耗四万多Token,但其中一部分难题,只用大约一万Token就给出了正确结果。

正常来说,推理步骤越长,消耗的输出Token就越高。按他的观察,难题仅用了约四分之一的平均用量便答对,新题却大面积翻车。这让用户怀疑,模型到底在重新解题,还是识别出了曾经见过的旧题?

另一位AI测评博主Binkg,用改题实验进一步测试了背题猜测的可能性。

他选了一道来自AA-Omniscience的公开测评题,原题问的是在生产管理的产能规划体系中,哪一种长期规划方法,会预测新工厂的数量、位置和规模等资源需求?答案是资源需求计划,英文缩写RRP。

Binkg把“长期”换成“中期”,再把新工厂的数量、位置、规模,换成完成主生产计划所需要的人力、设备和产能。改题后的答案应是粗能力计划,缩写RCCP。

在Binkg贴出的结果中,DeepSeekV4.1Flash-1017和Gemini4Argon都随着新题答出RCCP,只有M3.1Flash仍回答RRP。


(图片来自Binkg贴图)

让Binkg起疑的,还包括知识题成绩的跳涨。

在AA-Omniscience中,上一代模型M3的正确率为16.7%,而M3.1Flash则达到了56.2%,一次提高39.5个百分点,答对题目的数量超过原来的三倍。

作为近期同一知识测试的参照,10月23日发布的KimiK3.1Pro,正确率从KimiK3的47.6%升至51.0%,增加3.4个百分点。

Binkg还提出了关于题目来源的猜测。

6月上一代模型M3发布后,AA通过在线接口评测模型。如果评测请求经过厂商运营的接口,厂商在技术上便有机会接触题目。他怀疑,MiniMax可能识别了这些评测请求,并把题目用于后续训练。


背题争论之外,AA的测试还留下了一组看起来矛盾的数字。

AA-Omniscience主要考查事实知识,也考查模型遇到知识空白时如何作答。一般只计算正确率的考试,答错与不答同样不得分,猜答案至少有机会拿分。

AA-Omniscience改变了这项规则:答对加分,答错扣分,部分正确或不作答不加不扣。测试开始前,它还明确提醒模型,只在有把握时回答,放弃作答比答错更好。

测试结果显示,M3.1Flash正确率为56.2%,幻觉率却高达92.8%。按四舍五入后的数字粗略换算,每100道题,M3.1 Flash大约答对56道、答错41道,剩下约3道为部分正确或弃答。93%指的是后44道题中的错误占比。

与综合分数相近的几款模型比,M3.1 Flash答对的知识题最多,幻觉率也最高。比如它与Gemini 3.8 Flash的正确率只差1.6个百分点,幻觉率却相差37.6个百分点。


上一代模型M3在这项测试中经常选择不答,幻觉率只有18.4%。按每100道题换算,约17道答对、15道答错,其余约68道部分正确或未作答。到了M3.1 Flash,答对题目从约17道增至56道,答错也从约15道增至41道。

但在Plotly与Mila研究人员联合搭建的数据分析测评中,minimax M3.1 Flash却跑出了高分:全部43道题目答对41道,与Claude Opus 5.5、Gemini 4 Argon等模型同分。

此前,它的匿名早期版本“太空兔”通过了38道,与智谱GLM 5.3 Flash、阿里Qwen 3.8 27B等模型持平,是这套测试里表现最好的开放权重模型之一。

这套题模拟真实业务场景,给模型接入一份2000万行记录的模拟风电数据仓库,要求自主查询、运算并回答业务问题。同时题目里埋有陷阱,会提出数据集无法支撑的问题,比如让只有风电数据的模型计算太阳能发电量,以此检验模型能否发现数据缺失、识别错误前提,克制幻觉输出。

测试者还在数据中埋了五处需要主动发现的规律,9月的太空兔只找到两处,M3.1 Flash全部找到,但每题耗时中位数从太空兔的36秒增至3分钟。

不过,“背题”指控尚缺少请求日志或训练记录支持,模型答出旧答案,可能涉及训练材料中的题目,也可能是概念混淆。

为此,我们也复刻了Binkg的改题试验。

将改后的英文原题,分别向MiniMaxM3.1Flash、豆包快速模式和DeepSeekV4.1Flash-1017提问。

和Binkg的测试结果一样,豆包和DeepSeek都随新题改了回答,MiniMax则仍回答的是RRP。


(Binkg改后新题,英文版三家实测截图)

接着,我们把题目翻译成中文,题目保持不变,再各开一次新对话。这一次,豆包、DeepSeekV4.1Flash-1017和MiniMaxM3.1Flash全部答对。


(Binkg改后新题,中文版三家实测截图)

除了问答,我们还给MiniMax和DeepSeek安排了一项创作任务:制作一张约4秒的GIF动图。

两款产品收到相同的两张参考图,以及同一段要求:薄雾草地上,一只戴粉色蝴蝶结、穿银甲、披白披风的橘猫握剑站立,巨龙低头靠近、张嘴咆哮。保留参考形象,突出体型反差,动作自然连贯,直接交付可播放的GIF动图。


(猫咪造型特写及场景参考图)

DeepSeek V4.1 Flash-1017交付了约6.2秒的GIF,参考形象一致,但主要在两个构图间切换,角色动作较少。


M3.1 Flash交付约4秒GIF,角色动作更多,猫和龙的造型与参考图有差别。

我们让MiniMax按参考图重做,再次强调猫与巨龙的身高差。MiniMax随后列出修改项,称粉色蝴蝶结、星纹银甲、白披风都已保留,还交付了横竖两个版本。

竖版中的巨龙从头顶靠近,小猫站在画面下方,体型反差更明显。但猫的脸和服饰仍没有还原参考图。

最后,我们明确调用MiniMax的H3视频生成工具,上传原始视频,要求复刻前5秒的角色、镜头和配乐。这一次,MiniMax输出的角色形象与配乐符合复刻了参考视频。

10月23日,MiniMax按此前公布的计划开放了M3.1 Flash的模型权重,抛出了一个可供所有人核验的后续方案。具备部署条件的研究者,可以在自己的设备上重新测试,题目无需经过MiniMax的在线接口。

这为核验增加了条件,但公开权重并没有同时公开全部训练材料。那道改题为什么答错,换成中文为什么又答对,仍需要更多测试解释。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
灰色蕾丝长袜,显示性感的另一面

灰色蕾丝长袜,显示性感的另一面

疾跑的小蜗牛
2026-10-27 20:22:57
“多所高校将通过数字人民币发工资”,热搜第一!和打进银行卡有什么不一样?

“多所高校将通过数字人民币发工资”,热搜第一!和打进银行卡有什么不一样?

观察者网
2026-10-27 17:24:08
姆巴佩迎来全网骂潮,是因为他触及了,中国球迷的“3个底线”

姆巴佩迎来全网骂潮,是因为他触及了,中国球迷的“3个底线”

观锐器
2026-10-27 14:10:38
中国宣布德国总统即将访问中国,后脚日本就宣布德国总理访问日本

中国宣布德国总统即将访问中国,后脚日本就宣布德国总理访问日本

有态度的何总
2026-10-26 13:47:33
一万人也劝不住,河南男子入职2月被外派飞东南亚,落地傻眼了

一万人也劝不住,河南男子入职2月被外派飞东南亚,落地傻眼了

天天热点见闻
2026-10-25 06:53:38
纳斯达克给科兴控股发了退市决定函,科兴疫苗再度被热议,当年打完三针的人该怎么理性看待这件事

纳斯达克给科兴控股发了退市决定函,科兴疫苗再度被热议,当年打完三针的人该怎么理性看待这件事

磊子讲史
2026-10-24 15:31:41
今天 10 月 27 日,全体退休人员注意:10 月养老金发放,必查三项!

今天 10 月 27 日,全体退休人员注意:10 月养老金发放,必查三项!

白昼说故事
2026-10-27 09:59:46
中日破冰了?日本的请求中国同意了,日本如释重负!但有一个条件

中日破冰了?日本的请求中国同意了,日本如释重负!但有一个条件

关权教授聊经济
2026-10-26 21:15:08
杨议鞠躬道歉,晚了!6场演出全部取消,天津文旅介入调查,374.18万债务未还清已被限高

杨议鞠躬道歉,晚了!6场演出全部取消,天津文旅介入调查,374.18万债务未还清已被限高

火山詩话
2026-10-27 05:47:46
一名入伍才三个月的俄军逃兵,在乌东村落枪杀了五名熟睡的乌军无人机操作员,得手后端着枪一头扎进了乌克兰控制的哈尔科夫百万人口大城市

一名入伍才三个月的俄军逃兵,在乌东村落枪杀了五名熟睡的乌军无人机操作员,得手后端着枪一头扎进了乌克兰控制的哈尔科夫百万人口大城市

扶苏聊历史
2026-10-24 16:46:53
解放军报发文:应对重大台独事变,全军随时准备打仗,以武促统

解放军报发文:应对重大台独事变,全军随时准备打仗,以武促统

林子说事
2026-10-27 16:17:32
库里24分勇士掀翻掘金尝赛季首胜,伦德伯格31+12+6约基奇19+11

库里24分勇士掀翻掘金尝赛季首胜,伦德伯格31+12+6约基奇19+11

湖人崛起
2026-10-27 12:30:54
光这个海报封面,都把我吓得一哆嗦

光这个海报封面,都把我吓得一哆嗦

熊倌儿
2026-10-23 08:44:57
太离谱!确认系摆拍!已彻底凉凉

太离谱!确认系摆拍!已彻底凉凉

江津融媒
2026-10-27 13:52:29
今天才知道,这6种蔬菜最适合冷冻,冻1年不坏,营养还不流失

今天才知道,这6种蔬菜最适合冷冻,冻1年不坏,营养还不流失

阿龙美食记
2026-10-27 14:31:50
历史开了个玩笑:先倒的不是乌克兰,竟是百年来保持中立的瑞士?

历史开了个玩笑:先倒的不是乌克兰,竟是百年来保持中立的瑞士?

铜臭的历史味
2026-10-27 19:58:54
放弃轮换前锋,火箭队3换1不亏!加盟老鹰队,33岁侧翼机会全无,4战只出场1次

放弃轮换前锋,火箭队3换1不亏!加盟老鹰队,33岁侧翼机会全无,4战只出场1次

熊哥爱篮球
2026-10-27 18:31:50
CCTV直播蒙彼利埃冠军赛27日赛程:松岛辉空恐一轮游!孙颖莎复出首秀,陈熠有硬仗

CCTV直播蒙彼利埃冠军赛27日赛程:松岛辉空恐一轮游!孙颖莎复出首秀,陈熠有硬仗

好乒乓
2026-10-27 11:17:40
岳飞满江红原版重现天日,学者透露:大众所知的满江红第一句就被改过

岳飞满江红原版重现天日,学者透露:大众所知的满江红第一句就被改过

磊子讲史
2026-10-14 16:53:55
卢拉赢了,后果来了

卢拉赢了,后果来了

牛弹琴
2026-10-27 08:03:30
2026-10-27 21:03:00
钛媒体APP incentive-icons
钛媒体APP
独立财经科技媒体
141133文章数 862690关注度
往期回顾 全部

科技要闻

Anthropic最硬气招股书,先把丑话说在前头

头条要闻

25岁女生患肠癌休学一年后重返校园 复查显示无瘤生存

头条要闻

25岁女生患肠癌休学一年后重返校园 复查显示无瘤生存

体育要闻

世界上最无趣的前锋,拿下了金球奖

娱乐要闻

芒果遇到厉娜和许飞笑发财了!

财经要闻

韩国芯片出口额可能下降高达1000亿美元

汽车要闻

纯电续航1003km 大五座SUV腾势N8正式开启预订

态度原创

家居
教育
游戏
房产
公开课

家居要闻

2026建博会(广州) 公装联探展交流活动

教育要闻

当我说不同语言时面相没变吧#彩虹糖裴曼伊#语言学习#外语

NS2破解惨遭实现系统固化!开发者此前曾被老任警告

房产要闻

从全国第一跌到第七!海南人,放下生娃焦虑!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版