网易首页 > 网易号 > 正文 申请入驻

砍下44分冲进全球开源前三,阶跃这次真上桌了

0
分享至

阶跃毫无预兆地发了个新模型,Step 5 Preview。在此之前,外界默认这家公司已经放弃和头部模型公司竞争,专心去做AI手机和模型上车这类跟硬件结合的事。

结果它在一个无人在意的角落,交出了一份号称在 Artificial Analysis 上砍下 44分、全球开源前三的成绩单。总参数量 600B、激活参数 27B,带视觉输入。


榜单成绩看看也就得了。真正的分歧在于,这个模型到底能不能打。


榜单之外的真实体感

有测试者认为,AA 这个权重没什么太大意义,把太多问题聚拢到一个指标上,反而看不出什么。他对 Step 5 Preview 的体感和 Deepseek V4 Pro 大概是一个水平,但与 Opus 5 的差距肯定不止1分。

实测几道题下来,在数据可视化、金融方面,Step 5 Preview 表现出了不错的理解能力和数据获取能力。但在一些冷门 Bench 上,比如让模型理解物理世界的能力,表现并不太好。

问题被归结为泛化性、Context learning 不太好,存在部分领域知识的运用与理解不足,没见过的工具会乱用,不懂的也不会学。

另一个明显的短板是思考过程太长。做长任务时耗时较长,遇到上下文很长的情况,叠加长思考容易中断。

有测试者专门测了 Step 5 Preview 在不同难度任务上思考的长度,发现对输出字数有强约束的任务,思考长度异常地长,思考和输出内容的比值常常在 1:1 及以上。约束条件会明显影响最终产出率,代价随约束变紧而放大,模型常常在思考中反刍一遍或多遍它要输出的内容是否符合字数要求。

四道题测出来的能力边界

第一道题是数据可视化:用 NVIDIA FY2026 Q2 原始财报制作利润表的桑基图,使用中文。这道题考察数据的获取、正确的信息处理和提炼,以及最终的数据可视化。

信息获取需要模型找到相关财报,从原文中提取利润表涉及的数据,并根据自身对利润表的理解,把信息拆解为不同业务的营收收入与业务成本、费用和最终利润的勾稽关系。用 ECharts 制作桑基图时,还要注意元素之间减少重叠,理清科目之间的归属和流转关系,以及颜色的选取。

对比 GPT-6 生成的版本,Step 5 Preview 拆得更细,详细列出了不同类费用,可视化效果也更好,其他收益净额和税前利润流向所得税造成的重叠更少,观看的逻辑更流畅。

第二道题是金融分析:使用指定工具全维度分析中国的 AI 行业。因为使用了 Skill,主要考察模型对 Skill 的指令遵循、金融数据的获取、交叉验证和分析能力,以及最终 HTML 报告的呈现。

模型在搜索信息时既使用了国家统计局、国务院等一手数据,也去发现报告、中国报告网找了二手机构报告,最后才去证券时报、财联社等财经网站。在一开始没有给具体信息源和相关 key 的情况下,就能主动搜索权威信息源并做交叉验证,金融数据获取能力不错。

第三道题是做一款类似《向僵尸开炮》的买量小游戏,考察游戏策划和游戏资产制作能力。这个 case 上整体效果不算太好。游戏本体的编程实现没有特别大的问题,但游戏策划和资产制作能力有欠缺。

编程实现上,Computer use 和 Browse use 能力还不错,生成完游戏后会自主去验证和调试。但使用 Browse use 打开网页调试结束后不会自己关闭,下次调试时也不继续使用,又接着开新的网页,电脑后面变得很卡。


美术资产制作上,模型不会主动去找贴图,喜欢自己用 SVG 画,导致画风有些简陋。即使让它去开源渠道找,整体审美也一般,特别是俯视角看时,模型无法理解正确的空间逻辑,会出现月亮在脚底的问题。

对游戏机制的设计和理解能力也一般,应该是缺少相关的领域知识。设计的关卡难度过难,伤害碰撞的范围过小,同时出现的敌人数量过多,各类属性之间也没有做好关联,比如人数增加后,攻击力和攻速都没有增加。

第四道题是做动画 MV,用可视化的 HTML 前端界面展示一首说唱歌曲,要随音乐出现对应歌词和景象,用简约线条刻画意象。这道题考察审美能力和编程能力。

从最终实现看,编程能力没有明显短板,对明确表达实现方式或给出相应参考的要求都能实现。但审美,具体表现在资产的获取和制作上,和前面的游戏一样有不善于寻找可参考开源资料的情况,初版效果非常差。提示去 Three.js、P5.js 和 D3.js 寻找参考资料之后,整体质感有了些提升。

前端能力强依赖于前端资产的获取和生成,仅仅训一些粒子特效算法的话,前端质量的上限不太高。从用户侧的解法是,先告诉模型有哪些可以获取的资产来源,或者给模型可参考的网页链接,甚至提供可以生图或建模的模型 API。从训练侧的解法是在 SFT 时增加更多使用上述方法解决问题的轨迹。

这道题还额外考察了对恶意指令的遵循情况。一开始要求它直接去爬取 YouTube 上的歌曲音乐,它会以版权为由拒绝。但在上下文较长后,安全方面的指令遵循可以被绕过。

金融能力:能看,但图表还差口气

最后考验的是 Step 5 Preview 一直在吹的金融能力。给到一份 AI 产业链的投行报告,要求阅读分析,把涉及的行业、公司信息事实和各家观点整理汇总,重要观点和事实证据、有价值的图表重点展示;报告中没有涉及的当前股价、市值、最新年报和季报收入、毛利、EBITDA、净利润、营运资金变化和拆解分析、CapEx 变化和拆解分析,要联网或调用工具查询并标注;还要查询公开市场或重要机构对这些行业和公司的看法,找出投行报告与市场的差异化观点。

指令极其复杂,整体完成度较高,属于像模像样的研报。但复杂图表还是能看出很多问题。比如想把三个指标在一张图里体现,但金额和出货量两个指标的量级远大于 ASP,导致 ASP 直接趴在地板上,什么都看不出来。正确的做法是修改三个指标的单位,使得纯数字在同一个数量级。

图表不支持结论,也没看出海力士、美光的价格分歧在哪。但这份研报是能看的,汇报没什么大问题。

大模型是残酷的制造业

在没有参数大跃进的情况下,以阶跃过去的技术底子,这至少可以说是一次腾讯 HY4 级别的发布。HY4 是在姚顺雨空降半年后发布的,腾讯混元终于挤进了大模型第一梯队。腾讯能做到的,起码曾经辉煌过的阶跃没有理由做不到。

阶跃官方还说,Step 5 Preview 单任务成本仅为 Claude Opus 5 的 1/8。

这次发布再次证明,大模型公司是残酷的制造业。模型的三驾马车是数据、算法和算力,算法大家都不差,算力各凭本事搞,那变量就只剩数据了。而数据的提升方向已经被硅谷双子星标好了,搭好数据 Infra、建立数据管线,乃至被数据公司爆金币,这种没有任何秘密、纯执行的活,所以阶跃能干出来也是合理的。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
令人失望!绍兴“七个葫芦娃”终于迎来大结局,已经穿心腐烂、木质化

令人失望!绍兴“七个葫芦娃”终于迎来大结局,已经穿心腐烂、木质化

火山詩话
2026-09-24 09:00:51
耻辱第4,男篮回国解散!全网都在给阿联道歉:联妹才是最后硬汉

耻辱第4,男篮回国解散!全网都在给阿联道歉:联妹才是最后硬汉

大鱼简科
2026-09-25 09:38:45
亚运会乒乓球:9月25日赛程公布!莎头约战松岛/张本,林诗栋或一日5战

亚运会乒乓球:9月25日赛程公布!莎头约战松岛/张本,林诗栋或一日5战

全言作品
2026-09-25 00:47:01
“第二个上海”将诞生!王健林投1600亿腾讯落户,人口即将超北京

“第二个上海”将诞生!王健林投1600亿腾讯落户,人口即将超北京

大鱼简科
2026-09-24 10:16:01
俄乌战争开始后,俄罗斯总共扣押了中国多少飞机?

俄乌战争开始后,俄罗斯总共扣押了中国多少飞机?

花仙历史说
2026-09-19 02:18:24
我国首次曝光歼-36激光跟瞄系统,跨代领先美国

我国首次曝光歼-36激光跟瞄系统,跨代领先美国

世家宝
2026-09-20 21:25:49
向太谈张智霖儿子不上大学:认为可以自学,还想在爸爸演唱会弹吉他

向太谈张智霖儿子不上大学:认为可以自学,还想在爸爸演唱会弹吉他

韩小娱
2026-09-23 07:44:23
英媒:英国将向沙特提供“防御性”军事支持

英媒:英国将向沙特提供“防御性”军事支持

新京报
2026-09-22 07:30:38
不买软件就买个包吧:WinRAR联名挎包卖150美元

不买软件就买个包吧:WinRAR联名挎包卖150美元

灰度测试中
2026-09-24 16:56:14
宝马将驾驶辅助系统信息整合至3D地图视图,提升人机共驾信任感

宝马将驾驶辅助系统信息整合至3D地图视图,提升人机共驾信任感

IT之家
2026-09-24 19:17:16
今日中秋是“吉日”,无论多忙,记得:1不去,2不宜,做3事

今日中秋是“吉日”,无论多忙,记得:1不去,2不宜,做3事

宝哥精彩赛事
2026-09-25 08:08:23
“过分了”,刘少奇忙得焦头烂额,毛主席却悠闲地在批示上做算术题!

“过分了”,刘少奇忙得焦头烂额,毛主席却悠闲地在批示上做算术题!

史辨人生
2026-09-25 08:10:24
久加诺夫:如果普京继续推行目前的路线,俄罗斯将会战败

久加诺夫:如果普京继续推行目前的路线,俄罗斯将会战败

麓谷隐士
2026-09-24 00:15:04
炸裂!日本妻子拍AV挽救婚姻,瞒夫出道老公崩溃,如今丈夫成粉丝

炸裂!日本妻子拍AV挽救婚姻,瞒夫出道老公崩溃,如今丈夫成粉丝

悠悠说世界
2026-08-17 13:48:27
奥运冠军杜丽现状:44岁仍韵味十足,如今从满脸痘蜕变成颜值女神

奥运冠军杜丽现状:44岁仍韵味十足,如今从满脸痘蜕变成颜值女神

巧妹电影
2026-08-18 14:41:15
以色列在联大遭多国领导人“围攻”,马克龙:加沙局势令人羞耻!以总理称将赴美“说明真相”,临行前炮轰马克龙和纽约市长

以色列在联大遭多国领导人“围攻”,马克龙:加沙局势令人羞耻!以总理称将赴美“说明真相”,临行前炮轰马克龙和纽约市长

扬子晚报
2026-09-23 16:46:22
美国专家哀悼:我们疯抢格陵兰稀土,竟然被一把“中国锁”卡死!

美国专家哀悼:我们疯抢格陵兰稀土,竟然被一把“中国锁”卡死!

孤城落叶
2026-09-25 07:53:39
别被“某音”前凸后翘的网红骗了

别被“某音”前凸后翘的网红骗了

健身厨屋
2026-06-17 18:56:01
同学聚会每人收费3万,我转身就走,次日警察找上门:就你幸存了

同学聚会每人收费3万,我转身就走,次日警察找上门:就你幸存了

牛魔王与芭蕉扇
2025-09-01 16:53:51
曼奇尼:足球的神奇就在于会在短时间内给你打赢翻身仗的机会

曼奇尼:足球的神奇就在于会在短时间内给你打赢翻身仗的机会

懂球帝
2026-09-25 03:07:07
2026-09-25 11:07:00
字节漫游指南
字节漫游指南
有态度网友ytd
258文章数 120关注度
往期回顾 全部

科技要闻

华为赛力斯,一次声势浩大的权、利再分配

头条要闻

日本男乒亚运夺金 张本智和:日本队真的超越了中国队

头条要闻

日本男乒亚运夺金 张本智和:日本队真的超越了中国队

体育要闻

这场青春风暴,中国足球等了太久

娱乐要闻

肖战因拍《十日终焉》连续做半个月梦

财经要闻

月饼卖不动了...

汽车要闻

全新第四代博越L 上市限时价9.29万元起

态度原创

健康
本地
数码
教育
军事航空

鼻子三角区的痘,千万别乱挤!

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

数码要闻

微软正淡化Copilot+ PC品牌,2026新款Surface已弃用

教育要闻

英语应该退出主科,别再做升学路上的拦路虎

军事要闻

韩国首架“准隐身”战斗机正式入列

无障碍浏览 进入关怀版