网易首页 > 网易号 > 正文 申请入驻

开源新王炸!10B多模态小模型屠榜,性能媲美20倍巨无霸

0
分享至


智东西
作者 程茜
编辑 李水青

智东西1月20日报道,今日下午,阶跃星辰开源多模态模型Step3-VL-10B。该模型参数量为10B,在视觉感知、逻辑推理、数学竞赛以及通用对话等一系列基准测试中均达到同规模SOTA水平

阶跃星辰的多项测评显示,Step3-VL-10B的性能可以媲美甚至超越规模大10-20倍的开源模型,如GLM-4.6V 106B-A12B、Qwen3-VL-Thinking 235B-A22B以及闭源旗舰模型,如Gemini 2.5 Pro、Seed-1.5-VL。


这一轻量级模型的性能表现,也意味着手机、电脑、工业嵌入式设备也可以运行GUI操作、复杂文档解析、高精度计数等复杂多模态推理任务。

从技术层面看,Step3-VL-10B的性能突破得益于三个关键设计,分别是高质量多模态语料库上进行统一预训练、缩放多模态强化学习、并行协调推理机制。

目前,阶跃星辰已开源Step3-VL-10B系列的Base模型和Thinking模型。

Hugging Face开源地址:https://huggingface.co/collections/stepfun-ai/step3-vl-10b

ModelScope开源地址:https://modelscope.cn/collections/stepfun-ai/Step3-VL-10B

体验地址:https://huggingface.co/spaces/stepfun-ai/Step3-VL-10B

技术报告链接:https://arxiv.org/pdf/2601.09668

一、从GUI感知到视觉识别和推理,Step3-VL-10B思路清晰

阶跃星辰在官方公众号里放出了Step3-VL-10B在多模推理能力方面的真实案例。

首先是关于摩尔斯编码的推理,可以看到模型的思考过程思路清晰,先拆解字母再逐个查表,最后拼接,流程正确,并且对大部分字母如S、T、E、F、U、N的定位和编码描述准确。


其次是GUI感知能力,模型需要识别标签页中以章节开头.tex结尾的文件标签,可以看到其思考过程采用了识别标签、排除非目标、统计数量的步骤进行了准确分析,并有效规避了干扰选项。


第三个是关于图推理的案例,模型需要在连线非常复杂的图片中准确识别中长度最短的图有几条,从思考过程可以看到,其先确认了最小权重的边长度是1,然后再统计所有权重为1的边。


二、拿下开源SOTA,数学竞赛测试题超94分

Step3-VL-10B具备三大核心亮点:

视觉感知精度更高:在同参数量级中展现出顶尖的识别与感知精度,研究人员为其引入PaCoRe(并行协调推理)机制,模型在复杂计数、高精度OCR及空间拓扑理解等高难度任务上的可靠性提升。

深层逻辑推演与长程推理:得益于规模化强化学习(RL)的持续迭代,Step3-VL-10B在10B规模上能应对竞赛级数学难题、真实编程环境、视觉逻辑谜题。

端侧Agent交互:基于海量GUI(图形用户界面)专用预训练数据,模型能够精准识别并操作复杂界面。

阶跃星辰公开的多模态基准测试结果显示,Step3-VL-10B是10B参数类别中最强大的开源模型。


具体来看,在多模态推理能力上,Step3-VL-10B在部分测试集上超越了GLM-4.6V、Qwen3-VL等模型,其性能优于10倍至20倍大的模型。


数学能力方面,该模型在AIME 25/24等数学竞赛测试题上得分超过94分,这意味着其在逻辑严密性上甚至优于许多千亿级模型。


2D、3D空间推理能力上,模型在BLINK上表现出66.79%的涌现式空间意识,在All-Angles-Bench上达到57.21%,意味着该模型在具身智能应用方面具有强大的潜力。


最后是编程能力,在真实、动态编程环境下,Step3-VL-10B超越GLM-4.6V、Qwen3-VL等模型。


此外,该模型的开源主页显示,研究人员在Qwen3VL-8B相关的基准测试中出现了不准确数据,例如AIME、HMMT、LCB,目前正在修复。这些错误是由于其在大规模评估过程中max_tokens设置错误造成,他们将重新运行测试,并在下一版技术报告中提供修正后的数据。

三、从感知到推理双提升,三大关键设计加持

该模型的论文提到,Step3-VL-10B的性能突破得益于三个关键设计:

一是在高质量多模态语料库上进行统一预训练:研究人员采用单阶段、完全解冻的训练策略,在1.2T token的多模态语料库上进行训练,重点关注两大基础能力:推理和感知,例如通用知识和教育中心任务等推理能力,定位、计数、OCR和GUI交互等感知能力。

通过联合优化感知编码器和Qwen3-8B解码器,STEP3-VL-10B建立了内在的视觉-语言协同效应。

二是缩放多模态强化学习:通过一个严格的后训练流程解锁了前沿能力,该流程包括两阶段监督微调(SFT)以及超过1400次的强化学习迭代,结合可验证奖励(RLVR)和人类反馈(RLHF)。

三是并行协调推理机制:研究人员采用并行协调推理(PaCoRe),支持推理阶段的动态算力扩展。通过并行探索多个感知假设并进行多维证据聚合,该机制显著提升了模型在竞赛级数学、复杂OCR识别、精准物体计数及空间拓扑推理中的准确度。

阶跃星辰的官方公众号提到,得益于“三位一体”架构,Step3-VL-10B证明智能水平并不完全取决于参数规模。这也意味着:世界一流的多模态能力有望以更低成本、更少算力获得;与此同时,过去主要集中在云端超级智能将逐步向端侧下沉,推动终端走向“主动理解与可执行交互”。

结语:Step3-VL-10B或成端侧AI新选择

从Step3-VL-10B的实测可以看出,该模型凭借10B轻量化参数体量,通过高质量多模态语料统一预训练、千余次强化学习迭代及并行协调推理机制,实现了对超大规模模型的跨级性能追赶。

并且具体到GUI交互、精准计数、竞赛级数学推理等任务,该模型也展现出较大应用潜力,未来有望降低在工业质检、本地文档分析、基层医疗辅助等场景的部署门槛。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
LV起诉国家知识产权局

LV起诉国家知识产权局

第一财经资讯
2026-07-14 15:08:09
美军在特朗普指示下,连续第三晚空袭伊朗,公布首次使用“海盗”无人艇画面,伊朗强硬反击:出动自杀式无人机,发射巡航导弹打击美军舰艇

美军在特朗普指示下,连续第三晚空袭伊朗,公布首次使用“海盗”无人艇画面,伊朗强硬反击:出动自杀式无人机,发射巡航导弹打击美军舰艇

扬子晚报
2026-07-14 07:46:06
13国为菲律宾撑腰?中方亮出的新装备,让马科斯政府倒吸一口凉气

13国为菲律宾撑腰?中方亮出的新装备,让马科斯政府倒吸一口凉气

健身狂人
2026-07-14 12:40:13
在韩国救下失控大巴的中国女生火了!现场曝光,韩媒态度出奇一致

在韩国救下失控大巴的中国女生火了!现场曝光,韩媒态度出奇一致

笑饮孤鸿非
2026-07-14 07:25:06
十余名外甥再来重庆“宇宙舅舅”家过暑假,一顿江西炒粉花费20个鸡蛋10斤米粉2.5斤肉,“舅舅”龚玲军:很珍惜现在这种团聚的机会

十余名外甥再来重庆“宇宙舅舅”家过暑假,一顿江西炒粉花费20个鸡蛋10斤米粉2.5斤肉,“舅舅”龚玲军:很珍惜现在这种团聚的机会

扬子晚报
2026-07-14 12:34:30
周星驰称“没有人欠过我任何的电影票,希望再做好一点报答观众” ;此前《功夫女足》评价两极分化,主持人林海发文“星爷,不欠你了”

周星驰称“没有人欠过我任何的电影票,希望再做好一点报答观众” ;此前《功夫女足》评价两极分化,主持人林海发文“星爷,不欠你了”

大风新闻
2026-07-14 10:51:04
赖掉周星驰8600万后,千亿帝国塌了

赖掉周星驰8600万后,千亿帝国塌了

大猫财经Pro
2026-07-14 15:36:40
开拓者夏联主帅:只要瀚森拿球,队友围绕他跑动,就能展现他的天赋

开拓者夏联主帅:只要瀚森拿球,队友围绕他跑动,就能展现他的天赋

懂球帝
2026-07-14 15:32:10
中天科技:预计2026年上半年净利润约为23.52亿元到约25.08亿元,同比增长50%~60%

中天科技:预计2026年上半年净利润约为23.52亿元到约25.08亿元,同比增长50%~60%

每日经济新闻
2026-07-14 15:53:18
大战前夜,阿根廷突收到 “天降神兵”!英格兰,这次真要悬了

大战前夜,阿根廷突收到 “天降神兵”!英格兰,这次真要悬了

体坛狗哥
2026-07-14 13:23:40
发现中国有一个奇怪社会现象:父母不在人世间了, 什么舅舅姑姑表兄弟, 还有一些八竿子打不着的亲属, 基本上就形同陌路,不再相互往来

发现中国有一个奇怪社会现象:父母不在人世间了, 什么舅舅姑姑表兄弟, 还有一些八竿子打不着的亲属, 基本上就形同陌路,不再相互往来

背包旅行
2026-07-13 15:12:59
印媒:印度制造盾构机突破,德国让印组装盾构机20年,要抢中国饭碗?

印媒:印度制造盾构机突破,德国让印组装盾构机20年,要抢中国饭碗?

王新喜
2026-07-13 23:40:34
工行、农行、建行、中行紧急提示

工行、农行、建行、中行紧急提示

新京报
2026-07-14 13:38:04
46万元新车到手4小时就故障了!杭州奔驰车主提车当天方向盘三次卡死,厂家拒绝退换车,“只需升级软件”

46万元新车到手4小时就故障了!杭州奔驰车主提车当天方向盘三次卡死,厂家拒绝退换车,“只需升级软件”

都市快报橙柿互动
2026-07-14 15:26:19
男子把“帮忙充话费”当性暗示,夜闯女邻居家意图发生性关系,被发现后谎称抢劫!

男子把“帮忙充话费”当性暗示,夜闯女邻居家意图发生性关系,被发现后谎称抢劫!

大风新闻
2026-07-14 11:32:20
中汽协澄清:“新能源车平均车龄仅1.8年”是误读

中汽协澄清:“新能源车平均车龄仅1.8年”是误读

界面新闻
2026-07-14 16:37:43
国企董事长的办公室,成了上香求财的“财神殿”

国企董事长的办公室,成了上香求财的“财神殿”

News脑洞
2026-07-14 08:50:19
许君聪也没料到,自己赌上前途力挺的周星驰,如今给他这么大回报

许君聪也没料到,自己赌上前途力挺的周星驰,如今给他这么大回报

草莓信箱
2026-07-14 10:36:22
2年偷拍35次!韩国男子与女性发生关系时全程偷录,竟只被判缓刑

2年偷拍35次!韩国男子与女性发生关系时全程偷录,竟只被判缓刑

奋斗在韩国
2026-07-14 13:45:04
20死113伤!美指挥部遇袭,不到24小时,特朗普宣布:要拿下海峡

20死113伤!美指挥部遇袭,不到24小时,特朗普宣布:要拿下海峡

离离言几许
2026-07-14 17:00:07
2026-07-14 19:03:00
智东西 incentive-icons
智东西
智东西,AI产业新媒体,专注报道人工智能的前沿技术发展,和技术应用带来的千行百业产业变革。
12226文章数 117133关注度
往期回顾 全部

科技要闻

AI失业风险正在逼近 "我们连未来都看不清"

头条要闻

韩国司机失去意识大巴失控 中国女乘客救了一车人

头条要闻

韩国司机失去意识大巴失控 中国女乘客救了一车人

体育要闻

33岁成为法国主力,他将在世界杯防守亚马尔

娱乐要闻

施南生离世,成龙、甄子丹等发文悼念

财经要闻

为什么说智谱是中国版Anthropic是伪命题

汽车要闻

汽车的大时代 新中国第一辆汽车下线70周年

态度原创

游戏
房产
手机
艺术
公开课

PS5模拟器启动《宇宙机器人》!进展超快 索尼不慌?

房产要闻

三亚湾,最魔幻豪宅项目曝光!

手机要闻

华为5G手机登陆海外市场!Pura 90s Pro系列发布:6150元起

艺术要闻

8.5度抗震!新疆第一座高层5星酒店,封顶!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版