网易首页 > 网易号 > 正文 申请入驻

开源新王炸!10B多模态小模型屠榜,性能媲美20倍巨无霸

0
分享至

智东西1月20日报道,今日下午,阶跃星辰开源多模态模型Step3-VL-10B。该模型参数量为10B,在视觉感知、逻辑推理、数学竞赛以及通用对话等一系列基准测试中均达到同规模SOTA水平。

阶跃星辰的多项测评显示,Step3-VL-10B的性能可以媲美甚至超越规模大10-20倍的开源模型,如GLM-4.6V 106B-A12B、Qwen3-VL-Thinking 235B-A22B以及闭源旗舰模型,如Gemini 2.5 Pro、Seed-1.5-VL。

这一轻量级模型的性能表现,也意味着手机、电脑、工业嵌入式设备也可以运行GUI操作、复杂文档解析、高精度计数等复杂多模态推理任务。

从技术层面看,Step3-VL-10B的性能突破得益于三个关键设计,分别是高质量多模态语料库上进行统一预训练、缩放多模态强化学习、并行协调推理机制。

目前,阶跃星辰已开源Step3-VL-10B系列的Base模型和Thinking模型。

Hugging Face开源地址:https://huggingface.co/collections/stepfun-ai/step3-vl-10b

ModelScope开源地址:https://modelscope.cn/collections/stepfun-ai/Step3-VL-10B

体验地址:https://huggingface.co/spaces/stepfun-ai/Step3-VL-10B

技术报告链接:https://arxiv.org/pdf/2601.09668

一、从GUI感知到视觉识别和推理,Step3-VL-10B思路清晰

阶跃星辰在官方公众号里放出了Step3-VL-10B在多模推理能力方面的真实案例。

首先是关于摩尔斯编码的推理,可以看到模型的思考过程思路清晰,先拆解字母再逐个查表,最后拼接,流程正确,并且对大部分字母如S、T、E、F、U、N的定位和编码描述准确。

其次是GUI感知能力,模型需要识别标签页中以章节开头.tex结尾的文件标签,可以看到其思考过程采用了识别标签、排除非目标、统计数量的步骤进行了准确分析,并有效规避了干扰选项。

第三个是关于图推理的案例,模型需要在连线非常复杂的图片中准确识别中长度最短的图有几条,从思考过程可以看到,其先确认了最小权重的边长度是1,然后再统计所有权重为1的边。

二、拿下开源SOTA,数学竞赛测试题超94分

Step3-VL-10B具备三大核心亮点:

视觉感知精度更高:在同参数量级中展现出顶尖的识别与感知精度,研究人员为其引入PaCoRe(并行协调推理)机制,模型在复杂计数、高精度OCR及空间拓扑理解等高难度任务上的可靠性提升。

深层逻辑推演与长程推理:得益于规模化强化学习(RL)的持续迭代,Step3-VL-10B在10B规模上能应对竞赛级数学难题、真实编程环境、视觉逻辑谜题。

端侧Agent交互:基于海量GUI(图形用户界面)专用预训练数据,模型能够精准识别并操作复杂界面。

阶跃星辰公开的多模态基准测试结果显示,Step3-VL-10B是10B参数类别中最强大的开源模型。

具体来看,在多模态推理能力上,Step3-VL-10B在部分测试集上超越了GLM-4.6V、Qwen3-VL等模型,其性能优于10倍至20倍大的模型。

数学能力方面,该模型在AIME 25/24等数学竞赛测试题上得分超过94分,这意味着其在逻辑严密性上甚至优于许多千亿级模型。

2D、3D空间推理能力上,模型在BLINK上表现出66.79%的涌现式空间意识,在All-Angles-Bench上达到57.21%,意味着该模型在具身智能应用方面具有强大的潜力。

最后是编程能力,在真实、动态编程环境下,Step3-VL-10B超越GLM-4.6V、Qwen3-VL等模型。

此外,该模型的开源主页显示,研究人员在Qwen3VL-8B相关的基准测试中出现了不准确数据,例如AIME、HMMT、LCB,目前正在修复。这些错误是由于其在大规模评估过程中max_tokens设置错误造成,他们将重新运行测试,并在下一版技术报告中提供修正后的数据。

三、从感知到推理双提升,三大关键设计加持

该模型的论文提到,Step3-VL-10B的性能突破得益于三个关键设计:

一是在高质量多模态语料库上进行统一预训练:研究人员采用单阶段、完全解冻的训练策略,在1.2T token的多模态语料库上进行训练,重点关注两大基础能力:推理和感知,例如通用知识和教育中心任务等推理能力,定位、计数、OCR和GUI交互等感知能力。

通过联合优化感知编码器和Qwen3-8B解码器,STEP3-VL-10B建立了内在的视觉-语言协同效应。

二是缩放多模态强化学习:通过一个严格的后训练流程解锁了前沿能力,该流程包括两阶段监督微调(SFT)以及超过1400次的强化学习迭代,结合可验证奖励(RLVR)和人类反馈(RLHF)。

三是并行协调推理机制:研究人员采用并行协调推理(PaCoRe),支持推理阶段的动态算力扩展。通过并行探索多个感知假设并进行多维证据聚合,该机制显著提升了模型在竞赛级数学、复杂OCR识别、精准物体计数及空间拓扑推理中的准确度。

阶跃星辰的官方公众号提到,得益于“三位一体”架构,Step3-VL-10B证明智能水平并不完全取决于参数规模。这也意味着:世界一流的多模态能力有望以更低成本、更少算力获得;与此同时,过去主要集中在云端超级智能将逐步向端侧下沉,推动终端走向“主动理解与可执行交互”。

结语:Step3-VL-10B或成端侧AI新选择

从Step3-VL-10B的实测可以看出,该模型凭借10B轻量化参数体量,通过高质量多模态语料统一预训练、千余次强化学习迭代及并行协调推理机制,实现了对超大规模模型的跨级性能追赶。

并且具体到GUI交互、精准计数、竞赛级数学推理等任务,该模型也展现出较大应用潜力,未来有望降低在工业质检、本地文档分析、基层医疗辅助等场景的部署门槛。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
家财再多也没用!刘欢去世女婿私生活被扒光,给所有夫妻都提个醒

家财再多也没用!刘欢去世女婿私生活被扒光,给所有夫妻都提个醒

不似少年游
2026-09-29 10:12:57
66岁大爷自学考入大学,本人最新发声:大一绩点排全班前三,很珍惜这种学习机会,每个人都可以活到老学到老

66岁大爷自学考入大学,本人最新发声:大一绩点排全班前三,很珍惜这种学习机会,每个人都可以活到老学到老

极目新闻
2026-09-29 07:50:23
华为Mate 90系列手机线下展出:多彩拼色设计、原生“巨炮”模块相机,10月1日发布

华为Mate 90系列手机线下展出:多彩拼色设计、原生“巨炮”模块相机,10月1日发布

IT之家
2026-09-29 11:07:17
中国男排苦战5局赢韩国!1/4决赛再碰老对手,比赛时间是10月1日

中国男排苦战5局赢韩国!1/4决赛再碰老对手,比赛时间是10月1日

老吴说体育
2026-09-29 21:51:45
星舰首次入轨!人类有史以来最大入轨火箭诞生!尘封多年的纪录终于被破

星舰首次入轨!人类有史以来最大入轨火箭诞生!尘封多年的纪录终于被破

问问马斯克AskMusk
2026-09-29 00:26:00
曾是歌坛一代天王,却沦为臭名昭著的台独分子,今家破人亡下场惨

曾是歌坛一代天王,却沦为臭名昭著的台独分子,今家破人亡下场惨

蜉蝣说
2026-09-22 11:49:00
饱受战乱的伊朗股市759万点创新高,观战的A股却被打趴下了

饱受战乱的伊朗股市759万点创新高,观战的A股却被打趴下了

A活着
2026-09-29 21:36:01
12.8亿卖掉总统,卖掉工厂,卖掉国家,两年后两发子弹穿胸而过

12.8亿卖掉总统,卖掉工厂,卖掉国家,两年后两发子弹穿胸而过

墨策讲历史
2026-08-21 19:27:44
已售超70万份,鲍师傅60厘米超长蛋挞被吐槽“全是皮没蛋液”,客服:将优化产品

已售超70万份,鲍师傅60厘米超长蛋挞被吐槽“全是皮没蛋液”,客服:将优化产品

齐鲁壹点
2026-09-29 07:05:12
美国为何没有贪官?不是没有,是因为美国从制度上消灭了贪官,就连贪污都是合法的

美国为何没有贪官?不是没有,是因为美国从制度上消灭了贪官,就连贪污都是合法的

扶苏聊历史
2026-09-12 17:43:57
太荒唐!夫妻进厂务工,班长安排男的上夜班,夜夜和人家老婆厮守

太荒唐!夫妻进厂务工,班长安排男的上夜班,夜夜和人家老婆厮守

四海神君
2026-09-28 20:30:04
“像被蜜蜂叮了的狗”,大学女孩无效化妆,满满的努力却无人认可

“像被蜜蜂叮了的狗”,大学女孩无效化妆,满满的努力却无人认可

泽泽先生
2026-09-29 12:38:53
争议再起!华为Mate90 Pro参数曝光,不少用户直呼看不懂

争议再起!华为Mate90 Pro参数曝光,不少用户直呼看不懂

时尚的弄潮
2026-09-29 10:42:16
网传“10合1”“6合1”要来了?合村调整,4000人以下都得并吗

网传“10合1”“6合1”要来了?合村调整,4000人以下都得并吗

三农雷哥
2026-09-28 16:32:26
芯片级造假!花8000元买三星8TB旗舰SSD:到手竟是128GB杂牌货

芯片级造假!花8000元买三星8TB旗舰SSD:到手竟是128GB杂牌货

快科技
2026-09-29 14:52:06
研究发现:脑梗最怕的早餐,肉包子第五,第一名很多人天天都在吃

研究发现:脑梗最怕的早餐,肉包子第五,第一名很多人天天都在吃

垚垚分享健康
2026-07-06 21:05:05
0-4不敌林诗栋,王楚钦男单获银不到3小时,樊振东被推上风口浪尖

0-4不敌林诗栋,王楚钦男单获银不到3小时,樊振东被推上风口浪尖

晓銊就是我
2026-09-29 06:15:52
通透!西班牙记者彻底看穿C罗内心:不惜一切代价,也要凑够千球

通透!西班牙记者彻底看穿C罗内心:不惜一切代价,也要凑够千球

安逸安逸
2026-09-29 13:52:57
来到北京想去哪逛?萨巴伦卡:我可能问问钦文,相信她的推荐

来到北京想去哪逛?萨巴伦卡:我可能问问钦文,相信她的推荐

懂球帝
2026-09-29 15:13:10
刘棕会任广东省政协副秘书长

刘棕会任广东省政协副秘书长

南方都市报
2026-09-29 16:34:33
2026-09-29 22:43:00
智东西 incentive-icons
智东西
智东西,AI产业新媒体,专注报道人工智能的前沿技术发展,和技术应用带来的千行百业产业变革。
12681文章数 117174关注度
往期回顾 全部

科技要闻

82亿美元收购!李飞飞将与苏姿丰并肩做AI

头条要闻

"将儿子独留出租房"母亲质问房东:你的目的是为了什么

头条要闻

"将儿子独留出租房"母亲质问房东:你的目的是为了什么

体育要闻

石雨豪:亚运金牌与背后的十年

娱乐要闻

赌王四房婚礼,何超琼带三房成员现身

财经要闻

央行调整完善若干货币政策工具

汽车要闻

搭华为乾崑ADS 5/设计风格换新 2027款纵横G700售30.49万起

态度原创

家居
亲子
手机
公开课
军事航空

家居要闻

2026建博会(广州) 公装联探展交流活动

亲子要闻

工程车小故事 :分西瓜

手机要闻

苹果发布iOS 27.0.1、iOS 26.7.1双版本,更新内容详解及升级建议

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

伊朗最高领袖最新发声:伊朗现已变得独立、强大

无障碍浏览 进入关怀版