网易首页 > 网易号 > 正文 申请入驻

开源新标杆!商汤 SenseNova-MARS超 Gemini-3-Pro,模型代码数据全开放。

0
分享至

今日,商汤正式开源多模态自主推理模型 SenseNova-MARS(8B/32B 双版本),其在多模态搜索与推理的核心基准测试中以 69.74 分超越Gemini-3-Pro(69.06 分)、GPT-5.2(67.64 分)。

SenseNova-MARS是首个支持动态视觉推理和图文搜索深度融合的AgenticVLM模型,它能自己规划步骤、调用工具,轻松搞定各种复杂任务,让AI真正具备“执行能力”。

在MMSearch、HR-MMSearch、FVQA、InfoSeek、SimpleVQA、LiveVQA等基准测试中,SenseNova-MARS取得开源模型中的 SOTA 成绩,还超越Gemini-3.0-Pro、GPT-5.2等顶级闭源模型,在搜索推理和视觉理解两大核心领域全面领跑。更多细节请参见技术报告(https://arxiv.org/abs/2512.24330),欢迎开发者、各行业用户测试与体验。

全能冠军,自主解决复杂问题

SenseNova-MARS在多项多模态搜索评测中展现出明显的领先优势,平均得分达到 69.74 分,成功超过了 Gemini-3-Pro 的 69.06 分与 GPT-5.2 的 67.64 分。

HR-MMSearch的测试题目堪称“AI界的奥林匹克”:采用305张2025年最新的4K超高清图片,确保AI无法依赖旧知识“作弊”;所有问题都针对图片中占比不到5%的细节,比如小标志、小字、微小物体,必须用图像裁剪工具才能看清;覆盖体育、娱乐文化、科学技术、商业金融、游戏、学术研究、地理旅行等八大领域,60%的问题都需要至少使用三种工具才能解答。

简单说,无论是需要“查遍全网”的知识密集型任务,还是需要“火眼金睛”的细粒度视觉分析,它都是当前的“全能冠军”。

用组合拳,解决真实场景问题

SenseNova-MARS还能实实在在落地到我们生活和工作的场景,解决需要“多步骤推理+多工具协作”的问题。

普通AI的工具调用,要么只能搜文字,要么只能看图片,遇到需要“先放大细节、再识别物体、最后查背景”的复杂任务就束手无策。

面对识别赛车服微小 Logo + 查询公司成立年份 + 匹配车手出生年月 + 计算差值’的复杂任务,SenseNova-MARS 可自主调用图像裁剪、文本 / 图像搜索工具,无需人工干预完成闭环解答。

SenseNova-MARS能从产品和行业峰会的照片中,识别企业的标志,快速搜集产品、企业的信息,以及时间、数量、参数等细节要素,辅助分析行业情况和格局。

SenseNova-MARS能从赛事照片中识别画面中的Logo、人物等信息,追溯比赛或人员背景信息,帮助快速补充重要细节。

SenseNova-MARS甚至能够轻松处理,这类超长步骤的多模态推理,和超过三种工具调用,自动裁剪分析细节、搜索相关研究数据,快速验证假设,得出关键判断。

拥有这种“自主思考+多工具协作”的能力,SenseNova-MARS能够自动解决“细节识别 + 信息检索 + 逻辑推理”复杂任务,帮助实现工作效率提升。

  • 图像裁剪:能精准聚焦图片上的微小细节,哪怕是占比不到5%的细节——比如赛车手衣服上的微小Logo、赛事照片里观众席的标语,都可通过裁剪放大清晰分析。

  • 图像搜索:能在看到物体、人物或场景,的瞬间自动匹配相关信息——比如识别出赛车手的身份,或是某款冷门设备的型号。

  • 文本搜索:能快速抓取精准信息——无论是公司成立年份、人物出生年月,还是最新的行业数据,都能秒级获取。

从练中学, 形成"直觉"和"经验"

SenseNova-MARS采用了“因材施教”的训练方法。

  • 第一阶段:打基础。针对跨模态多跳搜索推理训练数据稀缺的痛点,创新性的提出了基于多模智能体的自动化数据合成引擎,采用细粒度视觉锚点 + 多跳深度关联检索的机制,动态挖掘并关联跨网页实体的逻辑,自动化构建高复杂度的多跳推理链路,同时引入闭环自洽性校验来去除幻觉数据,构造出具备严密逻辑链条与高知识密度的多跳搜索问答数据。用精心筛选的“高难度案例”做教材,每个案例都标注了“该用什么工具、步骤是什么”,让AI先学会基本的“破案逻辑”。这些案例都是从海量数据中挑出的“硬骨头”,确保AI一开始就接触真实复杂场景。

  • l第二阶段:练实战。采用“强化学习”——就像侦探在一次次破案中积累经验,AI每做对一次决策(比如选对工具、步骤合理)就会获得奖励,做错了就调整策略。为了避免AI“学偏”,研究团队还加了个“稳定器”——BN-GSPO算法,让它在处理简单题和复杂题时都能保持稳定进步,不会出现“偏科”。 这种基于双阶段归一化的优雅机制有效平滑了动态工具调用返回分布多样性带来的优化波动并确保了学习信号分布的一致性,从而成功解决了跨模态多步多工具智能体训练过程中的收敛性难题。

经过这样的训练,AI不仅学会了用工具,更培养"工具使用直觉"——知道在什么情况下应该使用哪些工具,以及如何将不同工具的结果有机结合起来。

模型、代码、数据全开源

商汤日日新SenseNova-MARS模型、代码、数据集全开源,支持 Hugging Face 直接下载。

Github 仓库:

https://github.com/OpenSenseNova/SenseNova-MARS

模型仓库:

32B:

https://huggingface.co/sensenova/SenseNova-MARS-32B

8B

https://huggingface.co/sensenova/SenseNova-MARS-8B

技术报告:

https://arxiv.org/abs/2512.24330

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“她染彩虹色我都没意见!”潮汕蓝发女生保送985,好像未来的英语老师

“她染彩虹色我都没意见!”潮汕蓝发女生保送985,好像未来的英语老师

泽泽先生
2026-08-17 15:48:03
2个新台风或将生成!广东继续“下开水”

2个新台风或将生成!广东继续“下开水”

南粤女声
2026-08-18 10:36:31
大量硼砂,别再给家里人吃了!这10类食物最易掺硼砂,超危险

大量硼砂,别再给家里人吃了!这10类食物最易掺硼砂,超危险

宝哥精彩赛事
2026-08-18 02:16:17
江苏高速发生一起交通事故,正在处理中,部分入口关闭

江苏高速发生一起交通事故,正在处理中,部分入口关闭

黄河新闻网吕梁
2026-08-18 09:38:28
大变革来袭!阿根廷迎来时代更迭,梅西淡出,罗梅罗扛旗,匪帅或接手帅位

大变革来袭!阿根廷迎来时代更迭,梅西淡出,罗梅罗扛旗,匪帅或接手帅位

友谊第一
2026-08-18 09:16:59
台风最新预测!可能登陆或严重影响广东

台风最新预测!可能登陆或严重影响广东

小虎新车推荐员
2026-08-17 16:18:11
江苏农商行原副行长放弃171万年薪,提前一年请辞,三天后新身份落定出任行长,五年720万新合约成焦点

江苏农商行原副行长放弃171万年薪,提前一年请辞,三天后新身份落定出任行长,五年720万新合约成焦点

z千年历史老号
2026-08-17 17:25:17
哈工大解剖249名胰腺癌死者,吃惊发现患胰腺癌的人,有4大坏习惯

哈工大解剖249名胰腺癌死者,吃惊发现患胰腺癌的人,有4大坏习惯

叙说医疗健康
2026-08-15 05:00:10
李连杰一家三口拜见仁波切,64岁利智许久不见,颜值回春如昔日!

李连杰一家三口拜见仁波切,64岁利智许久不见,颜值回春如昔日!

娱乐团长
2026-06-02 15:09:12
终于知道这次扫黑除恶要打击谁了?

终于知道这次扫黑除恶要打击谁了?

周哥一影视
2026-08-15 10:48:16
火箭又完成一签!全新15+3阵容出炉,杜兰特领衔新赛季4大看点

火箭又完成一签!全新15+3阵容出炉,杜兰特领衔新赛季4大看点

锅子篮球
2026-08-18 11:12:37
重回国乒传闻真相被曝光后,樊振东又传来新得消息,退役后早有一大计划

重回国乒传闻真相被曝光后,樊振东又传来新得消息,退役后早有一大计划

锐评利物浦
2026-08-17 19:47:48
千万打赏拒陪睡后续:榜一身份曝光,有14家关联企业,担任9家企业法定代表人

千万打赏拒陪睡后续:榜一身份曝光,有14家关联企业,担任9家企业法定代表人

汉史趣闻
2026-08-17 10:31:45
Goal:阿森纳夺得社区盾,英超争冠前景却被外界看衰

Goal:阿森纳夺得社区盾,英超争冠前景却被外界看衰

懂球帝
2026-08-17 20:54:13
新款国产宝马X3官图发布

新款国产宝马X3官图发布

汽车工程师
2026-08-18 08:22:55
社保局内部实话:近三年办理退休的人,堪称养老幸运儿

社保局内部实话:近三年办理退休的人,堪称养老幸运儿

小蜜情感说
2026-08-17 16:24:31
1959年,王耀武获释后,周恩来亲自出面劝说许世友放下旧怨,许世友含泪坚决拒绝:这一辈子都不会原谅

1959年,王耀武获释后,周恩来亲自出面劝说许世友放下旧怨,许世友含泪坚决拒绝:这一辈子都不会原谅

人生录
2026-08-17 00:05:13
哈里王子:正式宣布!计划重归英国王室,履行王室职责,国王难了

哈里王子:正式宣布!计划重归英国王室,履行王室职责,国王难了

艺利森
2026-08-18 11:12:49
A股:今天周二,8月18日,行情很反常,两个信号来了!

A股:今天周二,8月18日,行情很反常,两个信号来了!

明心
2026-08-18 11:43:53
打奉陪到底,埃尔多安已签字,更改对以色列称谓,土耳其全时待战

打奉陪到底,埃尔多安已签字,更改对以色列称谓,土耳其全时待战

墨羽怪谈
2026-08-18 10:33:04
2026-08-18 13:27:00
雷峰网 incentive-icons
雷峰网
关注智能与未来!
70538文章数 656215关注度
往期回顾 全部

科技要闻

特斯拉Cybercab有望本月投放运营

头条要闻

女孩坠江被老人救起16年后考上北大:开学后学游泳

头条要闻

女孩坠江被老人救起16年后考上北大:开学后学游泳

体育要闻

中国男篮,一直被质疑,永远被期待

娱乐要闻

郭德纲风波再升级!德云社跟着遭殃

财经要闻

重要信号!稳增长政策正加快出台

汽车要闻

更长更豪华还有3.0T V6动力 长轴距版奔驰GLE来了

态度原创

教育
家居
旅游
游戏
军事航空

教育要闻

原来,山东高考“3+3”赋分制是这样的!

家居要闻

2026建博会(广州) 公装联探展交流活动

旅游要闻

暂停运营!昆明知名景区发布通告

《内核之心》9月18日推出 多人合作肉鸽RPG冒险

军事要闻

谈判期满前 伊朗悬赏抓美军

无障碍浏览 进入关怀版