网易首页 > 网易号 > 正文 申请入驻

商汤开源SenseNova-SI-1.3,八大空间智能榜单综合评分登顶

0
分享至

商汤科技正式开源空间智能模型日日新SenseNova-SI-1.3,在空间测量、视角转换、综合推理等核心任务中展现出显著提升,另外对比之前的版本增强了回答简答题的能力。在集成多项权威空间智能榜单的综合评测平台EASI上,SenseNova-SI-1.3综合性能超越Gemini-3-Pro,均分斩获EASI-8(八个权威空间智能榜单的混合评测)标准第一,在多个高难度空间任务(尤其是视角转换)中表现优异。



刁钻考题验证:SenseNova-SI-1.3精准突破空间智能核心难点

EASI-8包含一系列专门考察空间理解能力的高难度测试题,让Gemini-3-Pro等模型都频频踩坑。那么SenseNova-SI-1.3表现如何呢?(下列问题在测试模型时使用的原题为英文,为便于读者理解翻译为中文)。



题目要求统计两张照片中建筑模型的总数量,核心难点是理解两张图的对应关系,以此避免遮挡漏数和重复多数。图2视角下显现出图 1 中被遮挡的深灰色建筑,且部分模型在两图中重复出现。Gemini-3-Pro未完全去重,误数为 6 个;SenseNova-SI-1.3则给出 “4 个”的准确答案。



题目给出两张书房局部照片,已知 iMac 位于房间北部,询问学生写作业区域的方位。需先理解两张图片属于同一空间,再通过视觉线索拼接场景。Gemini-3-Pro误判学习区在西侧;SenseNova-SI-1.3精准定位 “西北角”,完全符合空间逻辑。



题目要求以 “未戴眼镜男士的自身视角” 判断身旁戴眼镜男士的方位,考察 “参照系转换” 能力,模型很容易以“观察者视角”来判断方向。Gemini-3-Pro就误选了 “右边”;SenseNova-SI-1.3则能正确给出 “左边” 的正确答案。



题目给出粉色瓶子前、后、左、右 4 张照片,询问图 4 角度下瓶子左边物体。这道题需整合多视角线索重构房间全局布局再切换至目标视角判断方位 —— 第 4 张照片中瓶子左侧完全处于视觉盲区,仅能通过前 3 张图中的窗户、床、衣柜等线索还原空间关系。Gemini-3-Pro误选 “窗户和蓝色窗帘”,SenseNova-SI-1.3精准锁定正确答案 “衣柜和门”。



以双层巴士与公交站的场景为题,需避免陷入“英国巴士靠左行驶,因此靠站的是左侧”的常识陷阱,而是通过实际的视觉画面判断方位。Gemini-3-Pro误判 “左侧” 为答案;而 SenseNova-SI-1.3 则准确理解 “右侧” 为正确答案。

空间智能是极其独特的多模态能力



Core Knowledge Deficits in Multi-Modal Language Models (2025)发现视角转换任务与其它多模态任务的相关性(红框内)呈蓝色,即代表相关性较低

一篇2025年发表于机器学习顶会ICML的论文《Core Knowledge Deficits in Multi-Modal Language Models》揭示了一个有趣的发现:视角转换(Perspective)和所有传统多模态模型的能力的相关性均异常得低,这代表主流算法路径可能不是空间智能的形成的有效路径,这也解释了为什么领先的多模态大模型在空间智能相关的任务上表现不佳。



Core Knowledge Deficits in Multi-Modal Language Models (2025)发现增大模型尺寸对提升视角转换任务效果不佳

这篇论文也发现,空间智能似乎存在反尺度效应的现象:更大的模型并不能更好地解决空间智能任务。另外,在EASI的官方报告中也可以找到相似的描述,指出视角转换任务(Perspective-taking)依然是最具挑战的基础能力之一。

空间智能需要全新的学习范式。

从3D世界数据匮乏到空间智能的尺度效应



空间智能的核心——视角转换任务被拆解成了三个关键步骤:建立跨视角关联、理解视角移动、想象视角变换,并围绕着解决这三个基础能力构造大量训练数据

学术界现有数据集多着重于目标识别与场景理解,模型往往停留在图像模式匹配阶段,难以形成稳定的空间理解能力。基于这一洞察,想要解决空间智能尤其是视角转换任务,简单扩充相关数据规模是不够的。为了解决这一根本问题,我们将视角转换看作从二维视觉信息迈向三维空间关系理解的关键桥梁,并将其拆解为递进的能力阶段,由易到难、难度递增的三个任务层级(建立跨视角关联、理解视角移动、想象视角变换),并构造大量且层次分明的训练数据,使模型建立完备的空间理解能力。

同时,在数据规模持续扩大的过程中,SenseNova-SI团队挖掘并重组多视角学术数据资源,将许多过去未被充分利用的标注转化为视角转换训练数据。例如,多目关联数据集MessyTable提供了高物体复杂度场景,其中跨视角物体一致性信息与精确的相机位姿标注,可用于训练物体对应与相机运动推理能力;而部分室内场景扫描数据如CA-1M中包含物体自身朝向标注的样本,则被用于补充模型进行视角转换与想象所需的稀缺数据。这种跨数据源的重组与再利用,使积累大量丰富而系统的空间理解数据成为可能。

转载来源:商汤科技

本文为量子位获授权转载,观点仅为原作者所有。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中国球迷到世界杯现场支持阿根廷,结果遭到了阿根廷人的歧视羞辱

中国球迷到世界杯现场支持阿根廷,结果遭到了阿根廷人的歧视羞辱

总在茶余后
2026-07-18 10:58:20
杜润旺正式告别广东队!

杜润旺正式告别广东队!

体育哲人
2026-07-19 06:27:54
直降10万!宝马突然官宣,16.64万起!

直降10万!宝马突然官宣,16.64万起!

科技堡垒
2026-07-17 12:23:09
美的创始人何享健2250亿财富无人继承,三子女均为老总

美的创始人何享健2250亿财富无人继承,三子女均为老总

阿諬体育评论
2026-06-29 22:22:22
3死!湖南平江男子纵火烧店,自己当场死亡,嫌犯社交账号被扒,网传多个版本

3死!湖南平江男子纵火烧店,自己当场死亡,嫌犯社交账号被扒,网传多个版本

Mr王的饭后茶
2026-07-18 09:29:21
健身网红着装过于“大胆”,被拒绝登机,网友:没毛病!

健身网红着装过于“大胆”,被拒绝登机,网友:没毛病!

背包旅行
2026-07-14 15:17:19
大批新能源车通病集中爆发,车子开着没毛病,电池却直接废掉

大批新能源车通病集中爆发,车子开着没毛病,电池却直接废掉

铭记历史呀
2026-07-19 02:28:25
突然倒闭!近900名留学生天塌了!毕业、身份都悬了...

突然倒闭!近900名留学生天塌了!毕业、身份都悬了...

澳洲红领巾
2026-07-17 15:50:59
晚年心理学:那些从不给子女当免费保姆的同龄人,晚年反而过得比谁都舒坦

晚年心理学:那些从不给子女当免费保姆的同龄人,晚年反而过得比谁都舒坦

心理观察局
2026-07-19 06:30:10
梅根·福克斯被嘲内衣照“尴尬”,一句话回怼:你是我哪个前任?

梅根·福克斯被嘲内衣照“尴尬”,一句话回怼:你是我哪个前任?

生活观察员啊
2026-07-19 01:04:29
世界杯总决赛,特朗普刚宣布出席,他最讨厌的欧洲人,也宣布出席

世界杯总决赛,特朗普刚宣布出席,他最讨厌的欧洲人,也宣布出席

观史搜寻着
2026-07-18 23:25:24
冉莹颖哭穷风波反转?知情人爆破产另有原因,她曾和老总紧密互动

冉莹颖哭穷风波反转?知情人爆破产另有原因,她曾和老总紧密互动

秋姐居
2026-07-16 16:36:21
崩了!35所公办大学跌50分以上!本科线上就能录!

崩了!35所公办大学跌50分以上!本科线上就能录!

勋哥教你填志愿
2026-07-19 06:04:07
德尚:姆巴佩有争夺金靴的个人目标 法国拿到季军总比第4名要好

德尚:姆巴佩有争夺金靴的个人目标 法国拿到季军总比第4名要好

砚底沉香
2026-07-18 08:42:14
985中外合作,全面下跌!

985中外合作,全面下跌!

勋哥教你填志愿
2026-07-18 18:12:40
不选俄罗斯了,图瓦共和国主动找上中国,愿意献“稀土”做笔生意

不选俄罗斯了,图瓦共和国主动找上中国,愿意献“稀土”做笔生意

知法而形
2026-07-13 10:32:26
年度大片《奥德赛》在香港经历放映事故

年度大片《奥德赛》在香港经历放映事故

美剧组|人人影视
2026-07-18 20:11:57
巴萨晒参加世界杯决赛的拉玛西亚球员海报:梦开始的地方

巴萨晒参加世界杯决赛的拉玛西亚球员海报:梦开始的地方

懂球帝
2026-07-19 02:25:10
绝不妥协!马来西亚总理下达死命令:全境清查并驱逐以色列人

绝不妥协!马来西亚总理下达死命令:全境清查并驱逐以色列人

风流女汉
2026-07-18 13:36:05
徐克送别施南生仅一天,小30岁女友过往被扒,原来她才是人间清醒

徐克送别施南生仅一天,小30岁女友过往被扒,原来她才是人间清醒

白面书誏
2026-07-16 14:41:23
2026-07-19 07:20:49
量子位 incentive-icons
量子位
追踪人工智能动态
12978文章数 176520关注度
往期回顾 全部

科技要闻

WAIC2026看什么?这份"不迷路"攻略请收好

头条要闻

“黄总请你去包厢” 媒体:是误会 已和解

头条要闻

“黄总请你去包厢” 媒体:是误会 已和解

体育要闻

法国半场连丢4球 连创5大耻辱纪录

娱乐要闻

大S给具俊晔留遗产是昏头?实际上她清醒得很

财经要闻

股民当街砍博主!韩国股市 终极大屠杀

汽车要闻

把中国超跑卖到英国,比亚迪正在被世界看见

态度原创

家居
教育
手机
房产
军事航空

家居要闻

2026建博会(广州) 公装联探展交流活动

教育要闻

高考地理中的“启示类”问题分析

手机要闻

30年前的一句话成为现实!荣耀Robot Phone应验凯文·凯利预言

房产要闻

突然出手!千亩城更+一线江景,世嘉亮出超级四代宅!

军事要闻

美军连续七晚空袭伊朗

无障碍浏览 进入关怀版