网易首页 > 网易号 > 正文 申请入驻

商汤开源SenseNova-SI-1.3,八大空间智能榜单综合评分登顶

0
分享至

商汤科技正式开源空间智能模型日日新SenseNova-SI-1.3,在空间测量、视角转换、综合推理等核心任务中展现出显著提升,另外对比之前的版本增强了回答简答题的能力。在集成多项权威空间智能榜单的综合评测平台EASI上,SenseNova-SI-1.3综合性能超越Gemini-3-Pro,均分斩获EASI-8(八个权威空间智能榜单的混合评测)标准第一,在多个高难度空间任务(尤其是视角转换)中表现优异。

刁钻考题验证:SenseNova-SI-1.3精准突破空间智能核心难点

EASI-8包含一系列专门考察空间理解能力的高难度测试题,让Gemini-3-Pro等模型都频频踩坑。那么SenseNova-SI-1.3表现如何呢?(下列问题在测试模型时使用的原题为英文,为便于读者理解翻译为中文)。

题目要求统计两张照片中建筑模型的总数量,核心难点是理解两张图的对应关系,以此避免遮挡漏数和重复多数。图2视角下显现出图 1 中被遮挡的深灰色建筑,且部分模型在两图中重复出现。Gemini-3-Pro未完全去重,误数为 6 个;SenseNova-SI-1.3则给出 “4 个”的准确答案。

题目给出两张书房局部照片,已知 iMac 位于房间北部,询问学生写作业区域的方位。需先理解两张图片属于同一空间,再通过视觉线索拼接场景。Gemini-3-Pro误判学习区在西侧;SenseNova-SI-1.3精准定位 “西北角”,完全符合空间逻辑。

题目要求以 “未戴眼镜男士的自身视角” 判断身旁戴眼镜男士的方位,考察 “参照系转换” 能力,模型很容易以“观察者视角”来判断方向。Gemini-3-Pro就误选了 “右边”;SenseNova-SI-1.3则能正确给出 “左边” 的正确答案。

题目给出粉色瓶子前、后、左、右 4 张照片,询问图 4 角度下瓶子左边物体。这道题需整合多视角线索重构房间全局布局,再切换至目标视角判断方位 —— 第 4 张照片中瓶子左侧完全处于视觉盲区,仅能通过前 3 张图中的窗户、床、衣柜等线索还原空间关系。Gemini-3-Pro误选 “窗户和蓝色窗帘”,SenseNova-SI-1.3精准锁定正确答案 “衣柜和门”。

以双层巴士与公交站的场景为题,需避免陷入“英国巴士靠左行驶,因此靠站的是左侧”的常识陷阱,而是通过实际的视觉画面判断方位。Gemini-3-Pro误判 “左侧” 为答案;而 SenseNova-SI-1.3 则准确理解 “右侧” 为正确答案。

空间智能是极其独特的多模态能力

Core Knowledge Deficits in Multi-Modal Language Models (2025)发现视角转换任务与其它多模态任务的相关性(红框内)呈蓝色,即代表相关性较低

一篇2025年发表于机器学习顶会ICML的论文《Core Knowledge Deficits in Multi-Modal Language Models》揭示了一个有趣的发现:视角转换(Perspective)和所有传统多模态模型的能力的相关性均异常得低,这代表主流算法路径可能不是空间智能的形成的有效路径,这也解释了为什么领先的多模态大模型在空间智能相关的任务上表现不佳。

Core Knowledge Deficits in Multi-Modal Language Models (2025)发现增大模型尺寸对提升视角转换任务效果不佳

这篇论文也发现,空间智能似乎存在反尺度效应的现象:更大的模型并不能更好地解决空间智能任务。另外,在EASI的官方报告中也可以找到相似的描述,指出视角转换任务(Perspective-taking)依然是最具挑战的基础能力之一。

空间智能需要全新的学习范式。

从3D世界数据匮乏到空间智能的尺度效应

空间智能的核心——视角转换任务被拆解成了三个关键步骤:建立跨视角关联、理解视角移动、想象视角变换,并围绕着解决这三个基础能力构造大量训练数据

学术界现有数据集多着重于目标识别与场景理解,模型往往停留在图像模式匹配阶段,难以形成稳定的空间理解能力。基于这一洞察,想要解决空间智能尤其是视角转换任务,简单扩充相关数据规模是不够的。为了解决这一根本问题,我们将视角转换看作从二维视觉信息迈向三维空间关系理解的关键桥梁,并将其拆解为递进的能力阶段,由易到难、难度递增的三个任务层级(建立跨视角关联、理解视角移动、想象视角变换),并构造大量且层次分明的训练数据,使模型建立完备的空间理解能力。

同时,在数据规模持续扩大的过程中,SenseNova-SI团队挖掘并重组多视角学术数据资源,将许多过去未被充分利用的标注转化为视角转换训练数据。例如,多目关联数据集MessyTable提供了高物体复杂度场景,其中跨视角物体一致性信息与精确的相机位姿标注,可用于训练物体对应与相机运动推理能力;而部分室内场景扫描数据如CA-1M中包含物体自身朝向标注的样本,则被用于补充模型进行视角转换与想象所需的稀缺数据。这种跨数据源的重组与再利用,使积累大量丰富而系统的空间理解数据成为可能。

转载来源:商汤科技

本文为量子位获授权转载,观点仅为原作者所有。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
出现大失误!中国队20年来首次无缘世锦赛决赛,团体领先美国队

出现大失误!中国队20年来首次无缘世锦赛决赛,团体领先美国队

罗掌柜体育
2026-10-20 13:19:20
里夫斯:湖人全员健康时几乎没一起打过比赛

里夫斯:湖人全员健康时几乎没一起打过比赛

林间小温柔
2026-10-21 21:31:44
比缅北凶险100倍!曾经的旅游胜地,如今黄赌毒俱全,乱象随处可见

比缅北凶险100倍!曾经的旅游胜地,如今黄赌毒俱全,乱象随处可见

琅琊财经
2026-07-31 22:02:18
中国乒乓大捷!4-3夺冠,绝杀日本松岛美空,杜韩静3小将豪夺3冠

中国乒乓大捷!4-3夺冠,绝杀日本松岛美空,杜韩静3小将豪夺3冠

湘村大余
2026-10-19 18:37:44
反思过去的计划生育口号,孙玉良:不负责任的口号损害政府公信力

反思过去的计划生育口号,孙玉良:不负责任的口号损害政府公信力

孙玉良
2026-10-18 08:56:59
1932年,钱瑛被捕,敌人押解途中,她突然想到口袋里的怀表,猛然惊出一身冷汗,因为这个怀表会要了她的命!

1932年,钱瑛被捕,敌人押解途中,她突然想到口袋里的怀表,猛然惊出一身冷汗,因为这个怀表会要了她的命!

磊子讲史
2026-10-20 18:11:39
格林:我愿意以勇士身份退役,但我毕竟没有库里那样的特权

格林:我愿意以勇士身份退役,但我毕竟没有库里那样的特权

北青网-北京青年报
2026-10-21 20:53:44
日企承认子公司高管活动引发蒙古国草原火灾

日企承认子公司高管活动引发蒙古国草原火灾

新京报
2026-10-21 18:45:12
雷霆主帅称赞马拉首秀表现:他证明了自己具有比赛影响力

雷霆主帅称赞马拉首秀表现:他证明了自己具有比赛影响力

北青网-北京青年报
2026-10-21 20:49:02
其实,数学天才王虹论文归零,数年死磕冷门猜想,竟然连基层职称均评不上

其实,数学天才王虹论文归零,数年死磕冷门猜想,竟然连基层职称均评不上

呼呼历史论
2026-10-20 17:18:41
特朗普知道必败无疑,他要赶在结局确定之前,先完成“亲俄”大事

特朗普知道必败无疑,他要赶在结局确定之前,先完成“亲俄”大事

军情观察家
2026-10-21 13:44:40
又一个龟男的世界崩塌了!网传绍兴一男子遇到妻子和情人约会,咆哮每月1.3万工资,1.25万上交老婆

又一个龟男的世界崩塌了!网传绍兴一男子遇到妻子和情人约会,咆哮每月1.3万工资,1.25万上交老婆

火山詩话
2026-10-19 15:16:53
她是李昌钰二婚妻子,小他18岁是企业家,将美籍丈夫骨灰安葬江苏

她是李昌钰二婚妻子,小他18岁是企业家,将美籍丈夫骨灰安葬江苏

娱说瑜悦
2026-10-21 18:12:47
不出意外,2027年或将迎来4大降价潮,普通人可以早做打算

不出意外,2027年或将迎来4大降价潮,普通人可以早做打算

林子说事
2026-10-21 07:10:51
太意外!球星C罗豪掷2000万欧元在家乡葡萄牙建水厂,还能给当地创造数十个工作岗位

太意外!球星C罗豪掷2000万欧元在家乡葡萄牙建水厂,还能给当地创造数十个工作岗位

往日爱恨d
2026-10-16 15:51:14
晚上九点半!国足开球时间确定,央视全程直播,邵佳一去留全看这三战

晚上九点半!国足开球时间确定,央视全程直播,邵佳一去留全看这三战

小秦哥聊体育
2026-10-21 17:33:36
谢霆锋低调打卡江西土菜馆,老板激动一夜未睡

谢霆锋低调打卡江西土菜馆,老板激动一夜未睡

大中国
2026-10-20 16:11:16
两性关系:发现了没,寿命长的男人,大多都有这五个好习惯

两性关系:发现了没,寿命长的男人,大多都有这五个好习惯

荔子言
2026-09-08 14:55:50
浙江男子喜当爹,亲子鉴定后医生却说:恭喜,三个孩子三个爹

浙江男子喜当爹,亲子鉴定后医生却说:恭喜,三个孩子三个爹

民间精选故事汇
2025-02-11 08:10:03
每体:巴萨内部已经重新讨论1月引进一名经验丰富的后卫

每体:巴萨内部已经重新讨论1月引进一名经验丰富的后卫

懂球帝
2026-10-21 16:27:23
2026-10-21 23:19:00
量子位 incentive-icons
量子位
追踪人工智能动态
13529文章数 176587关注度
往期回顾 全部

科技要闻

SpaceX收入暴涨!马斯克:这事"不再不可能"

头条要闻

21岁男子稻城亚丁高反死亡 其姐与报警人聊天纪录披露

头条要闻

21岁男子稻城亚丁高反死亡 其姐与报警人聊天纪录披露

体育要闻

“我,对得起天津足球!”

娱乐要闻

张柏芝自曝五点陪伴儿子 谢霆锋尴尬了

财经要闻

昔日彩电一哥缘何在今天被挤下牌桌?

汽车要闻

智驾摩尔定律一年十倍跃升 2028迎来L4拐点

态度原创

健康
旅游
数码
亲子
公开课

痘痘能根治吗?皮肤科医生说实话

旅游要闻

进博会前夕韩国忠清圈来沪推介旅游资源 沪韩业界共话合作新机遇

数码要闻

网易UU远程官宣与荣耀团队深度合作,覆盖WIN平板远程游戏、办公等场景

亲子要闻

深度长文:放下就哭,一抱起来走就不哭,婴儿到底在配合谁?

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版