网易首页 > 网易号 > 正文 申请入驻

如视Argus入选ECCV,让图像也能提供LiDAR级位姿约束

0
分享至



机器之心发布


Luma AI、Aholo 、Scaniverse、KIRI 等消费级 3DGS 应用的出现,已经说明 3D Gaussian Splatting 正在走向普通用户。用户拿起手机,就希望把物体、房间,甚至完整空间,变成可漫游的 3D 内容。

但如果想要效果够好,3DGS 就需要精确的位姿约束,否则效果会大打折扣:







左右滑动查看。图1:某 APP 生成画面|图源小红书;图 2:墙体弯曲;图 3:墙面鼓包。

这些 badcase 看起来像是 3DGS 渲染没有优化好,但本质上,往往是位姿与几何信息不够准确。

过去,解决这类问题最稳妥的方式是上 LiDAR 。LiDAR 能提供精确的位姿约束,在一定程度解决上述问题,即使在高难度视觉环境中,也能解算出足够鲁棒的位姿和几何,让 3DGS 优化收敛到更高质量的场景表达。

但这也意味着更高的硬件成本、更重的采集流程,以及更难进入大众消费级场景。

近期, ECCV 2026 结果公布,Realsee 团队的成果 Argus: Metric Panoramic 3D Reconstruction for Indoor Scenes 成功入选。它面向室内全景图像,能够从稀疏、无序的全景照片中,直接预测相机位姿、度量深度和点云重建结果,可以为 3DGS 提供更稳定、更精准的几何约束。





  • Argus 论文地址:https://argus-paper.realsee.ai

如视的这项研究说明:未来可落地的 3DGS 重建,不再一定需要 LiDAR 来提供精确位姿。只要有手机或全景相机拍摄的图像,再通过如视 Argus 获得高质量位姿和度量几何,就可以让 3DGS 进入更轻量、更低成本、更大众化的采集时代。

先看效果:传统 SfM vs使用如视 Argus

可以把如视 Argus 理解成 3DGS 前面的“几何校准器”。



使用传统 SfM(左)VS 使用如视 Argus(右)。字迹、物体细节等效果显著提升

3DGS 通常依赖传统 SfM 来计算位姿和初始几何。遇到弱纹理、重复纹理、全景畸变、多房间连接等场景时,容易出现:

  • 相机轨迹漂移;
  • 墙体、门洞、家具边缘错位;
  • 高斯点云局部堆叠或肿胀;
  • 新视角漫游时出现闪烁和重影。

在稀疏采集视角下,甚至会因为匹配不足导致位姿崩溃,无法生成 3DGS。

经过如视 Argus 处理后,系统可以先获得更稳定的图像位姿、度量深度和点云结构,再将这些结果作为 3DGS 优化的初始约束 —— 最终效果会更接近“空间级重建”,而不只是 “图片级拟合”。

再看数据:如视 Argus 位姿与几何精度显著领先

在 Realsee3D 基准测试中,如视 Argus 在相机位姿、深度估计和点云重建上取得了 SOTA(state of the art) 级表现。



以相机位姿为例,论文给出了 如视 Argus 与 VGGT360、MapAnything360、π3D360 等方法的对比。和支持度量预测的 MapAnything360 相比,如视 Argus 在真实子集上将 ATE 从 0.134 降至 0.096,在合成子集上从 0.087 降至 0.027。



Argus VS VGGT360、MapAnything360、π3D360

也就是说在真实室内场景中,如视 Argus 的全局位姿误差比 MapAnything360 降低约 28%;在合成场景中,误差降低约 69%。

对于常见居住室内环境而言,在如视积累的全量数千万数据上训练后,误差更是低至 2.5cm,与常见 LiDAR 2cm 的误差已经非常接近。

另外,借助合成数据,如视 Argus 模型还能避免 LiDAR 常见的多回波拖尾问题,以及玻璃、镜子、黑色物体测距不准带来的噪声或数据缺失。

对于 3DGS 来说,这类提升非常关键。位姿误差降低,不只是指标变好,而是直接影响最终效果:墙面更直、边界更锐、物体更少重影、漫游时空间更稳定。

从激光扫描到自由拍摄,空间重建正在换挡

如视 Argus 入选 ECCV 2026,不只是一次论文成果发布,更像是一个行业信号:3D 重建正在从 “设备驱动” 走向 “模型驱动”。过去,精准空间重建依赖专业硬件;现在,大模型开始学习硬件背后的几何能力。

对如视自身来讲,依托超 6000 万真实三维空间场景数据库,随着数据量、场景类型和训练样本持续增加,如视 Argus 模型对复杂空间的理解能力也会持续提升。

在未来,产品级 3DGS 将会有机会从重设备、重流程的专业采集,走向更轻量、更低成本、也更容易规模化的空间重建方式。

如视 Argus 展示的,正是这个方向的第一步:用图像重建真实世界,用精准位姿约束 3DGS,让产品级 3DGS 从专业设备时代,迈向普通用户也能参与的自由拍摄时代。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
泰国官员登上“林肯”号航母​,合影中F35C简直锈成废铁

泰国官员登上“林肯”号航母​,合影中F35C简直锈成废铁

三叔的装备空间
2026-09-06 23:11:17
又是2-0领先被逆转!21岁的陈熠,为何总在关键时刻“差点意思”

又是2-0领先被逆转!21岁的陈熠,为何总在关键时刻“差点意思”

好球去哪了
2026-08-06 20:09:39
明天凌晨苹果新CEO迎来首秀,首款折叠iPhone有哪些悬念?

明天凌晨苹果新CEO迎来首秀,首款折叠iPhone有哪些悬念?

澎湃新闻
2026-09-09 06:46:28
星宇股份港股IPO:获上市备案逾3周仍未获得具体聆讯!从"暴力裁员"舆情事件转向审核程序性问题!

星宇股份港股IPO:获上市备案逾3周仍未获得具体聆讯!从"暴力裁员"舆情事件转向审核程序性问题!

新浪财经
2026-09-09 10:26:35
2026年,中国小学一年级新生人数迎来了一个历史性的转折点。

2026年,中国小学一年级新生人数迎来了一个历史性的转折点。

一口娱乐
2026-09-07 07:59:43
嫁78岁法国老头水落石出,42岁李宇春私生活曝光,丝毫不感到意外

嫁78岁法国老头水落石出,42岁李宇春私生活曝光,丝毫不感到意外

观察鉴娱
2026-09-09 09:30:04
上海赛车事件跟踪!现场安保图片流出,这些大叔、大娘年纪大,看样子都给人感觉腿脚不利索,跑都跑不快

上海赛车事件跟踪!现场安保图片流出,这些大叔、大娘年纪大,看样子都给人感觉腿脚不利索,跑都跑不快

火山詩话
2026-09-08 08:00:34
大S闺房曝光!太过诡异像灵堂引人不适,难怪大师预言她活不过50岁

大S闺房曝光!太过诡异像灵堂引人不适,难怪大师预言她活不过50岁

瞎说娱乐
2026-08-27 11:09:48
热搜上令人窒息的“母女吃牛肉面一幕”,精神穷人可怕的三观

热搜上令人窒息的“母女吃牛肉面一幕”,精神穷人可怕的三观

蝴蝶花雨话教育
2026-08-18 09:57:05
打脸日本!中方敲定“条款”有效,日方要动武?高市早苗坐不住了

打脸日本!中方敲定“条款”有效,日方要动武?高市早苗坐不住了

小小科普员
2026-09-09 14:41:57
张劲松已任上海浦东新区区委副书记

张劲松已任上海浦东新区区委副书记

澎湃新闻
2026-09-09 11:00:26
普京心腹几乎明说了,中国既然实力这么强,能不能再帮俄罗斯一把

普京心腹几乎明说了,中国既然实力这么强,能不能再帮俄罗斯一把

点燃好奇心
2026-09-09 00:37:50
往长江倒黑泥后续!多部门介入,来源搞清了,网友:罚到倾家荡产

往长江倒黑泥后续!多部门介入,来源搞清了,网友:罚到倾家荡产

临云史策
2026-09-08 16:26:30
高考数学132分,开学考只拿12分:西电这场分班考有多狠?

高考数学132分,开学考只拿12分:西电这场分班考有多狠?

影视情报室
2026-09-08 23:13:42
一天内,传出2位名人离世!如6个月前张雪峰,离世原因刺痛无数人

一天内,传出2位名人离世!如6个月前张雪峰,离世原因刺痛无数人

皮皮电影
2026-09-08 17:55:15
“把孩子吃死你就老实了!”一个红薯叶窝窝头让孩子奶奶被骂惨!网友:这婆婆揍起来没有心理负担!

“把孩子吃死你就老实了!”一个红薯叶窝窝头让孩子奶奶被骂惨!网友:这婆婆揍起来没有心理负担!

林林先生
2026-09-08 11:51:39
美国特使为乌克兰带来的“投降协议”细节曝光,乌克兰予以拒绝

美国特使为乌克兰带来的“投降协议”细节曝光,乌克兰予以拒绝

山河路口
2026-09-09 13:37:23
社区免费体检没人去?真相不是老人糊涂,是怕得明明白白

社区免费体检没人去?真相不是老人糊涂,是怕得明明白白

偷喝一口奶
2026-08-31 08:26:56
回旋镖到了!美国可以不让中国进国际空间站,不让荷兰卖光刻机给中国,可以不让伊朗卖石油给中国,但是不允许中国稀土不卖给美国!

回旋镖到了!美国可以不让中国进国际空间站,不让荷兰卖光刻机给中国,可以不让伊朗卖石油给中国,但是不允许中国稀土不卖给美国!

扶苏聊历史
2026-09-08 18:16:38
默克尔发声:震惊,心碎

默克尔发声:震惊,心碎

观察者网
2026-09-09 09:33:27
2026-09-09 16:27:00
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
13952文章数 142731关注度
往期回顾 全部

科技要闻

AI重大突破!OpenAI称解开近百年数学难题

头条要闻

卡德罗夫:俄乌冲突爆发以来 车臣共和国派出超7.6万人

头条要闻

卡德罗夫:俄乌冲突爆发以来 车臣共和国派出超7.6万人

体育要闻

16年后再破门,被皇马放弃的少年没认输

娱乐要闻

郭麒麟最便宜贵公子争议,本人未回应

财经要闻

8月CPI同比涨0.8% PPI环比由降转涨

汽车要闻

魏牌全新蓝山申报信息曝光 方盒子造型 5/6座可选

态度原创

家居
手机
本地
公开课
军事航空

家居要闻

2026建博会(广州) 公装联探展交流活动

手机要闻

中国联通:智能手机正式开启一机四号模式!eSIM手机将冲击2000万台

本地新闻

宁波,中国制造的隐藏大佬

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

停止互袭首都3天后 俄乌猛烈交火

无障碍浏览 进入关怀版