网易首页 > 网易号 > 正文 申请入驻

蚂蚁灵波开源LingBot-Map,仅靠普通摄像头即可实时理解三维世界

0
分享至

4月16日,蚂蚁灵波科技宣布开源流式三维重建模型 LingBot-Map。该模型仅需一个普通RGB摄像头,即可在视频采集过程中实时估计相机位姿、重建场景三维结构,为机器人、自动驾驶、AR眼镜等应用提供连续、稳定、实时的空间感知与理解能力。


(图说:LingBot-Map 在多项国际主流评测中全面领先现有方法,是

在以大尺度、复杂光照和严苛评估标准著称的Oxford Spires数据集上,LingBot-Map的绝对轨迹误差(ATE)仅为 6.42 米,轨迹精度较此前最优流式方法提升近 2.8 倍,也显著优于离线方法 DA3 的 12.87 米和优化方法VIPE 的 10.52 米。

在ETH3D、7-Scenes、Tanks and Temples等多个权威基准上,LingBot-Map在位姿估计和三维重建质量两个维度也全面领先现有流式方法。其中,在ETH3D基准上,其重建F1分数达到98.98,较第二名提升超过21 个百分点,展现出更强的场景还原能力。





除精度外,LingBot-Map 还兼顾实时性与长时稳定运行能力。技术报告显示,该模型可实现约 20 FPS 的推理速度,并支持超过 10,000 帧的长视频序列连续推理,且精度几乎保持不变。这意味着在机器人导航、避障、操作、交互等强调连续在线处理的真实场景中,模型具备在较长时间范围内稳定运行的能力。

流式三维重建是机器人和空间智能系统的重要底层能力。与传统三维重建方法在获取完整图像后再统一处理不同,流式三维重建强调“边看边理解”,系统需要一边接收新的画面,一边持续完成定位和建图,还要控制计算和存储开销。如何在几何精度、时序一致性和运行效率之间取得平衡,一直是流式三维重建的核心难点。

针对上述问题,LingBot-Map采用了面向流式场景的纯自回归式建模方式,基于几何上下文 Transformer,在不依赖未来帧信息的前提下,逐帧处理当前及历史画面,持续输出相机位姿和深度信息,实时恢复场景的三维结构。

LingBot-Map 的核心创新在于其几何上下文注意力(Geometric Context Attention,GCA)机制,能够对跨帧几何信息进行更有效的组织与利用,在保留关键历史信息的同时减少冗余计算。据介绍,该设计借鉴了经典 SLAM 系统对空间信息分层管理的思路,但将原本依赖手工设计和复杂优化的部分交由模型统一学习完成,从而更好兼顾长序列场景下的重建质量、运行效率与系统稳定性。

今年 1 月,蚂蚁灵波相继开源了高精度空间感知模型 LingBot-Depth、具身大模型 LingBot-VLA,世界模型 LingBot-World 和自回归视频-动作模型 LingBot-VA,围绕空间感知、具身决策、世界模拟等关键环节,不断夯实具身智能“智能基座”的技术布局。此次开源的 LingBot-Map,则进一步补齐了实时空间理解与在线三维建图的关键能力拼图。

目前,LingBot-Map 的模型和代码已在 Hugging Face开源。随着更多开发者和研究团队参与,流式三维重建将推动机器人更稳定、更高效地理解和适应真实物理世界。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
乌拉圭罪人?40岁门将3场3次离谱失误:5次送礼历史最差 不停抱怨

乌拉圭罪人?40岁门将3场3次离谱失误:5次送礼历史最差 不停抱怨

风过乡
2026-06-27 09:18:27
央视曝光奇葩“折叠纸头盔”:实测徒手用力一拧,7根骨架全部被折断

央视曝光奇葩“折叠纸头盔”:实测徒手用力一拧,7根骨架全部被折断

91.6陕西交通广播
2026-06-26 07:05:51
广东队,CBA新赛季主教练3选1

广东队,CBA新赛季主教练3选1

体育哲人
2026-06-26 23:11:44
世界杯小组赛接近尾声,金球奖最新获奖概率:梅西第2,C罗第11

世界杯小组赛接近尾声,金球奖最新获奖概率:梅西第2,C罗第11

球场没跑道
2026-06-26 21:44:44
过期一天就绝对不能碰的10种危险食物,第一名你可能经常舍不得扔

过期一天就绝对不能碰的10种危险食物,第一名你可能经常舍不得扔

娱乐的硬糖吖
2026-06-24 17:00:21
白玉兰奖项出炉,诞生5个意想不到,还有2个事实,肖战格局很大

白玉兰奖项出炉,诞生5个意想不到,还有2个事实,肖战格局很大

草莓解说体育
2026-06-27 04:19:22
李作鹏被审判时,写了一首诗,20年后才敢拿出来

李作鹏被审判时,写了一首诗,20年后才敢拿出来

【历史客栈】
2026-06-27 10:00:33
美国务院发言人被质问:美国能禁中国产品,中国为何不能禁美国?

美国务院发言人被质问:美国能禁中国产品,中国为何不能禁美国?

天气观察站
2026-06-26 20:04:46
中国银行行长张辉回应了!直击股东会:16亿投资长江存储和长鑫科技,收益如何?

中国银行行长张辉回应了!直击股东会:16亿投资长江存储和长鑫科技,收益如何?

时代周报
2026-06-27 08:02:25
深夜,猛烈抛售!芯片巨头全线大跌,两大利空突袭

深夜,猛烈抛售!芯片巨头全线大跌,两大利空突袭

证券时报
2026-06-27 00:22:03
安徽双胞胎高考只差1分,清华已联系,父亲一句话说透了

安徽双胞胎高考只差1分,清华已联系,父亲一句话说透了

社会日日鲜
2026-06-26 17:26:08
纪委重点盯上的6种耗材使用行为,你触碰过吗?

纪委重点盯上的6种耗材使用行为,你触碰过吗?

细说职场
2026-06-26 12:51:11
凡尔赛啊!山东一家长称孩子高考687分省排140名,哭诉清北上不了

凡尔赛啊!山东一家长称孩子高考687分省排140名,哭诉清北上不了

火山詩话
2026-06-25 10:36:01
美国前总统国家安全事务助理博尔顿认罪

美国前总统国家安全事务助理博尔顿认罪

新华社
2026-06-27 00:09:06
今夜,30家A股公司提示风险!

今夜,30家A股公司提示风险!

中国基金报
2026-06-27 01:46:45
世界杯32强已产生26席,佛得角出线,小组第3韩国需再超2队可晋级

世界杯32强已产生26席,佛得角出线,小组第3韩国需再超2队可晋级

第五才子
2026-06-27 11:20:58
李银河:无论跟谁谈恋爱结婚,你可以找丑的,找穷的,找矬的,找老的,找复杂的……但是千万记住,一定不可以找情绪不稳定的,贬低你的

李银河:无论跟谁谈恋爱结婚,你可以找丑的,找穷的,找矬的,找老的,找复杂的……但是千万记住,一定不可以找情绪不稳定的,贬低你的

大爱三湘
2026-06-26 21:40:52
制片人于冬:拍主旋律不能把观众当成被教育的对象|造梦者说

制片人于冬:拍主旋律不能把观众当成被教育的对象|造梦者说

新京报
2026-06-25 20:55:00
30页论文被判“98%由AI生成”,每年30万奖学金也告吹?一名大学生「破防」:我写了整整6个月!

30页论文被判“98%由AI生成”,每年30万奖学金也告吹?一名大学生「破防」:我写了整整6个月!

CSDN
2026-06-26 16:00:00
把瑜伽裤穿成日常的松弛感美女

把瑜伽裤穿成日常的松弛感美女

只要高兴就好
2026-04-13 14:30:30
2026-06-27 12:48:49
光锥智能 incentive-icons
光锥智能
来这里,看千行百业的数字化、智能化。
1018文章数 139关注度
往期回顾 全部

科技要闻

GPT-5.6发布,你暂时用不了!Mythos也放行

头条要闻

中国"避暑神器"在欧洲卖爆 生产企业:正加班加点补货

头条要闻

中国"避暑神器"在欧洲卖爆 生产企业:正加班加点补货

体育要闻

世界杯最火门将,站到了阿根廷和梅西面前

娱乐要闻

杨紫获白玉兰最佳女主角奖,泪洒现场

财经要闻

OpenAI推迟IPO重创软银!

汽车要闻

11.99万起 捷途自由者7 PLUS/山海T1四驱版上市

态度原创

手机
教育
亲子
公开课
军事航空

手机要闻

苹果iOS 27 Beta 2固件代码出现百度视觉搜索

教育要闻

安徽中医药大学招生计划是多少?今年新增哪些专业?来看官方解答!(编辑:小yu)

亲子要闻

甲酰胺纸尿裤,暴露了被价格战卷疯的产业链

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

黎以美达成三方框架协议

无障碍浏览 进入关怀版