网易首页 > 网易号 > 正文 申请入驻

ICRA 2026 | EndoDDC:扩散模型赋能稀疏到稠密深度重建

0
分享至

来源:公众号“labren”

原文链接:https://mp.weixin.qq.com/s/97_CzzOnRfXvVUV_q30wKQ?scene=1&click_id=26



香港中文大学任洪亮教授团队论文《EndoDDC:通过扩散深度补全学习稀疏到密集重建用于内窥镜机器人导航》被机器人领域顶会 IEEE International Conference on Robotics and Automation (ICRA 2026) 录用。


论文题目:EndoDDC: Learning Sparse to Dense Reconstruction for Endoscopic Robotic Navigation via Diffusion Depth Completion

论文作者:林胤恒†(香港中文大学),黄一鸣†(香港中文大学),崔贝雷(香港中文大学), 白龙(阿里巴巴达摩院,香港中文大学), 高沪昕(香港中文大学),任洪亮(香港中文大学), 赖捷文*(香港中文大学)

论文简介:

在微创外科手术中,内镜机器人的精准导航是提升手术精度、保障患者安全的核心。而精准导航的关键,在于获取可靠的三维深度信息 —— 但内镜环境下的弱纹理组织、镜面反射等问题,一直让深度估计成为技术难题。现有方法要么依赖难以获取的稠密标注数据,要么在复杂内镜场景中鲁棒性不足,稀疏深度重建的有效性大打折扣。

我们提出的EndoDDC方法,为内镜机器人导航的深度估计难题提供了创新解决方案。该方法通过融合图像、稀疏深度信息与深度梯度特征,借助扩散模型优化深度图,成功攻克弱纹理、光反射带来的技术痛点。

主要贡献:

  • EndoDDC针对内镜场景量身设计稀疏到稠密重建框架,有效解决传统微调方法对标注数据的依赖,以及自监督学习的尺度模糊问题,仅通过 RGB 图像和稀疏深度图即可输出精准稠密深度图。

  • 创新引入深度梯度融合模块,通过卷积门控循环单元(ConvGRU)迭代处理深度值与梯度信息,为重建过程提供精准几何引导,大幅提升弱纹理区域的重建精度。

  • 提出基于深度梯度的条件扩散模型,以初始粗深度图为起点,利用深度梯度特征约束去噪过程,迭代优化深度值,确保重建结果的全局一致性与物理合理性。

  • 在 C3VD 和 StereoMIS 两大公开内镜数据集上完成全面验证,所有评估指标(RMSE、MAE、REL、δ 准确率)均超越当前 SOTA 方法。相较于最优深度补全模型 OGNI-DC,C3VD 数据集上 RMSE 降低 5.28%、MAE 降低 7.84%;即使面对 50~50000 不同稀疏度的输入,仍能稳定输出高质量稠密深度图。


EndoDDC方法概览和可视化样例


EndoDDC 概述:在从 RGB 图像和稀疏深度图提取特征后,Depth Grad Fusion 模块会基于深度和梯度特征迭代地更新状态隐藏网络。然后,将该输出输入到 Depth Diffusion 模型进行条件引导下的补全。


在 C3VD 和 STEREOMIS 数据集上与SOTA方法的深度补全结果比较。


在 C3VD 和 StereoMIS 数据集上的比较。我们将 EndoDDC 与最先进的深度估计和深度补全方法进行比较;我们的方法在组织细节方面产生的误差更少。

【香港中文大学任洪亮教授课题组】

香港中文大学(CUHK)医学机器人感知与人工智能研究课题组欢迎博士/博士后/研究助理加入,主要领域包括:医学机器人与智能系统、图像引导手术中的AI学习与控制、医疗机电一体化、连续和柔性机器人与传感器、变刚度调控技术、AI辅助内窥诊断、医学图像处理等。更多详情,请参阅任洪亮教授Google Scholar信息页与实验室网站http://labren.org/

参考文献:

Lin, Y., Huang, Y., Cui, B., Bai, L., Gao, H., Ren, H. & Lai, J. (2026). EndoDDC: Learning Sparse to Dense Reconstruction for Endoscopic Robotic Navigation via Diffusion Depth Completion. ICRA 2026.

雷峰网

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
垃圾!中国留学生披日本旭日旗,引发全网震怒!

垃圾!中国留学生披日本旭日旗,引发全网震怒!

News脑洞
2026-10-17 19:22:14
姆巴佩:如果维尼修斯不开心,那也是因为他想为球队多做些事

姆巴佩:如果维尼修斯不开心,那也是因为他想为球队多做些事

懂球帝
2026-10-22 05:27:08
巴克利:对库明加的耐心快耗尽了,再给他半个赛季

巴克利:对库明加的耐心快耗尽了,再给他半个赛季

快乐加载中21
2026-10-22 11:21:12
景甜回应大反转,瓜越扒越多了

景甜回应大反转,瓜越扒越多了

李东阳朋友圈
2026-08-28 09:54:26
曼联内讧指南:马丁内斯骂高层,B费骂教练,比分骂所有人

曼联内讧指南:马丁内斯骂高层,B费骂教练,比分骂所有人

姜大叔侃球
2026-10-22 11:16:52
俄媒发文剖析中国歼-7!表面夸老飞机,实际想问生产线怎么不断?

俄媒发文剖析中国歼-7!表面夸老飞机,实际想问生产线怎么不断?

影孖看世界
2026-10-21 20:46:13
克林顿自传揭秘中国大使馆被误炸经过:实际上命中了预定目标!

克林顿自传揭秘中国大使馆被误炸经过:实际上命中了预定目标!

舆图看世界
2026-10-17 15:50:04
破防了!一位美女妈妈在家长会上出圈,被吐槽“这是孩子的班会,不是选美大赛”,评论区吵翻

破防了!一位美女妈妈在家长会上出圈,被吐槽“这是孩子的班会,不是选美大赛”,评论区吵翻

火山詩话
2026-10-19 08:27:01
意大利暴乱 米兰壮汉手持防暴棍 只身击退零元购暴徒

意大利暴乱 米兰壮汉手持防暴棍 只身击退零元购暴徒

环球趣闻分享
2026-10-21 16:01:53
直到孩子上了高中才发现:我曾坚决反对“超前学”,错得有多离谱

直到孩子上了高中才发现:我曾坚决反对“超前学”,错得有多离谱

蝴蝶花雨话教育
2026-10-22 00:05:21
美股收盘:三大指数集体上涨,纳指涨1.05%;存储概念股反弹,SK海力士涨超2%;科技股多数上涨,SpaceX涨超7%,英伟达涨超2%

美股收盘:三大指数集体上涨,纳指涨1.05%;存储概念股反弹,SK海力士涨超2%;科技股多数上涨,SpaceX涨超7%,英伟达涨超2%

中新经纬
2026-10-22 06:11:44
国台办:只要民进党当局承认“九二共识”,我们愿意就恢复两岸投资争端协处机制运作开展对话

国台办:只要民进党当局承认“九二共识”,我们愿意就恢复两岸投资争端协处机制运作开展对话

红星新闻
2026-10-21 12:12:25
10月20日俄乌最新:重大进展

10月20日俄乌最新:重大进展

西楼饮月
2026-10-20 21:36:25
小杨哥复出首播,热度高却难回巅峰

小杨哥复出首播,热度高却难回巅峰

阿废冷眼观察所
2026-10-20 15:06:15
国家已定调,加装电梯不必再争,未来5年老旧小区将迎大调整?

国家已定调,加装电梯不必再争,未来5年老旧小区将迎大调整?

职场资深秘书
2026-10-21 19:14:46
韩国电视台报道:破防了!餐馆里九成的泡菜,竟全是中国山东造的

韩国电视台报道:破防了!餐馆里九成的泡菜,竟全是中国山东造的

墨策史
2026-10-22 09:39:12
贝克汉姆长子大布与妮可拉牵手出街,美式穿搭吸睛

贝克汉姆长子大布与妮可拉牵手出街,美式穿搭吸睛

墨薷桃桃
2026-10-16 13:26:01
为方便歌迷返程,铁路南京站计划在10月25日晚上,增开G9431次、G9429次两趟夜间高铁!

为方便歌迷返程,铁路南京站计划在10月25日晚上,增开G9431次、G9429次两趟夜间高铁!

大风新闻
2026-10-21 20:32:21
A股全线下跌!发生什么了?

A股全线下跌!发生什么了?

龙行天下虎
2026-10-22 10:34:42
再遭重创,激战时刻弹道导弹发射装置被摧毁,彻底失去远程打击作战能力

再遭重创,激战时刻弹道导弹发射装置被摧毁,彻底失去远程打击作战能力

聚峰军评
2026-10-21 13:39:09
2026-10-22 11:55:00
雷峰网 incentive-icons
雷峰网
关注智能与未来!
71352文章数 656263关注度
往期回顾 全部

科技要闻

腾讯云谷歌紧急行动!互联网安全出大事

头条要闻

公司称被拖欠工程款数百万元 中建一局:安排专人跟进

头条要闻

公司称被拖欠工程款数百万元 中建一局:安排专人跟进

体育要闻

热闹的NBA回来了,他却倒在新赛季大门口

娱乐要闻

杜淳王灿近况曝光:铁婚六年甜上热搜

财经要闻

为卖房,有房企花20万拍短剧

汽车要闻

有七座/续航提升 领克900L曝光还可选双色车身+大饼轮毂

态度原创

健康
亲子
旅游
手机
公开课

痘痘能根治吗?皮肤科医生说实话

亲子要闻

家里面遗传“菱形并指”,妈妈:我那时候条件不好就没做

旅游要闻

以美为介 助农兴县——2026世界旅游小姐走进天等 文旅赋能绘就和美乡村新画卷

手机要闻

荣耀WIN2手机发布:WIN电竞宇宙进一步扩展,国补到手价4999元起

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版