网易首页 > 网易号 > 正文 申请入驻

ICRA 2026 | EndoDDC:扩散模型赋能稀疏到稠密深度重建

0
分享至

来源:公众号“labren”

原文链接:https://mp.weixin.qq.com/s/97_CzzOnRfXvVUV_q30wKQ?scene=1&click_id=26



香港中文大学任洪亮教授团队论文《EndoDDC:通过扩散深度补全学习稀疏到密集重建用于内窥镜机器人导航》被机器人领域顶会 IEEE International Conference on Robotics and Automation (ICRA 2026) 录用。


论文题目:EndoDDC: Learning Sparse to Dense Reconstruction for Endoscopic Robotic Navigation via Diffusion Depth Completion

论文作者:林胤恒†(香港中文大学),黄一鸣†(香港中文大学),崔贝雷(香港中文大学), 白龙(阿里巴巴达摩院,香港中文大学), 高沪昕(香港中文大学),任洪亮(香港中文大学), 赖捷文*(香港中文大学)

论文简介:

在微创外科手术中,内镜机器人的精准导航是提升手术精度、保障患者安全的核心。而精准导航的关键,在于获取可靠的三维深度信息 —— 但内镜环境下的弱纹理组织、镜面反射等问题,一直让深度估计成为技术难题。现有方法要么依赖难以获取的稠密标注数据,要么在复杂内镜场景中鲁棒性不足,稀疏深度重建的有效性大打折扣。

我们提出的EndoDDC方法,为内镜机器人导航的深度估计难题提供了创新解决方案。该方法通过融合图像、稀疏深度信息与深度梯度特征,借助扩散模型优化深度图,成功攻克弱纹理、光反射带来的技术痛点。

主要贡献:

  • EndoDDC针对内镜场景量身设计稀疏到稠密重建框架,有效解决传统微调方法对标注数据的依赖,以及自监督学习的尺度模糊问题,仅通过 RGB 图像和稀疏深度图即可输出精准稠密深度图。

  • 创新引入深度梯度融合模块,通过卷积门控循环单元(ConvGRU)迭代处理深度值与梯度信息,为重建过程提供精准几何引导,大幅提升弱纹理区域的重建精度。

  • 提出基于深度梯度的条件扩散模型,以初始粗深度图为起点,利用深度梯度特征约束去噪过程,迭代优化深度值,确保重建结果的全局一致性与物理合理性。

  • 在 C3VD 和 StereoMIS 两大公开内镜数据集上完成全面验证,所有评估指标(RMSE、MAE、REL、δ 准确率)均超越当前 SOTA 方法。相较于最优深度补全模型 OGNI-DC,C3VD 数据集上 RMSE 降低 5.28%、MAE 降低 7.84%;即使面对 50~50000 不同稀疏度的输入,仍能稳定输出高质量稠密深度图。


EndoDDC方法概览和可视化样例


EndoDDC 概述:在从 RGB 图像和稀疏深度图提取特征后,Depth Grad Fusion 模块会基于深度和梯度特征迭代地更新状态隐藏网络。然后,将该输出输入到 Depth Diffusion 模型进行条件引导下的补全。


在 C3VD 和 STEREOMIS 数据集上与SOTA方法的深度补全结果比较。


在 C3VD 和 StereoMIS 数据集上的比较。我们将 EndoDDC 与最先进的深度估计和深度补全方法进行比较;我们的方法在组织细节方面产生的误差更少。

【香港中文大学任洪亮教授课题组】

香港中文大学(CUHK)医学机器人感知与人工智能研究课题组欢迎博士/博士后/研究助理加入,主要领域包括:医学机器人与智能系统、图像引导手术中的AI学习与控制、医疗机电一体化、连续和柔性机器人与传感器、变刚度调控技术、AI辅助内窥诊断、医学图像处理等。更多详情,请参阅任洪亮教授Google Scholar信息页与实验室网站http://labren.org/

参考文献:

Lin, Y., Huang, Y., Cui, B., Bai, L., Gao, H., Ren, H. & Lai, J. (2026). EndoDDC: Learning Sparse to Dense Reconstruction for Endoscopic Robotic Navigation via Diffusion Depth Completion. ICRA 2026.

雷峰网

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
法国总统:坚决杜绝骚乱重演

法国总统:坚决杜绝骚乱重演

澎湃新闻
2026-10-22 00:28:04
乐基儿年轻时真漂亮,看曾志伟的眼神就知道了

乐基儿年轻时真漂亮,看曾志伟的眼神就知道了

娱你同欢
2026-09-13 20:22:17
4-0!斯诺克再爆冷门:中国球员掀翻2位世界冠军,首进16强创纪录

4-0!斯诺克再爆冷门:中国球员掀翻2位世界冠军,首进16强创纪录

球场没跑道
2026-10-21 19:58:31
被牺牲的一代人

被牺牲的一代人

枫冷慕诗
2026-10-21 11:47:32
“接我回家吧”,90岁老人住养老院第3天就求儿子,儿子也是白发老人,站在床边说不出话

“接我回家吧”,90岁老人住养老院第3天就求儿子,儿子也是白发老人,站在床边说不出话

王老师你还好吗
2026-10-20 22:33:14
战争爆发前的预兆出现!美国已经有4个征兆,张召忠预言要成真?

战争爆发前的预兆出现!美国已经有4个征兆,张召忠预言要成真?

画卷
2026-10-08 19:17:31
石上14个毛体字:能全通关的,请留步指点。认草书时,一个转折为什么会影响字的判断?

石上14个毛体字:能全通关的,请留步指点。认草书时,一个转折为什么会影响字的判断?

书画相约
2026-10-22 07:38:38
遵义会议被撤职,张国焘要拉走部队,李德用俄语挡在毛主席身前

遵义会议被撤职,张国焘要拉走部队,李德用俄语挡在毛主席身前

听雪禅
2026-10-20 17:40:10
最新癌症排行榜发布,肺癌断崖式位居榜首,三大结节好发部位居前列

最新癌症排行榜发布,肺癌断崖式位居榜首,三大结节好发部位居前列

呼吸科大夫胡洋
2026-10-21 17:01:21
妙瓦底电诈刚清剿,81岁昂山素季收到密信,中方:缅甸不能再乱

妙瓦底电诈刚清剿,81岁昂山素季收到密信,中方:缅甸不能再乱

观史搜寻着
2026-10-21 22:09:54
1945年,罗斯福为什么把一个连国家都没统一、文盲率超过90%的农业国中国硬塞进了联合国五常?

1945年,罗斯福为什么把一个连国家都没统一、文盲率超过90%的农业国中国硬塞进了联合国五常?

扶苏聊历史
2026-09-26 09:20:08
日本和中国有不共戴天之仇,为什么日本却有100多万华人人口

日本和中国有不共戴天之仇,为什么日本却有100多万华人人口

史智文道
2026-10-21 09:56:55
中央党报发声,懂车帝的商业模式悬了

中央党报发声,懂车帝的商业模式悬了

起点财经
2026-10-20 08:49:41
媒体人:法比奥与国安还有1年合约,高层认可他,留下很乐观

媒体人:法比奥与国安还有1年合约,高层认可他,留下很乐观

懂球帝
2026-10-22 11:06:12
四平溃败东北濒临崩盘,无人敢战之际,却被闲置时的陈光一战翻盘

四平溃败东北濒临崩盘,无人敢战之际,却被闲置时的陈光一战翻盘

纪史行者
2026-09-27 06:35:06
4-1大胜!伯纳乌多点开花,B席破荒、迪奥曼德反戈旧主,姆巴佩传射定局

4-1大胜!伯纳乌多点开花,B席破荒、迪奥曼德反戈旧主,姆巴佩传射定局

友谊第一
2026-10-22 12:21:34
7岁路易穿西装亮相复活节,梅根晒阿奇莉莉贝特喂鸡寻蛋

7岁路易穿西装亮相复活节,梅根晒阿奇莉莉贝特喂鸡寻蛋

草莓解说体育
2026-10-22 01:54:58
阵亡士兵遗孀当面质问万斯:伊朗战争无人机袭击前有太多失误

阵亡士兵遗孀当面质问万斯:伊朗战争无人机袭击前有太多失误

自愈小日子
2026-10-21 02:32:24
属于曼联的“恐怖游轮”,为何怎么换帅都走不出死循环?

属于曼联的“恐怖游轮”,为何怎么换帅都走不出死循环?

显微镜下的人性
2026-10-22 00:33:48
韩媒:中国足坛惊现新天才,起点超过武磊和王钰栋

韩媒:中国足坛惊现新天才,起点超过武磊和王钰栋

行舟问茶
2026-10-22 11:24:25
2026-10-22 13:11:00
雷峰网 incentive-icons
雷峰网
关注智能与未来!
71356文章数 656263关注度
往期回顾 全部

科技要闻

腾讯云谷歌紧急行动!互联网安全出大事

头条要闻

伊朗伊斯兰革命卫队发言人:我们准备推出"炸弹之父"

头条要闻

伊朗伊斯兰革命卫队发言人:我们准备推出"炸弹之父"

体育要闻

热闹的NBA回来了,他却倒在新赛季大门口

娱乐要闻

杜淳王灿近况曝光:铁婚六年甜上热搜

财经要闻

为卖房,有房企花20万拍短剧

汽车要闻

有七座/续航提升 领克900L曝光还可选双色车身+大饼轮毂

态度原创

时尚
本地
房产
家居
健康

中年男人,开始抢着打针回春

本地新闻

一场垂直登高赛跑出了"山城"的真正内核

房产要闻

2026国际新消费(医疗)旅游服务出海论坛在海口盛大举办

家居要闻

2026建博会(广州) 公装联探展交流活动

痘痘能根治吗?皮肤科医生说实话

无障碍浏览 进入关怀版