网易首页 > 网易号 > 正文 申请入驻

图像复原“黑科技”!深圳科学家团队1.7秒复原高清大片

0
分享至

图像复原领域长期面临一个难题:要么追求质量却耗时漫长,要么追求速度却牺牲细节。如何把一张老照片修复得又快又好?

近日,中国科学院深圳先进技术研究院数字所董超研究员团队发布了一项名为HYPIR的图像复原大模型,不仅比现有的图像复原技术快数十倍,更在高清分辨率、文字保真、理解能力、用户控制灵活性等方面展现出了优异性能,为图像复原技术的实际应用提供了更高效的解决方案,更为文化传承与保护、影视修复等领域带来新的可能性。


董超研究员(左)介绍HYPIR大模型。

突破传统技术瓶颈,图像修复更高效

传统方法中,基于预训练扩散模型的复原技术显著提升了图像复原效果,但存在计算复杂度高、推理速度慢、训练资源消耗大以及生成结果可控性不足等问题,成为了限制图像复原技术发展的瓶颈问题。

去年,董超团队提出了智能画质增强大模型SUPIR,将低质量的图像恢复到接近原始状态的高清图像,有效修复多种退化类型的图像。而此次图像大模型HYPIR作为升级版,舍弃了迭代式的扩散模型训练,改用单步的对抗生成模型训练方式,将原有的算法速度提升了数倍,同时采用更新的文生图基模型进一步提升算法效果,实现了8K级别的细节生成,在生成图像的稳定性和可控性方面远超SUPIR大模型。

董超介绍,HYPIR主要有两个创新点,一是使用预训练扩散模型初始化复原网络;二是从理论角度出发解释这一简单方法背后蕴含的深刻原理。实验数据显示,在单张显卡(图像处理器)上,HYPIR仅需1.7秒即可完成一张1024x1024分辨率图像的复原。相比现有的图像复原方法,研究人员提出的HYPIR在复原图像的质量上性能更优,且能够适用于各种尺寸的预训练扩散模型,为不同应用场景提供了灵活性。


1985年的深圳南头半岛(下图,摄影:陈宗浩)与4倍超分修复(上图)后的对比图。

多种性能优异,应用前景广阔

在应用层面,研究人员介绍,HYPIR在图像高清分辨率、文字保真、理解能力、用户控制灵活性等方面均展现出了优异的性能。

例如,在老照片修复方面,研究人员运用HYPIR修复了国内外经典电影、电视剧老照片,让模糊的影像重现清晰的细节,为文化记忆传承提供了技术支持。在高分辨率图像修复领域,HYPIR同样表现出色,因其兼具速度与效果,HYPIR成功攻克了传统方法在生成8k分辨率图像时往往面临速度慢或效果不佳的难题。

在文字保真方面,传统基于扩散模型的方法常导致复原出的文字模糊或扭曲,缺乏精确性,而HYPIR则能够使复原出的文字保持高保真度和清晰度,无论是简单的标识还是复杂的文档,HYPIR都能精准地还原其原始形态,使图像中的文字清晰可读。

值得一提的是,HYPIR还具备了突出的自然语言理解能力,能够精准捕捉和理解用户的输入指令,在图像复原过程中准确地反映用户的意图。此外,用户可以根据需求灵活调节生成与复原的平衡,或精细控制图像细节程度,从而获得符合自身偏好的结果。这种用户友好的设计使得HYPIR不仅适用于专业领域,也能满足普通用户的需求。

HYPIR不仅展示了图像修复技术上的创新性,也体现了对实际应用需求的理解。通过打破传统思维定式,该技术在文化传承与保护、影视修复、高分辨率图像生成等领域提供了切实可行的解决方案,为图像复原技术的发展注入了新的活力。

一直以来,董超带领团队致力于底层视觉技术研究,在图像处理领域取得了多个重要突破,并出版了人工智能专著《底层视觉之美》。在他看来,做科研要坚持“三心”,即“初心、良心、爱心”,不仅要保持纯粹的好奇心,也要坚守实事求是的底线,更要秉持科技向善的责任。

“真正的科研成果要尊重事实真相,经得起反复推敲。”董超介绍,目前HYPIR大模型的开源代码和模型已上传至GitHub开放使用并已成功部署于明犀科技平台中,同时与深圳市南山区档案馆合作对部分馆藏照片进行修复,后续该大模型还将进一步推进产业化,让社会公众亲身体验科技魅力。

文:伍曼娜

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
11月,深圳又一家精密大厂宣布停止经营了

11月,深圳又一家精密大厂宣布停止经营了

微微热评
2025-11-19 13:44:44
风向已变了!美德法韩英西班牙等国媒体纷纷把目光转向了中国

风向已变了!美德法韩英西班牙等国媒体纷纷把目光转向了中国

百态人间
2025-11-20 05:05:03
孙颖莎独得2分难救主,山东时隔12年再度加冕,陈梦夺全运会第2金

孙颖莎独得2分难救主,山东时隔12年再度加冕,陈梦夺全运会第2金

钉钉陌上花开
2025-11-19 21:26:07
【扫“苗”】插裤兜,非常罕见的送别动作!日方接受吗?

【扫“苗”】插裤兜,非常罕见的送别动作!日方接受吗?

新民周刊
2025-11-19 09:26:23
模特大赛15号选手夺冠引争议,组委会最新回应:她是太太组冠军,带资进组是谣言

模特大赛15号选手夺冠引争议,组委会最新回应:她是太太组冠军,带资进组是谣言

先锋新闻
2025-11-19 16:47:56
赴日游客在日媒前表示:不在乎政府的呼吁,花钱是自己的自由!

赴日游客在日媒前表示:不在乎政府的呼吁,花钱是自己的自由!

翻开历史和现实
2025-11-19 12:51:46
归化了13人也没用!亚洲球队钻了国际足联漏洞,仍无缘世界杯

归化了13人也没用!亚洲球队钻了国际足联漏洞,仍无缘世界杯

星耀国际足坛
2025-11-19 23:23:03
韩媒警告:一旦东亚开战,韩国导弹将降落北京,同时摧毁中国海军

韩媒警告:一旦东亚开战,韩国导弹将降落北京,同时摧毁中国海军

优趣纪史记
2025-11-20 00:06:12
中方舰队刚进钓鱼岛,日本采取行动,不到24小时,美方下场搅局

中方舰队刚进钓鱼岛,日本采取行动,不到24小时,美方下场搅局

博览历史
2025-11-19 18:36:57
形势严峻,我担心中国要为此而付出沉重代价!

形势严峻,我担心中国要为此而付出沉重代价!

深度报
2025-11-19 22:20:12
刚恢复14天,中国通知日本全面禁止,中方埋伏笔,下步反制将出炉

刚恢复14天,中国通知日本全面禁止,中方埋伏笔,下步反制将出炉

影孖看世界
2025-11-19 17:35:26
世界杯抽签分档确定:西班牙、阿根廷、法国一档

世界杯抽签分档确定:西班牙、阿根廷、法国一档

体坛周报
2025-11-20 00:26:12
浙江16岁小将陈妤颉夺女子200米冠军,成为本届全运会双冠王

浙江16岁小将陈妤颉夺女子200米冠军,成为本届全运会双冠王

懂球帝
2025-11-19 20:44:03
广东模特冠军的事,后续更加劲爆!

广东模特冠军的事,后续更加劲爆!

麦杰逊
2025-11-19 15:31:05
买空卖空?!知名大牌上海经销商,竟敢这么干!大波消费者“钱货两空”

买空卖空?!知名大牌上海经销商,竟敢这么干!大波消费者“钱货两空”

新民晚报
2025-11-19 19:43:44
泰国王后这一跪,这才是顶级外交,她拜的不是佛,是两国的情谊

泰国王后这一跪,这才是顶级外交,她拜的不是佛,是两国的情谊

井普椿的独白
2025-11-19 12:32:41
近一年5.1万家咖啡店倒闭!刚入冬就有大批门店“阵亡”

近一年5.1万家咖啡店倒闭!刚入冬就有大批门店“阵亡”

赢商网新媒体
2025-11-18 21:19:09
国家有难时,请交出你的美元和黄金

国家有难时,请交出你的美元和黄金

霹雳炮
2025-11-19 22:39:39
杭州官宣取消灵隐寺门票

杭州官宣取消灵隐寺门票

界面新闻
2025-11-19 10:37:00
果然,中日谈完,中方收抗议通知,外交部:日本必须给中国一交代

果然,中日谈完,中方收抗议通知,外交部:日本必须给中国一交代

潮鹿逐梦
2025-11-18 20:06:18
2025-11-20 07:47:00
南方都市报 incentive-icons
南方都市报
换一种方式,南都在现场。
583911文章数 3585816关注度
往期回顾 全部

科技要闻

一夜封神,Gemini 3让谷歌找回“碾压感”

头条要闻

日本首次出口具有杀伤力武器 专家:危险信号

头条要闻

日本首次出口具有杀伤力武器 专家:危险信号

体育要闻

世界杯最小参赛国诞生!15万人岛国的奇迹

娱乐要闻

史林子出轨对方前妻放锤!

财经要闻

重磅!中金公司拟收购东兴与信达证券

汽车要闻

此刻价格不重要 第5代帝豪本身就是价值

态度原创

艺术
家居
数码
亲子
时尚

艺术要闻

周恩来夫妇珍贵合影集,太难得一见!

家居要闻

水岸美学 书香人文生活

数码要闻

猫头鹰黑化版散热器风扇来袭

亲子要闻

“广东重男轻女?园长日常揭秘,真相让人震惊!”

辛芷蕾的炸裂10分钟,让人大受震撼

无障碍浏览 进入关怀版