网易首页 > 网易号 > 正文 申请入驻

剑桥大学定义图形世界:神经网络让纹理压缩像画家调色一样自然

0
分享至

在数字图形的世界里,纹理就像是给3D模型穿上的衣服,让原本光秃秃的几何体变得生动逼真。然而,这些"衣服"往往非常占用存储空间和计算资源,就像一个衣柜里堆满了厚重的冬装。剑桥大学计算机科学技术系的研究团队在2026年2月发表的这项研究(论文编号arXiv:2602.02354v1),就像是发明了一种神奇的压缩技术,能够把厚重的冬装变成同样保暖但轻薄如丝的材料。

这项研究的核心在于探索一种全新的纹理表示方法——隐式神经表示(Implicit Neural Representation,简称INR)。传统的纹理存储方式就像是用数码相机拍照,每个像素点都要单独记录颜色信息,数据量庞大。而INR技术则更像是训练一位画家的大脑,让神经网络学会根据坐标位置直接"想象"出该处应该是什么颜色,从而用极少的参数就能重现复杂的纹理图案。

研究团队选择了四种不同的神经网络架构来完成这项"画家训练计划"。第一种是最基础的多层感知机(MLP),就像是刚入门的画家,只掌握了基本的绘画技巧。第二种加入了正弦激活函数的SIREN网络,如同天赋异禀的画家,天生对曲线和波浪有着敏锐的感知。第三种则配备了傅里叶位置编码的MLP,相当于给画家配了一副特殊眼镜,能够更清晰地捕捉到高频细节。第四种虽然实现了多分辨率哈希编码,但由于纹理分辨率限制,研究团队认为它在此场景下优势不明显。

为了验证这些"画家"的能力,研究团队从包含5640张图像、47个不同类别的可描述纹理数据集中精心挑选了25张最具代表性的样本。这个选择过程就像是为画家选择最具挑战性的题材,研究人员使用拉普拉斯方差作为衡量标准,这个指标能够反映图像的复杂程度和清晰度,确保选出的样本能够全面考验不同网络的表现能力。

在实际的"绘画比赛"中,研究团队发现每种网络都有着独特的"绘画风格"和擅长领域。最基础的MLP就像是用模糊的画笔作画,总是产生朦胧的效果,虽然有时这种朦胧美反而适合某些场景,但整体上缺乏细节表现力。SIREN网络则展现出了对曲线的天赋,能够很好地表现波浪、云朵等自然纹理,但在处理直线和几何图案时却显得力不从心,经常产生一些"波浪状"的意外效果。

最令人印象深刻的是配备傅里叶编码的MLP,它就像是戴上了高倍显微镜的画家,能够捕捉到极其精细的纹理细节。在感知质量评估中,这种网络几乎达到了与原始纹理难以区分的程度。然而,它也有自己的"个人风格"——偶尔会在画面中添加一些细微的颗粒感,特别是在处理大面积单一颜色区域时。

研究过程中,团队还发现了一个有趣的现象:优化器的选择对"画家"的表现有着决定性影响。Adam优化器就像是一位耐心的绘画老师,能够稳定地指导网络学习,而Rprop优化器虽然有时能带来惊喜,但整体表现不够稳定,经常让画家在学习过程中走弯路。

为了让这些"数字画家"更加实用,研究团队还探索了多级纹理(mipmap)的处理能力。在传统的图形系统中,为了在不同距离下显示合适的纹理细节,需要预先生成多个不同分辨率的版本,就像为同一幅画准备不同尺寸的复印件。而神经网络画家们学会了根据一个额外的"距离参数"来调整绘画的精细程度,就像真正的画家能够根据观看距离调整笔触粗细一样。

在与传统压缩技术ASTC的比较中,神经网络方法展现出了明显的优势。ASTC就像是用印刷机批量生产图像,虽然压缩率很高,但质量损失明显,特别是在感知质量方面。而神经网络方法更像是让画家用记忆重新绘制,虽然可能在某些像素级别的细节上有微小差异,但整体的视觉效果和艺术感受却能很好地保持。

研究团队甚至尝试了一个更加前卫的想法——在神经网络的参数空间中进行"创作"。他们训练了一个生成模型来学习不同纹理对应的网络参数模式,就像是培养一位能够模仿不同画家风格的超级画家。虽然这个方向的结果还不够完美,但已经展示出了令人兴奋的可能性。

为了将这项技术真正应用到实际的图形渲染中,研究团队将他们的方法集成到了Mitsuba 3渲染器中。这个集成过程就像是为专业的艺术工作室配备了这些"数字画家",让它们能够实时参与到3D场景的渲染过程中。虽然目前的渲染速度还不能满足实时游戏的需求,但对于电影制作、建筑可视化等对质量要求更高的应用场景来说,这种技术已经显示出了巨大的潜力。

在训练效率方面,这些"画家"的学习过程相对迅速,在配备RTX 5080Ti显卡的设备上,大约只需要50到200秒就能完成一个纹理的学习过程。这个速度虽然不能用于实时应用,但对于内容创作者来说已经相当实用了。

研究团队还详细分析了不同网络架构的内存占用情况。相比传统的纹理存储方式,神经网络方法的内存占用要小得多,特别是对于高分辨率纹理来说,这种优势更加明显。这就像是用一小段乐谱就能让音乐家演奏出完整的交响曲,而不需要存储每一个音符的录音。

通过大量的实验和评估,研究团队证明了神经网络在纹理表示方面的巨大潜力。在多个评价指标中,特别是在LPIPS(学习感知图像块相似性)这个更贴近人类视觉感受的指标上,神经网络方法都表现出了显著的优势。这意味着即使在技术细节上可能有微小差异,但人眼看到的效果几乎与原始纹理无异。

这项研究不仅仅是一个技术验证,更像是为未来的数字内容创作开启了一扇新的大门。随着游戏画面越来越逼真,虚拟现实体验越来越丰富,对纹理质量和存储效率的要求也越来越高。传统的纹理压缩技术就像是用更小的相框装更大的画,总是要在质量和大小之间做出妥协。而神经网络方法则提供了一种全新的思路——让计算机学会"理解"纹理的本质,然后用这种理解来重现纹理,而不是简单地存储像素信息。

当然,这项技术目前还有一些限制。比如对于每种纹理都需要单独训练网络,这个过程虽然不算太长,但也不能做到即时完成。另外,在处理某些特定类型的纹理时,不同的网络架构会表现出明显的偏好,需要根据具体应用场景来选择最合适的方法。

展望未来,这项技术有着广阔的应用前景。在游戏开发中,它能够显著减少游戏包的大小,同时保持高质量的视觉效果。在虚拟现实应用中,它能够在有限的硬件资源下提供更丰富的视觉体验。在电影和动画制作中,它为创作者提供了新的工具来表现复杂的材质效果。

研究团队在论文的最后部分还提出了许多值得探索的未来方向。比如如何更智能地选择网络超参数,如何处理各向异性过滤,如何将多个相似纹理压缩到同一个网络中等等。这些方向就像是为这幅宏大的技术蓝图添加了更多精彩的细节,等待着后续的研究者去填充和完善。

说到底,这项来自剑桥大学的研究就像是在数字世界中重新定义了"记忆"的概念。传统的纹理存储方式是"死记硬背",每个像素都要精确记录。而神经网络方法更像是"理解记忆",通过学习纹理的内在规律和模式,用更少的信息重现更丰富的视觉效果。这种从量变到质变的转换,不仅仅是技术上的进步,更代表了我们对数字内容表示方式的全新思考。

对于普通用户来说,虽然可能不会直接接触到这些底层技术,但它们带来的改变却会悄无声息地影响我们的数字生活体验。未来的游戏可能会更小但更精美,虚拟现实体验可能会更流畅但更逼真,这一切的背后,都有着像这项研究一样的基础技术创新在默默支撑。有兴趣深入了解技术细节的读者可以通过论文编号arXiv:2602.02354v1查询完整的研究报告。

Q&A

Q1:神经网络纹理压缩技术与传统JPEG压缩有什么区别?

A:传统的JPEG压缩就像用印刷机复制图像,通过删减信息来减小文件大小,但会造成明显的质量损失。而神经网络纹理压缩更像是训练一位画家的大脑,让网络学会根据坐标位置直接"想象"出该处的颜色,用极少的参数就能重现复杂纹理,在大幅减少存储空间的同时保持极高的视觉质量。

Q2:SIREN网络在处理纹理时有什么特殊优势?

A:SIREN网络使用正弦激活函数,就像天赋异禀的画家对曲线和波浪有着敏锐感知。它特别擅长表现自然纹理如波浪、云朵等,能够很好地捕捉这些图案的周期性特征。但在处理直线和几何图案时却显得力不从心,经常会产生一些意外的波浪状效果。

Q3:这项纹理压缩技术什么时候能应用到实际游戏中?

A:目前这项技术的训练过程需要50-200秒,渲染速度还不能满足实时游戏需求。但对于电影制作、建筑可视化等对质量要求更高的应用场景已经显示出巨大潜力。随着硬件性能提升和算法优化,未来几年内很可能会在游戏开发中看到这项技术的应用,特别是在减少游戏包大小方面。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
你有洗屁股的习惯吗?医生提醒:天天洗肛门的人或能预防4种疾病

你有洗屁股的习惯吗?医生提醒:天天洗肛门的人或能预防4种疾病

芹姐说生活
2026-08-20 22:50:20
全网力挺郑功成!养老金要拨乱反正?公共福利不能任由强者通吃

全网力挺郑功成!养老金要拨乱反正?公共福利不能任由强者通吃

混沌录
2026-08-19 23:02:09
上海地铁涨 1 元,都怪安检?真正拖垮全国地铁,是城市回避的真相

上海地铁涨 1 元,都怪安检?真正拖垮全国地铁,是城市回避的真相

王二哥老搞笑
2026-08-21 02:33:32
降价47%,原研“降压药王”入选最新国采!高血压患者能明显获益

降价47%,原研“降压药王”入选最新国采!高血压患者能明显获益

荷兰豆爱健康
2026-08-19 11:28:35
中共中央 国务院 中央军委  关于给张陆颁发“二级航天功勋奖章”  授予武飞、张洪章“英雄航天员”荣誉称号  并颁发“三级航天功勋奖章”的决定

中共中央 国务院 中央军委  关于给张陆颁发“二级航天功勋奖章”  授予武飞、张洪章“英雄航天员”荣誉称号  并颁发“三级航天功勋奖章”的决定

新华社
2026-08-20 16:55:02
开了个大会,聘了个骗子,当地官方称自己“也是受害者”

开了个大会,聘了个骗子,当地官方称自己“也是受害者”

南方都市报
2026-08-20 19:39:36
10岁男童两次在校门口徘徊后溺亡,家人称监控显示多次遭老师殴打,警方不予立案,当地已提级处理

10岁男童两次在校门口徘徊后溺亡,家人称监控显示多次遭老师殴打,警方不予立案,当地已提级处理

大风新闻
2026-08-20 22:13:06
计算机跌下神坛、“天坑”杀进前十!中国最赚钱的专业,变了

计算机跌下神坛、“天坑”杀进前十!中国最赚钱的专业,变了

智谷趋势
2026-08-20 17:15:35
13.18万!丰田新车正式上市

13.18万!丰田新车正式上市

科技堡垒
2026-08-20 11:41:26
入秋后,遇见3种鱼别手软!隔天吃一次,健脾养胃强免疫,早知道

入秋后,遇见3种鱼别手软!隔天吃一次,健脾养胃强免疫,早知道

阿龙美食记
2026-08-19 14:58:00
俄日吵得不可开交!日本逼中国站队,中方回应把日本问住了

俄日吵得不可开交!日本逼中国站队,中方回应把日本问住了

动漫里的童话
2026-08-20 09:25:41
江苏富豪重金为痴傻儿子娶妻,拜金女孩欣然答应,新婚当晚却愣住

江苏富豪重金为痴傻儿子娶妻,拜金女孩欣然答应,新婚当晚却愣住

温情邮局
2025-07-09 14:39:26
21岁水上飞人教练溺亡!死前推开游客,离职同事曝猛料,原因曝光太痛心

21岁水上飞人教练溺亡!死前推开游客,离职同事曝猛料,原因曝光太痛心

小鋭有话说
2026-08-20 16:26:03
掘金交易沃特森后续:已与德罗赞展开签约谈判 薪金或成主要障碍

掘金交易沃特森后续:已与德罗赞展开签约谈判 薪金或成主要障碍

越岭寻踪
2026-08-20 08:36:57
太疯狂了!今夏已经豪购3.64亿欧的他们,又花8500万谈妥曼城边锋

太疯狂了!今夏已经豪购3.64亿欧的他们,又花8500万谈妥曼城边锋

里芃芃体育
2026-08-21 07:50:08
许家印被判处无期徒刑,恒大集团、恒大地产等案一审宣判

许家印被判处无期徒刑,恒大集团、恒大地产等案一审宣判

界面新闻
2026-08-20 12:01:52
许家印“大结局”了,还是那个问题:600万套烂尾楼,谁来买单?

许家印“大结局”了,还是那个问题:600万套烂尾楼,谁来买单?

迷世书童
2026-08-20 14:50:17
中央气象台最新预判:“沙德尔”(最强可达超强台风)将以每小时10-15公里的速度向北偏西方向移动,强度逐渐增强,趋向琉球群岛以东洋面

中央气象台最新预判:“沙德尔”(最强可达超强台风)将以每小时10-15公里的速度向北偏西方向移动,强度逐渐增强,趋向琉球群岛以东洋面

都市快报橙柿互动
2026-08-21 06:38:55
德约科维奇妻子打破沉默:不认同丈夫疫苗立场,发帖后“地狱之门打开”

德约科维奇妻子打破沉默:不认同丈夫疫苗立场,发帖后“地狱之门打开”

慢享生活集
2026-08-20 19:40:45
APEC峰会进入倒计时,高市早苗望眼欲穿,中方的邀请函并非发给她

APEC峰会进入倒计时,高市早苗望眼欲穿,中方的邀请函并非发给她

探源历史
2026-08-21 01:37:20
2026-08-21 10:24:49
科技行者 incentive-icons
科技行者
科技正在如何变革商业世界
9599文章数 568关注度
往期回顾 全部

科技要闻

快手Q2研发狂烧45亿:如何面对双面夹击

头条要闻

女游客深山突发脑梗 医护背10公斤设备徒步40分钟救人

头条要闻

女游客深山突发脑梗 医护背10公斤设备徒步40分钟救人

体育要闻

46岁小罗抵达意大利 将为拉文纳征战意丙

娱乐要闻

迪丽热巴与陈飞宇的恋情罗生门

财经要闻

包起号、包上榜 流量围城里的中小餐馆

汽车要闻

比总部还大?比亚迪藏在上海虹桥的巨无霸闪充站!

态度原创

手机
旅游
本地
公开课
军事航空

手机要闻

Apple Music收紧AI政策 机器生成内容必须添加披露标签

旅游要闻

青海乌兰:茶卡盐湖“天空之镜”引客来

本地新闻

先导片|攀登不止,让不同的故事在此连接

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

知情人士称美国“林肯”号航母开始返航

无障碍浏览 进入关怀版