网易首页 > 网易号 > 正文 申请入驻

Nano Banana不会应试!指标拉垮,视觉效果惊艳,实测14个任务

0
分享至

新智元报道

编辑:LRST

【新智元导读】最新报告探讨了生成式模型Nano Banana Pro在低层视觉任务中的表现,如去雾、超分等,传统上依赖PSNR/SSIM等像素级指标。研究发现,Nano Banana Pro在视觉效果上更佳,但传统指标表现欠佳,因生成式模型更追求语义合理而非像素对齐。报告还提出改进方向和新评测范式的思考,强调生成式模型虽有潜力,但与专用模型仍有差距。

过去几年,文本生成图像(T2I)与多模态生成式模型的能力突飞猛进,已经能稳定地产生高质量、具备细节与语义一致性的图像内容。

报告关注的核心矛盾在于:这些「擅长生成」的模型,是否也能在传统低层视觉任务中充当通用求解器(generalist)?

低层视觉(low-level vision)通常强调对图像退化的「精确逆过程」:例如去雾、超分、去噪、去雨、去模糊、去反射、去光晕等。

这类任务的经典评价方式往往依赖 PSNR/SSIM 等参考指标,强调像素级一致性。但生成式模型天生带有「补全/重建」的倾向:它们可能会依据先验去「合理地编造」高频细节,从人眼观感看更清晰、更「像真的」,却在像素对齐意义上偏离GT。

华中科技大学的研究人员最近发布了一篇报告,把这种冲突概括为「人类感知偏好 vs. 传统指标导向」的张力。

项目主页:https://lowlevelbanana.github.io

论文链接:https://arxiv.org/abs/2512.15110

开源仓库:https://huggingface.co/datasets/jlongzuo/LowLevelEval

报告中提出一个非常直接的问题:Nano Banana Pro能否成为低层视觉全能选手?

报告采用了一个刻意「极简」的使用范式:不训练、不微调,只用「输入图 + 简单文本 prompt」直接让Nano Banana Pro输出结果,对其进行zero-shot基准评测。

零样本+文本提示

14个低层任务的系统基准

研究人员把评测扩展到14个低层视觉任务、40个数据集,覆盖三大类能力:图像恢复(restoration)、图像增强(enhancement)、图像融合(fusion)。

任务清单包括:Dehazing、Super-Resolution、Deraining、Deshadowing、Motion Deblur、Defocus Deblur、Denoising、Reflection Removal、Flare Removal、Low-Light Enhancement、Underwater Enhancement、HDR Imaging、Multi-focus Fusion、Infrared-Visible Fusion;

图中用颜色区分了restoration / enhancement / fusion三类任务。

保守估测性能

报告特别强调:当前结论是对模型能力的保守估计,即研究人员没有做精细 prompt tuning,也没有用多轮推理去「挑选最好看的输出」,而是用固定、简单的提示词来模拟一种更接近「普通用户上手」的用法。

闭源模型的评测约束

在一些任务章节里,研究人员也说明了评测工程细节:由于模型以API方式调用且闭源,无法做任务定制训练;并且生成输出分辨率可能固定在约1024尺度,因此需要将输出resize回与GT一致的分辨率再计算指标,以保证定量比较尽量公平。

视觉「更好看」

但指标「更差」

报告最重要的结论可以概括为一句话:

Nano Banana Pro在主观视觉质量上往往更讨好,但在PSNR/SSIM等传统参考指标上整体落后于专用模型。

研究人员将其归因于生成式模型的内在属性:生成式模型更倾向于追求「语义可信/感知合理」,而非严格的像素级对齐;同时模型输出带有随机性(stochasticity),使得稳定性与可复现性也成为部署障碍。

系统性现象:感知质量与指标不一致

以Flare Removal为例,研究人员观察到一种非常典型的现象:有些样本视觉上已经「挺干净、挺舒服」,但因为亮度/颜色等与GT存在偏差,量化分数依然不高,这反映了像素级指标对生成式增强的惩罚机制。

同时,研究人员也指出生成模型存在「高上限、低下限」的特征:在合适输入上,它可能在细节恢复上超过 SOTA,但这种优势会被扩散/生成模型的随机性与语义漂移所抵消,出现明显方差与语义幻觉,prompt 工程也只能部分缓解,难以保证工业级确定性。

稳健但不极致:生成式模型有时会选择更保守的输出

在低光增强(Low-Light Enhancement)的分析中,研究人员给出另一个视角:

Nano Banana Pro可能不太会引入显著的光晕、结构破坏、严重色偏等「灾难性伪影」,这使得它在某些实际应用中具备吸引力;

但它也会出现亮度控制不一致、对prompt敏感、以及与benchmark的GT定义不完全匹配等问题,因此整体仍难以与专用方法竞争。

更进一步,报告还给出可能的改进方向:更具体的prompt设计、few-shot示例对齐、轻量适配/微调、以及把统一多模态模型与任务模块结合的混合范式。

报告贡献与意义:它不只是在「打分」,而是在推动重新定义评测与目标

这份报告的价值不止在于给Nano Banana Pro下结论,更在于它把一个长期存在但常被忽略的问题摆到台面上:

  • 当生成式模型进入低层视觉后,「像素一致性」是否仍是唯一目标?

  • 传统指标是否在系统性地误导我们对生成式恢复/增强的判断?

  • 是否需要能同时刻画「感知质量 + 结构/语义稳定性 + 像素保真」的新评测范式?

报告明确指出:Nano Banana Pro作为零样本低层视觉求解器,已经是一个很强的 baseline,并展示出跨任务的「泛化潜力」;但要达到专用模型那种高保真、可控、稳定的水准仍有明显鸿沟。

参考资料:

https://arxiv.org/abs/2512.15110

秒追ASI

⭐点赞、转发、在看一键三连⭐

点亮星标,锁定新智元极速推送!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“一言不合就倒开水”!上海今日局部暴雨!超强厄尔尼诺快速发展→

“一言不合就倒开水”!上海今日局部暴雨!超强厄尔尼诺快速发展→

极目新闻
2026-08-21 07:49:39
这就是现实!现在不少央国企慰问退休老同志,都变味了!

这就是现实!现在不少央国企慰问退休老同志,都变味了!

陈博世财经
2026-08-20 10:12:15
要不是当时考古现场全程录像拍得清清楚楚,这几件颠覆认知的南宋文物出土时摆在那里,单凭肉眼去看的话实在是太假了

要不是当时考古现场全程录像拍得清清楚楚,这几件颠覆认知的南宋文物出土时摆在那里,单凭肉眼去看的话实在是太假了

老吴教育课堂
2026-08-19 06:24:41
多地公布今年七夕结婚领证数据

多地公布今年七夕结婚领证数据

第一财经资讯
2026-08-20 12:37:12
Selina素颜接娃被嘲发胖:那场大火留下的,是一辈子无法摆脱的后遗症

Selina素颜接娃被嘲发胖:那场大火留下的,是一辈子无法摆脱的后遗症

布丁冰淇淋
2026-08-19 20:56:01
不可思议!网传一小学工作群通知吊唁校长父亲逝世3周年忌日,邀请老师当日到校集合,消息下方附带多条群内转账截图

不可思议!网传一小学工作群通知吊唁校长父亲逝世3周年忌日,邀请老师当日到校集合,消息下方附带多条群内转账截图

火山詩话
2026-08-21 06:47:41
残酷预警:再这样下去,社会将出现大批“天不怕地不怕”的狠人

残酷预警:再这样下去,社会将出现大批“天不怕地不怕”的狠人

青梅侃史啊
2026-08-17 16:37:06
同父不同命!窦唯女儿自曝20年断联父亲,难怪说王菲赌赢了

同父不同命!窦唯女儿自曝20年断联父亲,难怪说王菲赌赢了

娱说瑜悦
2026-08-20 15:20:14
压哨,豪购!阿森纳再次斩获“顶级拼图”!顶级中场“空降”曼联曼城

压哨,豪购!阿森纳再次斩获“顶级拼图”!顶级中场“空降”曼联曼城

头狼追球
2026-08-20 14:35:15
高曙光:我这辈子最正确的决定,就是在51岁娶了“鱼子酱女王”

高曙光:我这辈子最正确的决定,就是在51岁娶了“鱼子酱女王”

飘飘然的娱乐汇
2026-08-20 23:00:07
局势已彻底失控!日本专家紧急发出警告:一旦爆发冲突,即便东京主动提出停火,中方也不会手软

局势已彻底失控!日本专家紧急发出警告:一旦爆发冲突,即便东京主动提出停火,中方也不会手软

谈史论今1
2026-08-18 23:47:35
我们国家不叫“东大”,叫中国!

我们国家不叫“东大”,叫中国!

李光满说
2026-08-19 22:22:42
心理学惊人发现:经常容易胡思乱想、内耗的人,不是矫情也不是能力差,而是潜意识里有两个大多数人都没察觉的错误思维

心理学惊人发现:经常容易胡思乱想、内耗的人,不是矫情也不是能力差,而是潜意识里有两个大多数人都没察觉的错误思维

心理观察局
2026-07-10 09:13:24
受够了!拉什福德在社交媒体上直言不讳地向内维尔传递信息

受够了!拉什福德在社交媒体上直言不讳地向内维尔传递信息

领创体育君
2026-08-20 21:36:35
还没结束!阿森纳压哨豪购!阿尔特塔锁定四大顶级巨星

还没结束!阿森纳压哨豪购!阿尔特塔锁定四大顶级巨星

澜归序
2026-08-21 08:06:51
一个业余天文爱好者,靠谷歌地图发现了一个3.9亿年前的陨石坑

一个业余天文爱好者,靠谷歌地图发现了一个3.9亿年前的陨石坑

NASA爱好者
2026-07-29 01:30:05
上海突然出台楼市新政,可能是在给全国打样

上海突然出台楼市新政,可能是在给全国打样

拾榴询财
2026-08-20 17:09:15
王健林这辈子最失败、也最后悔的投资,恐怕就是分别给了王思聪、张艺谋和董明珠每人5个亿

王健林这辈子最失败、也最后悔的投资,恐怕就是分别给了王思聪、张艺谋和董明珠每人5个亿

谈史论今1
2026-08-16 20:23:49
“像女生器官,不许摆在桌子上!”小仙女怒怼男同学,令人生理不适

“像女生器官,不许摆在桌子上!”小仙女怒怼男同学,令人生理不适

妍妍教育日记
2026-08-08 11:25:10
奥运冠军刘虹发文宣布退役:人真正舍不得的,往往不是过去,而是那些没有发生的人生

奥运冠军刘虹发文宣布退役:人真正舍不得的,往往不是过去,而是那些没有发生的人生

极目新闻
2026-08-20 18:13:39
2026-08-21 08:19:00
新智元 incentive-icons
新智元
AI产业主平台领航智能+时代
15985文章数 67011关注度
往期回顾 全部

科技要闻

快手Q2研发狂烧45亿:如何面对双面夹击

头条要闻

很多人用过他的表情包 千万粉丝博主宣布退网一段时间

头条要闻

很多人用过他的表情包 千万粉丝博主宣布退网一段时间

体育要闻

46岁小罗抵达意大利 将为拉文纳征战意丙

娱乐要闻

任重晒全家福官宣二胎喜讯

财经要闻

许家印被判处无期 恒大集团被罚88.2亿

汽车要闻

比总部还大?比亚迪藏在上海虹桥的巨无霸闪充站!

态度原创

本地
健康
时尚
公开课
军事航空

本地新闻

先导片|攀登不止,让不同的故事在此连接

脊柱侧弯到什么程度,需要戴支具?

真丝专场|| 我穿了一整个夏天,终于给你们磨到好价格!

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

知情人士称美国“林肯”号航母开始返航

无障碍浏览 进入关怀版