网易首页 > 网易号 > 正文 申请入驻

Nature 重磅:让 AI 像人类一样看世界!跨抽象级视觉表征对齐,泛化鲁棒性双突破

0
分享至

来源:市场资讯

(来源:计算机视觉研究院)

计算机视觉研究院


公众号ID|计算机视觉研究院

学习群|扫码在主页获取加入方式

https://pmc.ncbi.nlm.nih.gov/articles/PMC12611773/pdf/41586_2025_Article_9631.pdf

计算机视觉研究院专栏

Column of Computer Vision Institute

本文提出AligNet框架,首次实现机器与人类跨抽象层级的视觉表征对齐,让 AI 既拥有人类的语义认知逻辑,又兼具超强泛化与鲁棒性。

PART/1

痛点

人类的视觉概念是分层级、多抽象度的认知体系:从细粒度的「贵宾犬 / 哈士奇」,到粗粒度的「动物 / 物品」,再到「有生命 / 无生命」,层级清晰且全局关联。但主流视觉大模型仅擅长捕捉局部视觉相似性(纹理、颜色、轮廓),完全缺失人类的全局语义层级认知:

  • 模型看蜥蜴,会因纹理、背景将其归为植物 / 水果类;

  • 人类看蜥蜴,第一时间归类为「动物」,与花鸟鱼虫同属一类。

这一核心错位,直接导致 AI 三大致命缺陷:

泛化能力弱,数据分布偏移就大幅失效;

过度自信,错误预测仍给出高置信度;

无法理解抽象语义概念,偏离人类判断逻辑。

PART/2

破局方案:AligNet—— 人类认知蒸馏框架

研究团队打造AligNet 三步蒸馏法,用少量人类行为数据,低成本将「人类式认知结构」注入视觉大模型:

基于 THINGS 人类相似性判断数据集,通过仿射变换 + 不确定性蒸馏,训练 SigLIP 模型精准模仿人类视觉判断,逼近人类行为上限;

用教师模型对 ImageNet 做聚类采样,生成海量人类对齐三元组数据,无需大量人工标注;

通过 KL 散度损失,将教师的人类认知结构,蒸馏到 ViT、DINOv2、CapPa 等各类预训练视觉模型。


【AligNet 框架总览、三元组任务示例与效果对比图】

PART/3

实验

实证效果:既像人思考,又比传统 AI 更强

团队自研Levels 多抽象级评测数据集,从粗粒度语义、细粒度语义、类别边界三层验证,实现认知对齐与性能升级双丰收:

1. 认知对齐:全方位贴合人类判断

  • 粗粒度判断:ViT-B 从 36.09% 飙升至 65.70%,超越人类间一致性水平;

  • 细粒度区分:最高相对提升 46.03%;

  • 类别边界:全部模型逼近 / 超越人类噪声上限;

  • 不确定性匹配:模型置信度与人类反应时间强相关,彻底告别盲目自信。


【人类对齐任务结果图(Odd-one-out 准确率、相关性、不确定性匹配)】

2. 表征重构:真正学会人类语义层级

对齐后,模型表征严格遵循人类概念层级重组:

  • 同从属类别→表征距离更近;

  • 同基本类别→表征适度靠近;

  • 同上层类别→表征轻微靠近;

  • 不同上层类别→表征距离拉远。蜥蜴不再与植物聚类,而是归入动物大类,完全符合人类认知逻辑。


【模型表征按语义层级重构的距离变化图】

3. 性能升级:泛化 + 鲁棒性全面提升

对齐并非「妥协像人」,而是AI 能力本质升级:

  • 小样本学习:10 个数据集 32/40 显著提升,Pets 数据集提升 2.7 倍;

  • 分布偏移:BREEDS 基准全任务稳定上涨;

  • 对抗鲁棒:ImageNet-A 最高提升 9.5 个百分点,媲美专用鲁棒算法。


【小样本学习、分布偏移、鲁棒性评测结果图】

PART/4

核心价值

价值展望:迈向更懂人的可信视觉 AI

这项研究证实核心结论:将人类先验知识注入 AI,是双向升级而非妥协。AligNet 让视觉模型既贴合人类认知,又提升泛化、鲁棒性与可解释性,为可信 AI、人机协同提供全新路径。未来该方法可拓展至 NLP、多模态领域,让 AI 从「特征匹配工具」,进化为理解人类思维、符合人类直觉的智能系统。

有相关需求的你可以联系我们!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
10月14日俄乌最新:核阴影下的两个选择

10月14日俄乌最新:核阴影下的两个选择

西楼饮月
2026-10-14 21:57:56
美媒:中国“轰-20”隐身轰炸机的研发陷入“恶性循环”,项目进展停滞不前

美媒:中国“轰-20”隐身轰炸机的研发陷入“恶性循环”,项目进展停滞不前

零度Military
2026-10-13 21:07:58
重磅打“虎”,一个月前曾出席公开活动

重磅打“虎”,一个月前曾出席公开活动

中国新闻周刊
2026-10-14 15:53:55
上海将不敌深圳,变数来了,卢伟如何接招?

上海将不敌深圳,变数来了,卢伟如何接招?

体育篮球弟
2026-10-15 04:44:54
王星在诈骗园区被胁迫借下网贷,最终选择分期偿还,律师:王星如举证证实案涉网贷合同系受胁迫订立,有权诉请法院撤销借贷合同

王星在诈骗园区被胁迫借下网贷,最终选择分期偿还,律师:王星如举证证实案涉网贷合同系受胁迫订立,有权诉请法院撤销借贷合同

都市快报橙柿互动
2026-10-14 21:21:20
京东7999元苹果iPhone Duo早鸟权益包下架,消费者投诉退款无门

京东7999元苹果iPhone Duo早鸟权益包下架,消费者投诉退款无门

IT之家
2026-10-14 22:07:15
耻辱惨败!曼城头号卧底现形!哈兰德双响也救不了

耻辱惨败!曼城头号卧底现形!哈兰德双响也救不了

奶盖熊本熊
2026-10-15 07:40:47
董璇带女儿体检,得知身高142.5,却坦言担心酒窝长太高

董璇带女儿体检,得知身高142.5,却坦言担心酒窝长太高

陈意小可爱
2026-10-14 15:45:52
俄罗斯社区记录到获得性肺炎病例增加,患者以成年人为主

俄罗斯社区记录到获得性肺炎病例增加,患者以成年人为主

阿尔卑斯瞭望
2026-10-14 17:52:31
徐湖平再次火了!有人把他视频一帧一帧截下来,对着他家柜子、桌面、墙角逐件“考古”,网友怒斥:典型的靠馆吃馆

徐湖平再次火了!有人把他视频一帧一帧截下来,对着他家柜子、桌面、墙角逐件“考古”,网友怒斥:典型的靠馆吃馆

火山詩话
2026-09-19 06:29:49
百日宴事件女方不忍了,自曝更炸裂细节,男方不止玩得花那么简单

百日宴事件女方不忍了,自曝更炸裂细节,男方不止玩得花那么简单

三农老历
2026-10-15 04:42:13
谁给的通关?伪造材料载着“炸弹”跑了16年,央视曝光,官方出手

谁给的通关?伪造材料载着“炸弹”跑了16年,央视曝光,官方出手

阿伧说事
2026-10-13 12:00:29
深夜,全线跳水!美联储,加息预期升温

深夜,全线跳水!美联储,加息预期升温

证券时报
2026-10-14 22:46:03
10月14日,大家盼了许久的2026年退休人员基本养老金不涨了吗?

10月14日,大家盼了许久的2026年退休人员基本养老金不涨了吗?

咸鱼金脑袋
2026-10-14 19:03:03
当不成台北市长了?港媒爆料:沈伯洋父亲遭制裁后,继续做大陆生意

当不成台北市长了?港媒爆料:沈伯洋父亲遭制裁后,继续做大陆生意

花颜蕴韵
2026-10-14 14:36:22
江淮汽车发布尊界V800制动踏板说明:加严检验到3000N无裂痕

江淮汽车发布尊界V800制动踏板说明:加严检验到3000N无裂痕

贝壳财经
2026-10-13 10:30:03
一枚导弹干掉20名军官!俄第41集团军指挥所被端

一枚导弹干掉20名军官!俄第41集团军指挥所被端

子桑说
2026-10-12 10:33:19
高原谈窦唯:恨了他20年,现在释怀了

高原谈窦唯:恨了他20年,现在释怀了

上官晚安
2026-10-14 18:09:45
单位欠缴社保,最高罚3倍!11月1日起施行!社保断缴,远不止“几个月没交钱”那么简单!

单位欠缴社保,最高罚3倍!11月1日起施行!社保断缴,远不止“几个月没交钱”那么简单!

本账号停运
2026-10-13 20:47:41
惨烈反噬!沙特,真被打崩了!

惨烈反噬!沙特,真被打崩了!

大嘴说天下
2026-10-14 21:50:04
2026-10-15 08:59:00
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
5052426文章数 9781关注度
往期回顾 全部

科技要闻

国行苹果AI被曝12月上线,新Siri仍要等

头条要闻

浙江一处拆迁房急寻继承人 房主已死亡妻子女儿也死亡

头条要闻

浙江一处拆迁房急寻继承人 房主已死亡妻子女儿也死亡

体育要闻

巴萨4比1加拉塔萨雷:亚马尔杀穿地狱

娱乐要闻

胡歌觉得仙剑三很幼稚,忘了来时路?

财经要闻

CPI爆表 美联储本月就会加息?

汽车要闻

风格更豪华/座舱更舒适 全新旅行者7上市 燃油版售12.59万起

态度原创

旅游
教育
亲子
公开课
军事航空

旅游要闻

秋至山西!一菊览尽山河意

教育要闻

梯形四条边分别是8,10,10,20,求梯形的面积

亲子要闻

有一个长不大的妈妈是什么体验?网友:好时髦,我都没玩过!

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

朝鲜潜射两种导弹

无障碍浏览 进入关怀版