网易首页 > 网易号 > 正文 申请入驻

科学家实现多模态AI精准遗忘,敏感信息自动隔离

0
分享至

你有没有想过,如果你和 AI 聊天,无意中把自己的生日、住址或照片告诉了它,这些信息会不会被它记住?以及我们是否可以像删除微信聊天记录一样,让 AI 忘记这些隐私?

近日,合肥工业大学教授时增林团队打造出一款机器遗忘技术,能让 AI 安全地忘记你的隐私,同时还能确保其他看家本领完全不受影响,等于给 AI 做了一场脑部手术,只切除有害的记忆肿瘤,而完好的大脑功能完全保留下来。

本次机器遗忘技术是一种良性遗忘技术,依赖于一个名为雕刻性记忆遗忘适配器,英文简称为 SMFA。时增林告诉 DeepTech:“我们首次在多模态大模型遗忘问题上,提出有益遗忘这一概念,并首次定义了对于多模态大模型而言,什么是有益的遗忘能力。同时,我们也首次提供了能够实现这种有益遗忘的方法,即我们的 SMFA。”

研究中,时增林团队首先让 AI 在需要忘记的隐私数据上进行训练。不过,这次训练的目标不是学习知识,而是学习拒绝回答。他和团队把原本正确的答案比如这个人的名字叫张三替换成“我不知道”“我无法提供该信息”等拒绝性回答。通过训练 AI 就能学会针对这些特定问题守口如瓶。这个过程中产生的参数更新,被单独打包成为一个叫做记忆遗忘适配器的小模块。

但是,只学习拒绝容易让 AI 变得对什么都一问三不知。为了防止这种过度泛化,时增林等人同时使用了保留锚点。他们使用一小部分必须保留的正常知识比如一些无害的图片和描述针对 AI 进行微调,借此产生另一组参数更新。这个锚点就像灯塔,指明了哪些知识结构和能力是需要被牢牢保护和坚决不能动摇的。

那么现在有两个力量在影响 AI:一个是要它忘记,一个是要它记住。SMFA 的工作就是仔细分析这两组参数更新,找出其中打架的部分。比如,遗忘更新试图改变某个参数,而这个参数的改变方向恰恰会损害锚点想要保护的知识。

SMFA 则会使用一个巧妙的掩码机制,精准地屏蔽掉那些有害且强势的遗忘更新,只保留那些能够有效实现隐私遗忘但是又不过度的更新。最后,将这个雕刻好的更新模块,轻轻安装回原始的 AI 模型之中。

结果就是:AI 成功忘记了指定的隐私,问起的时候它会礼貌拒绝或者回答其他无关内容,但是它的看图视力和理解能力丝毫没有受损,对于其他该记住的知识也依然可以对答如流。

为了公平、严格地测试各种遗忘方法的优劣,时增林团队还构建了世界上第一个针对多模态大模型选择性遗忘的综合测试基准,命名为 S-MLLMUn Bench。

这个基准包含了 1,000 个完全虚构的虚拟人物档案,每份档案都有 AI 生成的人物图片和详细的文本信息,比如姓名、职业、工资,甚至还有一份眼科医学图像和诊断描述。这样做既测试了隐私保护,又保证了研究能够完全符合伦理。

测试分为三个核心部分:

第一个部分是图象记忆遗忘,测试 AI 是否忘记了指定人物的隐私信息;第二个部分是文本记忆遗忘,测试 AI 是否忘记了与图片相关的文本隐私;第三个部分是图像理解保留,测试 AI 在动完手术之后基本的看图说话能力是否依然在线。

在这个高标准考场中,相比其他方法 SMFA 在成功擦除隐私记忆的同时,在图像理解保留项目上得分最高,而且生成的拒绝回答通顺、自然、有意义。而一些传统方法要么下手太狠导致 AI 智力严重下降以至于输出乱码,要么力度不够隐私没删干净。

总的来说,SMFA 这项研究向我们说明了人类和 AI 的共处完全可以建立在更安全、更尊重彼此权利的基础之上。“此外,还可以用于更新过时信息。比如模型现在将特朗普与美国总统绑定,但几年后总统更迭,模型若仍回答特朗普就错了,这时就需要遗忘过时的信息。”时增林补充称。

他继续说道:“我们觉得仅实现遗忘对于现实问题可能还不够,未来我们希望能在遗忘的同时,实现对模型的知识注入。例如,为新的概念提供多样化解释,融入文化多样性。比如 666 这个词,模型可能只知道它是吉利数字,但网络用语中它还有做事顺滑的意思。我们希望能将这类新知识高效注入模型,可能只需少量数据,而非重新训练整个模型。”

参考资料:

https://arxiv.org/abs/2511.20196

运营/排版:何晨龙

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
女生高考684分,花3000元咨询高报师被录进“双非”:至今仍是全校录取最高分,本计划上央财或者上财,“永远要做自己的第一负责人”

女生高考684分,花3000元咨询高报师被录进“双非”:至今仍是全校录取最高分,本计划上央财或者上财,“永远要做自己的第一负责人”

大象新闻
2026-07-21 14:04:25
连会场都进不去!王毅闪现马尼拉,中方特殊安排,日外相慢慢等吧

连会场都进不去!王毅闪现马尼拉,中方特殊安排,日外相慢慢等吧

短发过这夏
2026-07-22 03:37:43
陈乔恩网购踩雷!被麻豆美照烧到「实体大走钟」扶额:再也不信了

陈乔恩网购踩雷!被麻豆美照烧到「实体大走钟」扶额:再也不信了

ETtoday星光云
2026-07-20 10:19:14
88岁母亲被77万条未读信息“包围”

88岁母亲被77万条未读信息“包围”

北青深一度
2026-07-22 16:09:56
瞒不住了!谢贤死因曝光!港媒曝他火葬内幕,难怪狄波拉哭红了眼

瞒不住了!谢贤死因曝光!港媒曝他火葬内幕,难怪狄波拉哭红了眼

余鴡搞笑段子
2026-07-21 22:02:55
A股:股民系好安全带了,不管你现在几成仓,今天7.22请听我一句

A股:股民系好安全带了,不管你现在几成仓,今天7.22请听我一句

股侠指北针
2026-07-22 09:09:52
无处不在!特朗普抢镜世界杯颁奖典礼后,遭全网恶搞

无处不在!特朗普抢镜世界杯颁奖典礼后,遭全网恶搞

News脑洞
2026-07-22 16:02:24
谢贤遗嘱曝光,王菲被说输得不冤,是张柏芝三胎生父传闻真相大白

谢贤遗嘱曝光,王菲被说输得不冤,是张柏芝三胎生父传闻真相大白

凡知
2026-07-21 15:30:16
伊朗兵分三路炸美军,全面战争打响,特朗普:敢杀一人,数倍偿命

伊朗兵分三路炸美军,全面战争打响,特朗普:敢杀一人,数倍偿命

国际法大视野
2026-07-21 16:43:18
前省委书记秘书:套现数十亿入籍新加坡,负债92%烂公司丢给股民

前省委书记秘书:套现数十亿入籍新加坡,负债92%烂公司丢给股民

趣味萌宠的日常
2026-07-22 12:06:56
美媒评NBA历史25大巨星,奥尼尔第10,库里第4,第1无悬念

美媒评NBA历史25大巨星,奥尼尔第10,库里第4,第1无悬念

弄月公子
2026-07-22 16:59:36
万科又向深铁集团借款

万科又向深铁集团借款

地产微资讯
2026-07-22 08:14:30
全球文明研究院今天成立

全球文明研究院今天成立

界面新闻
2026-07-22 09:57:12
白宫对英国任命新外交大臣感到担忧

白宫对英国任命新外交大臣感到担忧

参考消息
2026-07-22 13:53:37
朝鲜突然下单2万辆中国电驴,但买的不是车,是一条产业链?

朝鲜突然下单2万辆中国电驴,但买的不是车,是一条产业链?

沙雕小琳琳
2026-07-20 01:08:48
每秒自旋25次把身子转成“虚影”:西北大学这架无人机用混乱视觉隐身,人眼几乎抓不住它

每秒自旋25次把身子转成“虚影”:西北大学这架无人机用混乱视觉隐身,人眼几乎抓不住它

报错免疫体
2026-07-21 04:38:54
SpaceX做空比例飙至32% 马斯克警告空头:几无存活可能

SpaceX做空比例飙至32% 马斯克警告空头:几无存活可能

财联社
2026-07-22 14:50:55
起底:韩红基金会幕后核心人物

起底:韩红基金会幕后核心人物

百晓生谈历史
2026-07-21 11:05:51
谢贤刚去世没几天,陈凯歌身体也出问题,走路摇晃不稳腿抬不起来

谢贤刚去世没几天,陈凯歌身体也出问题,走路摇晃不稳腿抬不起来

揽星河的笔记
2026-07-22 14:45:32
马筱梅直播时小玥儿突然闯入,一句“你头发好卷”引爆全场

马筱梅直播时小玥儿突然闯入,一句“你头发好卷”引爆全场

喜欢历史的阿繁
2026-07-22 12:28:00
2026-07-22 17:36:49
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技评论独家合作
16995文章数 515141关注度
往期回顾 全部

科技要闻

怕了?美财长扬言:严查中国AI

头条要闻

半年被骗近2万 88岁退休教授遭77万条未读信息"包围"

头条要闻

半年被骗近2万 88岁退休教授遭77万条未读信息"包围"

体育要闻

阿根廷的亚军:单核足球的极限?

娱乐要闻

谢贤:人可以风流,但不能下流!

财经要闻

美国想对中国AI动手?"大人,时代变了"

汽车要闻

上汽贾健旭谈汽车全球化:出海要合规 欧洲人只爱小车是误解

态度原创

艺术
家居
房产
健康
教育

艺术要闻

冷军34年前画了幅面具,拍了172.5万

家居要闻

2026建博会(广州) 公装联探展交流活动

房产要闻

冲刺500亿美元IPO,海南又要迎来超级巨头!

我这么年轻,也会中风吗?

教育要闻

32岁小镇做题家vs23岁海淀鸡娃:高考后的幸存人生,谁失望了,谁想通了

无障碍浏览 进入关怀版