网易首页 > 网易号 > 正文 申请入驻

科学家实现多模态AI精准遗忘,敏感信息自动隔离

0
分享至

你有没有想过,如果你和 AI 聊天,无意中把自己的生日、住址或照片告诉了它,这些信息会不会被它记住?以及我们是否可以像删除微信聊天记录一样,让 AI 忘记这些隐私?

近日,合肥工业大学教授时增林团队打造出一款机器遗忘技术,能让 AI 安全地忘记你的隐私,同时还能确保其他看家本领完全不受影响,等于给 AI 做了一场脑部手术,只切除有害的记忆肿瘤,而完好的大脑功能完全保留下来。

本次机器遗忘技术是一种良性遗忘技术,依赖于一个名为雕刻性记忆遗忘适配器,英文简称为 SMFA。时增林告诉 DeepTech:“我们首次在多模态大模型遗忘问题上,提出有益遗忘这一概念,并首次定义了对于多模态大模型而言,什么是有益的遗忘能力。同时,我们也首次提供了能够实现这种有益遗忘的方法,即我们的 SMFA。”

研究中,时增林团队首先让 AI 在需要忘记的隐私数据上进行训练。不过,这次训练的目标不是学习知识,而是学习拒绝回答。他和团队把原本正确的答案比如这个人的名字叫张三替换成“我不知道”“我无法提供该信息”等拒绝性回答。通过训练 AI 就能学会针对这些特定问题守口如瓶。这个过程中产生的参数更新,被单独打包成为一个叫做记忆遗忘适配器的小模块。

但是,只学习拒绝容易让 AI 变得对什么都一问三不知。为了防止这种过度泛化,时增林等人同时使用了保留锚点。他们使用一小部分必须保留的正常知识比如一些无害的图片和描述针对 AI 进行微调,借此产生另一组参数更新。这个锚点就像灯塔,指明了哪些知识结构和能力是需要被牢牢保护和坚决不能动摇的。

那么现在有两个力量在影响 AI:一个是要它忘记,一个是要它记住。SMFA 的工作就是仔细分析这两组参数更新,找出其中打架的部分。比如,遗忘更新试图改变某个参数,而这个参数的改变方向恰恰会损害锚点想要保护的知识。

SMFA 则会使用一个巧妙的掩码机制,精准地屏蔽掉那些有害且强势的遗忘更新,只保留那些能够有效实现隐私遗忘但是又不过度的更新。最后,将这个雕刻好的更新模块,轻轻安装回原始的 AI 模型之中。

结果就是:AI 成功忘记了指定的隐私,问起的时候它会礼貌拒绝或者回答其他无关内容,但是它的看图视力和理解能力丝毫没有受损,对于其他该记住的知识也依然可以对答如流。

为了公平、严格地测试各种遗忘方法的优劣,时增林团队还构建了世界上第一个针对多模态大模型选择性遗忘的综合测试基准,命名为 S-MLLMUn Bench。

这个基准包含了 1,000 个完全虚构的虚拟人物档案,每份档案都有 AI 生成的人物图片和详细的文本信息,比如姓名、职业、工资,甚至还有一份眼科医学图像和诊断描述。这样做既测试了隐私保护,又保证了研究能够完全符合伦理。

测试分为三个核心部分:

第一个部分是图象记忆遗忘,测试 AI 是否忘记了指定人物的隐私信息;第二个部分是文本记忆遗忘,测试 AI 是否忘记了与图片相关的文本隐私;第三个部分是图像理解保留,测试 AI 在动完手术之后基本的看图说话能力是否依然在线。

在这个高标准考场中,相比其他方法 SMFA 在成功擦除隐私记忆的同时,在图像理解保留项目上得分最高,而且生成的拒绝回答通顺、自然、有意义。而一些传统方法要么下手太狠导致 AI 智力严重下降以至于输出乱码,要么力度不够隐私没删干净。

总的来说,SMFA 这项研究向我们说明了人类和 AI 的共处完全可以建立在更安全、更尊重彼此权利的基础之上。“此外,还可以用于更新过时信息。比如模型现在将特朗普与美国总统绑定,但几年后总统更迭,模型若仍回答特朗普就错了,这时就需要遗忘过时的信息。”时增林补充称。

他继续说道:“我们觉得仅实现遗忘对于现实问题可能还不够,未来我们希望能在遗忘的同时,实现对模型的知识注入。例如,为新的概念提供多样化解释,融入文化多样性。比如 666 这个词,模型可能只知道它是吉利数字,但网络用语中它还有做事顺滑的意思。我们希望能将这类新知识高效注入模型,可能只需少量数据,而非重新训练整个模型。”

参考资料:

https://arxiv.org/abs/2511.20196

运营/排版:何晨龙

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
CCTV5直播!辽宁VS广东焦点战,亨特上演首秀,杜锋要给杨鸣上课

CCTV5直播!辽宁VS广东焦点战,亨特上演首秀,杜锋要给杨鸣上课

老叶评球
2026-01-09 22:50:16
泽连斯基话音刚落,时速1.3万公里导弹来袭,整个乌克兰都震动了

泽连斯基话音刚落,时速1.3万公里导弹来袭,整个乌克兰都震动了

钦点历史
2026-01-09 23:47:10
TA记者谈曼联高层与阿莫林的关系以及何时开始生变;记者:曼联有些后悔让范尼离开

TA记者谈曼联高层与阿莫林的关系以及何时开始生变;记者:曼联有些后悔让范尼离开

MUREDS
2026-01-09 23:54:24
慧博云通:字节跳动系公司2024年度第一大客户,亦是公司2025年度的前五大客户之一

慧博云通:字节跳动系公司2024年度第一大客户,亦是公司2025年度的前五大客户之一

每日经济新闻
2026-01-09 22:38:06
新妻优香出道即王炸!31岁无滤镜美肌碾压少女,麦爹这次捡到宝了

新妻优香出道即王炸!31岁无滤镜美肌碾压少女,麦爹这次捡到宝了

碧波万览
2026-01-10 02:55:03
东莞20年:亲眼目睹工厂女工的性生活,她们的孤独压抑和肆意欢歌

东莞20年:亲眼目睹工厂女工的性生活,她们的孤独压抑和肆意欢歌

农村情感故事
2025-04-06 20:07:35
陈博彰当选长沙市市长,原市长已进京任职

陈博彰当选长沙市市长,原市长已进京任职

上观新闻
2026-01-09 18:12:06
一代国民神车谢幕 比亚迪宋PLUS低调退市

一代国民神车谢幕 比亚迪宋PLUS低调退市

车质网
2026-01-08 09:14:54
CBA最耀眼的新星“宠老六”,昨晚在比赛中,被鄢手骐打懵了

CBA最耀眼的新星“宠老六”,昨晚在比赛中,被鄢手骐打懵了

小楼侃体育
2026-01-10 07:03:32
永久停业!东莞所有门店全部关闭

永久停业!东莞所有门店全部关闭

东莞好生活
2026-01-09 22:29:48
现场视频:太子集团陈志被押解回国!太子银行进入清算程序:停止新增业务,贷款人仍需按时还款

现场视频:太子集团陈志被押解回国!太子银行进入清算程序:停止新增业务,贷款人仍需按时还款

每日经济新闻
2026-01-08 17:57:11
阿根廷大逆袭!米莱执政两年,通胀暴跌,经济增速扭负为正!

阿根廷大逆袭!米莱执政两年,通胀暴跌,经济增速扭负为正!

百态人间
2026-01-07 16:41:49
中国斥资337亿,耗时14年打造瓜达尔港,为何几乎没有轮船停靠?

中国斥资337亿,耗时14年打造瓜达尔港,为何几乎没有轮船停靠?

爱吃醋的猫咪
2026-01-05 21:33:10
为何一艘美航母上,都要带足大量女兵,她们在航母上有什么作用?

为何一艘美航母上,都要带足大量女兵,她们在航母上有什么作用?

大千世界观
2025-12-19 21:58:37
鹿晗4年前就被狗仔爆料,恋爱期间两次劈腿偷吃,知名编剧也发声

鹿晗4年前就被狗仔爆料,恋爱期间两次劈腿偷吃,知名编剧也发声

古希腊掌管月桂的神
2026-01-09 11:08:01
建国后,博古妻子哭求杨尚昆帮衬生活困难,杨尚昆是如何回复的?

建国后,博古妻子哭求杨尚昆帮衬生活困难,杨尚昆是如何回复的?

唠叨说历史
2025-12-30 10:35:28
老鹰和奇才交易已完成,CJ·麦科勒姆和基斯珀特已抵达亚特兰大

老鹰和奇才交易已完成,CJ·麦科勒姆和基斯珀特已抵达亚特兰大

好火子
2026-01-10 06:22:08
12岁男孩在温泉池溺水身亡,父亲悲痛:泡了几十分钟后,悲剧发生……涉事门店仍正常营业

12岁男孩在温泉池溺水身亡,父亲悲痛:泡了几十分钟后,悲剧发生……涉事门店仍正常营业

环球网资讯
2026-01-09 08:50:53
证监会提高“吹哨人”奖励,最高奖励100万元

证监会提高“吹哨人”奖励,最高奖励100万元

每日经济新闻
2026-01-09 21:16:39
继“超长”学期后将迎来“超短”学期,江苏多所学校通知“提前学”

继“超长”学期后将迎来“超短”学期,江苏多所学校通知“提前学”

环球网资讯
2026-01-09 14:08:31
2026-01-10 07:56:49
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技评论独家合作
16103文章数 514466关注度
往期回顾 全部

科技要闻

市场偏爱MiniMax:开盘涨42%,市值超700亿

头条要闻

媒体:日本吃下中方反制重拳后怕了 欲拉G7给自己壮胆

头条要闻

媒体:日本吃下中方反制重拳后怕了 欲拉G7给自己壮胆

体育要闻

金元时代最后的外援,来中国8年了

娱乐要闻

关晓彤鹿晗风波后露面 不受影响状态佳

财经要闻

投资必看!瑞银李萌给出3大核心配置建议

汽车要闻

助跑三年的奇瑞 接下来是加速还是起跳?

态度原创

健康
时尚
旅游
数码
本地

这些新疗法,让化疗不再那么痛苦

推广中奖名单-更新至2025年12月19日推广

旅游要闻

一部电影带火一座城 盘点2025被电影带火的文旅地标

数码要闻

铭凡CES 2026新闻稿提及英特尔酷睿Ultra 9 290HX Plus处理器

本地新闻

云游内蒙|“包”你再来?一座在硬核里酿出诗意的城

无障碍浏览 进入关怀版