网易首页 > 网易号 > 正文 申请入驻

科学家实现多模态AI精准遗忘,敏感信息自动隔离

0
分享至

你有没有想过,如果你和 AI 聊天,无意中把自己的生日、住址或照片告诉了它,这些信息会不会被它记住?以及我们是否可以像删除微信聊天记录一样,让 AI 忘记这些隐私?

近日,合肥工业大学教授时增林团队打造出一款机器遗忘技术,能让 AI 安全地忘记你的隐私,同时还能确保其他看家本领完全不受影响,等于给 AI 做了一场脑部手术,只切除有害的记忆肿瘤,而完好的大脑功能完全保留下来。

本次机器遗忘技术是一种良性遗忘技术,依赖于一个名为雕刻性记忆遗忘适配器,英文简称为 SMFA。时增林告诉 DeepTech:“我们首次在多模态大模型遗忘问题上,提出有益遗忘这一概念,并首次定义了对于多模态大模型而言,什么是有益的遗忘能力。同时,我们也首次提供了能够实现这种有益遗忘的方法,即我们的 SMFA。”

研究中,时增林团队首先让 AI 在需要忘记的隐私数据上进行训练。不过,这次训练的目标不是学习知识,而是学习拒绝回答。他和团队把原本正确的答案比如这个人的名字叫张三替换成“我不知道”“我无法提供该信息”等拒绝性回答。通过训练 AI 就能学会针对这些特定问题守口如瓶。这个过程中产生的参数更新,被单独打包成为一个叫做记忆遗忘适配器的小模块。

但是,只学习拒绝容易让 AI 变得对什么都一问三不知。为了防止这种过度泛化,时增林等人同时使用了保留锚点。他们使用一小部分必须保留的正常知识比如一些无害的图片和描述针对 AI 进行微调,借此产生另一组参数更新。这个锚点就像灯塔,指明了哪些知识结构和能力是需要被牢牢保护和坚决不能动摇的。

那么现在有两个力量在影响 AI:一个是要它忘记,一个是要它记住。SMFA 的工作就是仔细分析这两组参数更新,找出其中打架的部分。比如,遗忘更新试图改变某个参数,而这个参数的改变方向恰恰会损害锚点想要保护的知识。

SMFA 则会使用一个巧妙的掩码机制,精准地屏蔽掉那些有害且强势的遗忘更新,只保留那些能够有效实现隐私遗忘但是又不过度的更新。最后,将这个雕刻好的更新模块,轻轻安装回原始的 AI 模型之中。

结果就是:AI 成功忘记了指定的隐私,问起的时候它会礼貌拒绝或者回答其他无关内容,但是它的看图视力和理解能力丝毫没有受损,对于其他该记住的知识也依然可以对答如流。

为了公平、严格地测试各种遗忘方法的优劣,时增林团队还构建了世界上第一个针对多模态大模型选择性遗忘的综合测试基准,命名为 S-MLLMUn Bench。

这个基准包含了 1,000 个完全虚构的虚拟人物档案,每份档案都有 AI 生成的人物图片和详细的文本信息,比如姓名、职业、工资,甚至还有一份眼科医学图像和诊断描述。这样做既测试了隐私保护,又保证了研究能够完全符合伦理。

测试分为三个核心部分:

第一个部分是图象记忆遗忘,测试 AI 是否忘记了指定人物的隐私信息;第二个部分是文本记忆遗忘,测试 AI 是否忘记了与图片相关的文本隐私;第三个部分是图像理解保留,测试 AI 在动完手术之后基本的看图说话能力是否依然在线。

在这个高标准考场中,相比其他方法 SMFA 在成功擦除隐私记忆的同时,在图像理解保留项目上得分最高,而且生成的拒绝回答通顺、自然、有意义。而一些传统方法要么下手太狠导致 AI 智力严重下降以至于输出乱码,要么力度不够隐私没删干净。

总的来说,SMFA 这项研究向我们说明了人类和 AI 的共处完全可以建立在更安全、更尊重彼此权利的基础之上。“此外,还可以用于更新过时信息。比如模型现在将特朗普与美国总统绑定,但几年后总统更迭,模型若仍回答特朗普就错了,这时就需要遗忘过时的信息。”时增林补充称。

他继续说道:“我们觉得仅实现遗忘对于现实问题可能还不够,未来我们希望能在遗忘的同时,实现对模型的知识注入。例如,为新的概念提供多样化解释,融入文化多样性。比如 666 这个词,模型可能只知道它是吉利数字,但网络用语中它还有做事顺滑的意思。我们希望能将这类新知识高效注入模型,可能只需少量数据,而非重新训练整个模型。”

参考资料:

https://arxiv.org/abs/2511.20196

运营/排版:何晨龙

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
欲哭无泪!47岁男子赴深圳求职一个月无果,住低价旅馆,一日一餐

欲哭无泪!47岁男子赴深圳求职一个月无果,住低价旅馆,一日一餐

火山詩话
2026-04-21 06:36:18
何猷君家保姆买彩票中了3000万,保姆乐坏了,拒不辞职!转头第一句话是:你想要什么,我都买给你

何猷君家保姆买彩票中了3000万,保姆乐坏了,拒不辞职!转头第一句话是:你想要什么,我都买给你

LULU生活家
2026-04-20 14:34:28
警惕致命风险!张雪机车紧急叫停500F后货架改装:已装者需立即拆除

警惕致命风险!张雪机车紧急叫停500F后货架改装:已装者需立即拆除

快科技
2026-04-21 13:22:05
上海男童被虐致死案家属回应一审判决:将提起抗诉

上海男童被虐致死案家属回应一审判决:将提起抗诉

大象新闻
2026-04-21 12:55:03
贾跃亭发财了,到账230亿

贾跃亭发财了,到账230亿

新浪财经
2026-04-20 18:59:10
特朗普已做好开战准备?王毅曾警告:中美一旦冲突,结局只剩一个

特朗普已做好开战准备?王毅曾警告:中美一旦冲突,结局只剩一个

蜉蝣说
2026-04-21 11:23:11
今晚24点油价或大幅下调,92号汽油会降到七元时代吗?

今晚24点油价或大幅下调,92号汽油会降到七元时代吗?

卷史
2026-04-21 09:20:59
减速机订单已排到明年!人形机器人“物种爆发” 2030年全球出货量将超50万?

减速机订单已排到明年!人形机器人“物种爆发” 2030年全球出货量将超50万?

财联社
2026-04-21 07:54:05
大数据分析,在中国,找个身高1米7年入20万的老公,到底有多难?

大数据分析,在中国,找个身高1米7年入20万的老公,到底有多难?

深度报
2026-04-18 23:37:27
空军全军覆没?伊朗突亮地下底牌!美以傻眼了,就这样被骗数亿

空军全军覆没?伊朗突亮地下底牌!美以傻眼了,就这样被骗数亿

面包夹知识
2026-04-20 17:08:30
恶心!浙江新娘吐槽,18万礼金被拿走15万,结婚像给婆婆赚养老钱

恶心!浙江新娘吐槽,18万礼金被拿走15万,结婚像给婆婆赚养老钱

火山詩话
2026-04-20 08:59:19
李春江是被做掉的?杨毅曝三年前假球内幕:李楠讲义气史琳杰活该

李春江是被做掉的?杨毅曝三年前假球内幕:李楠讲义气史琳杰活该

大嘴爵爷侃球
2026-04-20 20:56:47
CBA公司给迪亚洛开出了新罚单!

CBA公司给迪亚洛开出了新罚单!

体育哲人
2026-04-21 10:02:01
斯诺克世锦赛!4月21最新赛程公布,赵心童PK丁俊晖,吴宜泽晋级

斯诺克世锦赛!4月21最新赛程公布,赵心童PK丁俊晖,吴宜泽晋级

曹说体育
2026-04-21 11:59:59
普通家庭存款到这个数,已经是天花板级别,以前不信,现在很肯定

普通家庭存款到这个数,已经是天花板级别,以前不信,现在很肯定

猫叔东山再起
2026-04-21 08:40:10
掘金丢G2弊端尽显!约基奇穆雷末节哑火,主帅7人轮换还不防三分

掘金丢G2弊端尽显!约基奇穆雷末节哑火,主帅7人轮换还不防三分

篮球资讯达人
2026-04-21 14:39:43
一”字跌停英维克最新回应

一”字跌停英维克最新回应

每日经济新闻
2026-04-21 11:44:31
郭富城结婚周年秀恩爱翻车,评论区爆笑热梗频出!句句戳他心窝

郭富城结婚周年秀恩爱翻车,评论区爆笑热梗频出!句句戳他心窝

临云史策
2026-04-21 13:48:43
周亮,被免职

周亮,被免职

新京报政事儿
2026-04-21 10:28:07
杭州湾“古斯特”要来了?极氪8S第三方设计图曝光

杭州湾“古斯特”要来了?极氪8S第三方设计图曝光

CNMO科技
2026-04-20 13:44:03
2026-04-21 15:04:49
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技评论独家合作
16604文章数 514894关注度
往期回顾 全部

科技要闻

重磅官宣:库克卸任,特努斯接任苹果CEO

头条要闻

丈夫在海外做生意 妻子和儿子在家里充电经历惊魂一夜

头条要闻

丈夫在海外做生意 妻子和儿子在家里充电经历惊魂一夜

体育要闻

“被优化”8年后,国乒方博决定换一条路重新上场

娱乐要闻

周润发时隔16年再卖楼,变现数亿资产

财经要闻

减速机订单已排到明年!

汽车要闻

把天门山搬进厂?开仰望U8冲上45度坡的那刻 我腿软了

态度原创

本地
手机
旅游
教育
房产

本地新闻

春色满城关不住|白鹃梅浪漫盛放,吴山藏了一片四月雪

手机要闻

Omdia:2026年智能手机AMOLED面板出货下滑7%至7.78亿件

旅游要闻

卓美亚帆船酒店启动翻新,希尔顿旗下酒店持续深化宠物友好服务 | 一周旅行指南

教育要闻

第7课- Taking public transport and asking for direct.png

房产要闻

大规模商改住!海口西海岸,这波项目要赢麻了!

无障碍浏览 进入关怀版