网易首页 > 网易号 > 正文 申请入驻

科学家实现多模态AI精准遗忘,敏感信息自动隔离

0
分享至

来源:市场资讯

(来源:DeepTech深科技)

你有没有想过,如果你和 AI 聊天,无意中把自己的生日、住址或照片告诉了它,这些信息会不会被它记住?以及我们是否可以像删除微信聊天记录一样,让 AI 忘记这些隐私?

近日,合肥工业大学教授时增林团队打造出一款机器遗忘技术,能让 AI 安全地忘记你的隐私,同时还能确保其他看家本领完全不受影响,等于给 AI 做了一场脑部手术,只切除有害的记忆肿瘤,而完好的大脑功能完全保留下来。

本次机器遗忘技术是一种良性遗忘技术,依赖于一个名为雕刻性记忆遗忘适配器,英文简称为 SMFA。时增林告诉 DeepTech:“我们首次在多模态大模型遗忘问题上,提出有益遗忘这一概念,并首次定义了对于多模态大模型而言,什么是有益的遗忘能力。同时,我们也首次提供了能够实现这种有益遗忘的方法,即我们的 SMFA。”

研究中,时增林团队首先让 AI 在需要忘记的隐私数据上进行训练。不过,这次训练的目标不是学习知识,而是学习拒绝回答。他和团队把原本正确的答案比如这个人的名字叫张三替换成“我不知道”“我无法提供该信息”等拒绝性回答。通过训练 AI 就能学会针对这些特定问题守口如瓶。这个过程中产生的参数更新,被单独打包成为一个叫做记忆遗忘适配器的小模块。

但是,只学习拒绝容易让 AI 变得对什么都一问三不知。为了防止这种过度泛化,时增林等人同时使用了保留锚点。他们使用一小部分必须保留的正常知识比如一些无害的图片和描述针对 AI 进行微调,借此产生另一组参数更新。这个锚点就像灯塔,指明了哪些知识结构和能力是需要被牢牢保护和坚决不能动摇的。

那么现在有两个力量在影响 AI:一个是要它忘记,一个是要它记住。SMFA 的工作就是仔细分析这两组参数更新,找出其中打架的部分。比如,遗忘更新试图改变某个参数,而这个参数的改变方向恰恰会损害锚点想要保护的知识。

SMFA 则会使用一个巧妙的掩码机制,精准地屏蔽掉那些有害且强势的遗忘更新,只保留那些能够有效实现隐私遗忘但是又不过度的更新。最后,将这个雕刻好的更新模块,轻轻安装回原始的 AI 模型之中。

结果就是:AI 成功忘记了指定的隐私,问起的时候它会礼貌拒绝或者回答其他无关内容,但是它的看图视力和理解能力丝毫没有受损,对于其他该记住的知识也依然可以对答如流。

为了公平、严格地测试各种遗忘方法的优劣,时增林团队还构建了世界上第一个针对多模态大模型选择性遗忘的综合测试基准,命名为 S-MLLMUn Bench。

这个基准包含了 1,000 个完全虚构的虚拟人物档案,每份档案都有 AI 生成的人物图片和详细的文本信息,比如姓名、职业、工资,甚至还有一份眼科医学图像和诊断描述。这样做既测试了隐私保护,又保证了研究能够完全符合伦理。

测试分为三个核心部分:

第一个部分是图象记忆遗忘,测试 AI 是否忘记了指定人物的隐私信息;第二个部分是文本记忆遗忘,测试 AI 是否忘记了与图片相关的文本隐私;第三个部分是图像理解保留,测试 AI 在动完手术之后基本的看图说话能力是否依然在线。

在这个高标准考场中,相比其他方法 SMFA 在成功擦除隐私记忆的同时,在图像理解保留项目上得分最高,而且生成的拒绝回答通顺、自然、有意义。而一些传统方法要么下手太狠导致 AI 智力严重下降以至于输出乱码,要么力度不够隐私没删干净。

总的来说,SMFA 这项研究向我们说明了人类和 AI 的共处完全可以建立在更安全、更尊重彼此权利的基础之上。“此外,还可以用于更新过时信息。比如模型现在将特朗普与美国总统绑定,但几年后总统更迭,模型若仍回答特朗普就错了,这时就需要遗忘过时的信息。”时增林补充称。

他继续说道:“我们觉得仅实现遗忘对于现实问题可能还不够,未来我们希望能在遗忘的同时,实现对模型的知识注入。例如,为新的概念提供多样化解释,融入文化多样性。比如 666 这个词,模型可能只知道它是吉利数字,但网络用语中它还有做事顺滑的意思。我们希望能将这类新知识高效注入模型,可能只需少量数据,而非重新训练整个模型。”

参考资料:

https://arxiv.org/abs/2511.20196

运营/排版:何晨龙

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
奥迪A5L拆车:不管信不信,留给你买燃油车的时间不多了!

奥迪A5L拆车:不管信不信,留给你买燃油车的时间不多了!

大飙车
2026-01-17 14:49:50
黄巢兵败被杀,10余名姬妾被俘,唐僖宗报复有多狠?史官都不敢写

黄巢兵败被杀,10余名姬妾被俘,唐僖宗报复有多狠?史官都不敢写

掠影后有感
2026-03-01 10:09:20
若不出意外,2026年上半年开始,一半家庭都可能面临“四大难题”

若不出意外,2026年上半年开始,一半家庭都可能面临“四大难题”

猫叔东山再起
2026-03-01 12:40:03
上海富人家保姆狂偷户主奢侈品,监控流出评论区吓傻了

上海富人家保姆狂偷户主奢侈品,监控流出评论区吓傻了

不二表姐
2026-02-24 22:17:15
14年儿子坐马航失联,多年后父亲收到回信,坚信儿子去了平行世界

14年儿子坐马航失联,多年后父亲收到回信,坚信儿子去了平行世界

来科点谱
2026-02-17 11:05:42
反转!内贾德大难不死,伊朗反击不设限,特朗普:美军将死伤更多

反转!内贾德大难不死,伊朗反击不设限,特朗普:美军将死伤更多

阿芒娱乐说
2026-03-02 20:43:10
赢球仅1天,中国男篮坏消息传来:将失去1个主场,冲4连胜难了

赢球仅1天,中国男篮坏消息传来:将失去1个主场,冲4连胜难了

墨印斋
2026-03-02 19:24:09
港口被抢,李嘉诚清仓英国电网,他用百亿学费,换回一个残酷真相

港口被抢,李嘉诚清仓英国电网,他用百亿学费,换回一个残酷真相

村里一枝花人
2026-03-02 15:04:49
深圳男子突发心绞痛,人送到医院心脏就停了!停跳整整两天!医生用ECMO抢回一命!罪魁祸首又是它

深圳男子突发心绞痛,人送到医院心脏就停了!停跳整整两天!医生用ECMO抢回一命!罪魁祸首又是它

深圳晚报
2026-03-02 21:00:39
美国精英想不通:为什么每次要打压中国时,总有意外发生?

美国精英想不通:为什么每次要打压中国时,总有意外发生?

聚焦真实瞬间
2026-01-26 10:19:09
中美一旦开战,美军将全面轰炸中国?基辛格曾称:中美正走向悬崖

中美一旦开战,美军将全面轰炸中国?基辛格曾称:中美正走向悬崖

李健政观察
2026-03-02 12:49:07
河南洛阳一女子过年离家,智能马桶17天耗水超200吨,当事人:马桶昼夜不停自动工作

河南洛阳一女子过年离家,智能马桶17天耗水超200吨,当事人:马桶昼夜不停自动工作

黄河新闻网吕梁
2026-02-28 14:27:42
警惕!阿托伐他汀是好药,但不可和4种药联用,否则不治病或致命

警惕!阿托伐他汀是好药,但不可和4种药联用,否则不治病或致命

医学科普汇
2026-03-02 19:45:03
以色列股市开盘大涨!美股指期货走低

以色列股市开盘大涨!美股指期货走低

证券时报e公司
2026-03-02 17:52:33
随着一场夺冠 斯诺克最新排名:丁俊晖升第14 赵心童第5中国一哥

随着一场夺冠 斯诺克最新排名:丁俊晖升第14 赵心童第5中国一哥

削桐作琴
2026-03-02 17:17:08
俄军已经动了,中国帮不帮伊朗?中方三句话,没一句是美国想听的

俄军已经动了,中国帮不帮伊朗?中方三句话,没一句是美国想听的

李健政观察
2026-03-02 21:30:52
真相大白!王曼昱丢冠原因曝光,是打不过莎莎吗?张继科早有预言

真相大白!王曼昱丢冠原因曝光,是打不过莎莎吗?张继科早有预言

曹说体育
2026-03-01 22:16:15
汪小菲和张兰矛盾升级!张兰哭完不敢对镜头,大S当年真没说错他

汪小菲和张兰矛盾升级!张兰哭完不敢对镜头,大S当年真没说错他

夏末moent
2026-03-02 08:43:40
美以伊最新发声

美以伊最新发声

看看新闻Knews
2026-03-02 16:59:09
56岁大妈心梗离世,医生:吃他汀时除了牛奶,这6种食物尽量少碰

56岁大妈心梗离世,医生:吃他汀时除了牛奶,这6种食物尽量少碰

岐黄传人孙大夫
2026-02-28 22:15:03
2026-03-02 22:11:00
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
2318514文章数 5642关注度
往期回顾 全部

科技要闻

荣耀发布机器人手机、折叠屏、人形机器人

头条要闻

伊朗公布最新战况 通报还披露内塔尼亚胡行踪

头条要闻

伊朗公布最新战况 通报还披露内塔尼亚胡行踪

体育要闻

“想要我签名吗” 梅西逆转后嘲讽对手主帅

娱乐要闻

美伊以冲突爆发,多位明星被困中东

财经要闻

油价飙升 美伊冲突将如何搅动全球经济

汽车要闻

国民SUV再添一员 瑞虎7L静态体验

态度原创

教育
时尚
本地
房产
军事航空

教育要闻

免费课后 上精品课

推广|| 春天第一双鞋!暴走不累、搭遍好看小裙子

本地新闻

津南好·四时总相宜

房产要闻

方案突然曝光!海口北师大附校,又有书包大盘杀出!

军事要闻

美国中央司令部透露对伊朗动武全部武器装备清单

无障碍浏览 进入关怀版