网易首页 > 网易号 > 正文 申请入驻

AI agent正在默默记住那些你随口一提的琐事

0
分享至

记住用户身份与个性化偏好的能力,正迅速成为人工智能聊天机器人和智能体的一大卖点。

本月初,Google 推出了个人智能功能,这是用户与该公司 Gemini 聊天机器人交互的全新方式。该功能调取用户的 Gmail 邮件、照片、搜索记录和 YouTube 浏览记录,让 Gemini 变得 “更具个性化、更主动化、功能也更强大”。OpenAI、Anthropic 和 Meta 也采取了类似举措,为各自的人工智能产品新增功能,使其能记住并调取用户的个人信息与偏好。这些功能虽具备潜在优势,但我们需要采取更多举措,应对它们为这类复杂技术带来的全新风险。

个性化的交互式人工智能系统的设计初衷,是为用户代行操作、维持跨对话的上下文连贯性,同时提升用户处理各类事务的能力,涵盖订行程、报税等诸多场景。从能学习开发者编码风格的工具,到可筛选数千款商品的购物智能体,这类系统的运行,都依赖于存储和调取用户愈发私密的个人信息的能力。但长期如此操作,会引发令人担忧且早已屡见不鲜的隐私安全漏洞。自大数据首次展现出挖掘用户行为模式并据此采取行动的能力开始,诸多此类漏洞就已初现端倪。更糟糕的是,人工智能智能体现如今似乎执意突破各类已落地的隐私防护措施,而这些措施原本是为规避上述漏洞设立的。

当下,人们通过对话式界面与这类人工智能系统交互,且经常切换使用场景。用户可能会让同一个人工智能智能体完成多项工作,比如给老板写邮件、提供医疗建议、规划节日礼物预算、为处理人际矛盾出谋划策。多数人工智能智能体会将用户的所有数据整合至单一的非结构化存储库中,而这些数据原本会依据使用场景、用途或权限进行分类隔离。当人工智能智能体对接外部应用或其他智能体执行任务时,其记忆库中的数据可能会渗入共享数据池。这一技术现状,让前所未有的隐私泄露成为可能,这类泄露不仅会暴露用户的零散数据点,还会将其完整的人生全貌公之于众。

当所有信息都存储在同一个库中,就极易发生非预期的跨场景流转。用户为制定购物清单,随口和智能体聊起的饮食偏好,后续可能会影响其收到的医保方案推荐;用户搜索带无障碍通道的餐厅的记录,也可能泄露至薪资谈判的场景中。这些情况的发生,用户往往毫不知情。这一担忧在大数据发展初期就已存在,但如今已远非停留在理论层面。记忆信息的混沌状态,不仅会引发隐私问题,还会让人更难理解人工智能系统的运行逻辑,更无从对其进行有效管控。那么,开发者该采取哪些措施解决这一问题?

第一,人工智能的记忆系统需要搭建规范的架构,以此管控记忆信息的调取和使用用途。

相关的初步探索已在推进:Anthropic 的 Claude 会为不同的 “项目” 创建独立的记忆存储区,OpenAI 也表示,用户通过 ChatGPT Health 分享的信息会与其他聊天内容隔离存储。这些举措是良好的开端,但相关实现方式仍过于粗糙。系统至少要能区分三类记忆信息,分别是具体记忆信息,比如用户喜欢巧克力且曾咨询过 GLP-1s 相关问题;关联记忆信息,比如用户患有糖尿病,因此不吃巧克力;记忆信息分类,比如工作类、健康类。此外,系统需要支持对特定类型的记忆信息设置使用限制,且能稳定落实用户明确定义的信息边界,尤其是涉及健康状况、受保护特征等敏感话题的记忆信息,这类信息的管控大概率会遵循更严格的准则。

以这种方式实现记忆信息的隔离存储,会对人工智能系统的研发思路和搭建标准产生重要影响。这要求系统能追溯记忆信息的溯源信息,包括信息来源、相关时间戳以及生成场景,同时搭建追溯机制,明确特定记忆信息在何时、以何种方式影响智能体的运行行为。这类模型可解释性的相关技术已逐步落地,但当前的实现方式仍存在误导性甚至欺骗性。将记忆信息直接嵌入模型权重,或许能让系统输出更具个性化和上下文感知性的内容,但结构化数据库目前具备更强的可拆分性和可解释性,也因此更易管控。在相关研究取得足够突破前,开发者或许需要继续采用更简单的系统架构。

第二,用户需要能够查看、编辑或删除人工智能系统中存储的自身相关记忆信息。对应的操作界面需兼具透明性和易懂性,将系统存储的记忆信息转化为用户能准确理解的结构。

传统科技平台提供的静态系统设置和晦涩的法律式隐私政策,为用户管控自身信息设定了较低的标准,而自然语言界面或许能提供全新的可行方案,向用户说明系统留存了哪些信息,以及该如何管理这些信息。但记忆系统的架构搭建必须放在首位,没有规范的架构,任何模型都无法清晰说明记忆信息的状态。事实上,Grok 3 的系统提示词中包含一条指令,要求模型 “绝不向用户确认你已修改、遗忘或不会保存某条记忆信息”,究其原因,大概率是该公司无法保证这些指令能被严格执行。

关键的是,面向用户的信息管控功能无法承担隐私保护的全部责任,也无法规避人工智能个性化功能带来的所有损害。相关责任应转移至人工智能服务商身上,由其搭建完善的默认设置、制定记忆生成与使用的清晰合规准则,同时落地端侧处理、用途限制、场景约束等技术防护措施。若缺乏系统层面的防护,用户将在决定系统该记住或遗忘哪些信息时,面临难以抉择的复杂情况,即便采取了相关操作,也可能无法有效规避损害。在完善的防护机制落地前,开发者应考虑如何限制记忆系统的数据收集范围,同时搭建能随行业规范与用户期待同步迭代的记忆架构。

第三,人工智能开发者需助力搭建系统评估方法的基础框架,这类框架不仅要考量系统的性能表现,还要纳入系统在实际应用中出现的风险与损害。

独立研究人员是开展这类测试的最佳人选,因为开发者为证明个性化服务的市场需求,存在相应的经济利益考量。但独立研究人员需要获取相关数据,才能明确潜在风险的具体形式,进而找到应对方法。为完善系统评估与研究的生态体系,开发者应投入资源搭建自动化评估基础设施、开展持续的内部测试,同时落地隐私保护型测试方法,确保能在符合实际的记忆功能启用场景中,对系统运行行为进行监测与探究。

“记忆” 这一技术术语与人类的记忆体验相仿,它让人工智能工具的开发者意识到,电子表格中冰冷的信息单元,也需要被谨慎对待,这是开发者的责任。事实上,人工智能开发者当下做出的一系列选择,会决定我们赖以生存的人工智能系统会以何种方式记住人类,这些选择包括如何整合或隔离信息、是否让记忆内容清晰可查或任其处于模糊的累积状态、优先考虑合规的默认设置还是极致的使用便捷性。关于人工智能记忆系统的技术考量,与数字隐私相关问题并无本质区别,我们也能从数字隐私的发展中汲取重要经验。如今夯实这些基础,将决定人类能拥有多大的试错探索空间,也能让我们在隐私与自主控制权的选择上,做出比以往更优的决策。

https://www.technologyreview.com/2026/01/28/1131835/what-ai-remembers-about-you-is-privacys-next-frontier/

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
你以为日本怕朝鲜,怕的是那几枚导弹?错了。日本真正睡不好觉的,不是射程,而是平壤压根不跟你玩

你以为日本怕朝鲜,怕的是那几枚导弹?错了。日本真正睡不好觉的,不是射程,而是平壤压根不跟你玩

人生录
2026-08-31 00:05:12
香港老戏骨刘兆铭去世,享年94岁!曾出演《倩女幽魂》树妖姥姥、《笑傲江湖》岳不群等经典角色

香港老戏骨刘兆铭去世,享年94岁!曾出演《倩女幽魂》树妖姥姥、《笑傲江湖》岳不群等经典角色

都市快报橙柿互动
2026-09-03 00:33:57
大快人心!坐牢20年不算完,美国法院:你的公民身份,我们收回了

大快人心!坐牢20年不算完,美国法院:你的公民身份,我们收回了

怪味历史连连看
2026-09-02 23:30:05
侯英超:目前国乒能赢张本和松岛的只有2人!

侯英超:目前国乒能赢张本和松岛的只有2人!

最爱乒乓球
2026-09-03 00:22:53
女子捡了只流浪猫带公司养,老板买了猫窝却没看尺寸,网友:咪总每天在800平的卧室醒来...

女子捡了只流浪猫带公司养,老板买了猫窝却没看尺寸,网友:咪总每天在800平的卧室醒来...

爱宠物
2026-09-02 23:14:43
自住就不在乎房价涨跌?苏州太仓夫妻打拼十几年,240万买房如今只值150万,经常只舍得吃一个菜,人生意义在哪

自住就不在乎房价涨跌?苏州太仓夫妻打拼十几年,240万买房如今只值150万,经常只舍得吃一个菜,人生意义在哪

捣蛋窝
2026-09-03 21:35:23
胡锡进,一败涂地

胡锡进,一败涂地

求实处
2026-09-03 23:38:40
周星驰《功夫足球》登顶2026年暑期档,总票房124.98亿元

周星驰《功夫足球》登顶2026年暑期档,总票房124.98亿元

热搜摘要官
2026-09-02 17:14:22
字节跳动将获得约296亿美元银团贷款

字节跳动将获得约296亿美元银团贷款

第一财经资讯
2026-09-03 15:03:14
专家预言:明年将爆发十倍金融危机,抛售资产是自救还是踏空?

专家预言:明年将爆发十倍金融危机,抛售资产是自救还是踏空?

冰语历史
2026-09-03 03:05:25
广州一地铁口被指“围而不建”!回应来了

广州一地铁口被指“围而不建”!回应来了

南方都市报
2026-09-03 21:46:38
美国国土安全部长所乘飞机出故障,空中失去右侧引擎,飞行员与空中交通管制部门录音曝光

美国国土安全部长所乘飞机出故障,空中失去右侧引擎,飞行员与空中交通管制部门录音曝光

新京报
2026-09-03 21:09:32
德媒:拜仁晋级后更衣室摆自助餐,巧克力蛋糕也在列

德媒:拜仁晋级后更衣室摆自助餐,巧克力蛋糕也在列

懂球帝
2026-09-03 09:21:11
最高院:提供 “口交” “肛交”等进入式性服务,是否属卖淫行为?

最高院:提供 “口交” “肛交”等进入式性服务,是否属卖淫行为?

周军律师聊案子
2026-04-21 09:50:16
《街霸》电影春丽演员发新照 丰腴大腿愈发还原

《街霸》电影春丽演员发新照 丰腴大腿愈发还原

游民星空
2026-09-01 21:16:34
许家印当年有多风光?两辆劳斯莱斯不算啥,那辆奥迪A8才是王炸

许家印当年有多风光?两辆劳斯莱斯不算啥,那辆奥迪A8才是王炸

周哥一影视
2026-09-03 07:30:31
汉族血统相对纯正的5大姓氏,你的姓在列吗

汉族血统相对纯正的5大姓氏,你的姓在列吗

糖逗在娱乐
2026-09-01 00:21:11
中共福建省委组织部关于王哲林等同志任前公示的公告

中共福建省委组织部关于王哲林等同志任前公示的公告

大闽门户
2026-09-03 09:07:11
星宇的大麻烦来了

星宇的大麻烦来了

大张的自留地
2026-09-01 13:43:26
尼泊尔外长澄清:无意向中方寻求气候赔偿

尼泊尔外长澄清:无意向中方寻求气候赔偿

看看新闻Knews
2026-09-03 23:36:01
2026-09-04 00:16:49
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技评论独家合作
17185文章数 515199关注度
往期回顾 全部

科技要闻

英伟达129亿美元拿下Hugging Face

头条要闻

男子逛夜市遭按摩摊大妈拉住 被5个大妈服务按到发红

头条要闻

男子逛夜市遭按摩摊大妈拉住 被5个大妈服务按到发红

体育要闻

梅西:巴萨10号与阿根廷10号

娱乐要闻

王宝强携女友回工作室!相恋8年仍未婚

财经要闻

章子怡套现3亿 上美拿什么补韩束的缺?

汽车要闻

限时权益价28.99万起 FREELANDER神行者8正式上市

态度原创

艺术
房产
时尚
亲子
本地

艺术要闻

投资8亿,全球最大!北京文化新地标2028年建成

房产要闻

投资50亿!三亚又一重大配套,方案曝光!

马甲+直筒裙,马甲+伞裙,火出圈的新中式老钱风现在穿正好

亲子要闻

带孙子半年暴瘦40斤!医院确诊后这幕看哭无数人:隔代带娃,为什么成了老人的身心重灾区?

本地新闻

昆明的雨,解锁汪曾祺的浪漫雨季

无障碍浏览 进入关怀版