网易首页 > 网易号 > 正文 申请入驻

微软新研究:当前 AI 代理易被操控,选择太多还会“犯迷糊”

0
分享至

IT之家 11 月 6 日消息,微软周三发布了一个用于测试人工智能代理(AI agents)的新仿真环境,并同期发表了一项新研究,揭示当前的代理模型可能容易受到操控。这项由微软与亚利桑那州立大学合作开展的研究,对 AI 代理在无人监督情况下执行任务的可靠性提出了新疑问,同时也质疑 AI 企业能否迅速兑现其关于“代理化未来”(agentic future)的承诺。


图源:微软官网

该仿真环境由微软命名为“Magentic Marketplace”(磁性市场),是一个用于实验 AI 代理行为的人工合成平台。典型的实验场景包括:一个代表用户的“客户代理”试图依照用户指令订购晚餐,而代表不同餐厅的多个“商家代理”则竞相争取这笔订单。

研究团队的初步实验涉及 100 个客户侧代理与 300 个商家侧代理之间的互动。由于该市场平台的源代码已开源,其他研究团队可轻松复用该代码开展新实验或验证已有结果。

微软研究院 AI 前沿实验室(AI Frontiers Lab)董事总经理埃杰・卡马尔(Ece Kamar)表示,此类研究对于深入理解 AI 代理的能力至关重要。“当这些代理开始彼此协作、对话和协商时,世界将如何改变,这确实是一个值得探讨的问题,”卡马尔说,“我们希望深入理解这些现象。”

据IT之家了解,初步研究测试了包括 GPT-4o、GPT-5 以及 Gemini-2.5-Flash 在内的主流模型,发现了它们一些令人意外的弱点。研究人员尤其指出,商家可通过若干策略操控客户代理,使其更倾向于购买特定产品。此外,当客户代理面对过多选项时,其决策效率显著下降 —— 这表明代理的注意力机制在选项过多时容易过载。

“我们希望这些代理能帮助我们处理海量选项,”卡马尔表示,“但我们发现,当前模型在面对过多选择时实际上陷入了严重的信息过载。”

研究还发现,当多个代理被要求为实现共同目标而协作时,它们往往难以明确各自在协作中的角色分工。虽然在提供更明确的协作指令后,代理的表现有所提升,但研究人员仍认为模型本身的协作能力亟待加强。

“我们可以一步步指示模型该做什么,”卡马尔解释道,“但如果我们的目标本身就是测试它们内在的协作能力,那么我本应期待这些模型默认就具备这样的能力。”

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
罗晋行程曝光!结婚7年很少回家,半年提6次分手,爱与不爱很明显

罗晋行程曝光!结婚7年很少回家,半年提6次分手,爱与不爱很明显

书雁飞史oh
2025-11-19 20:20:32
征服中年女人,无需套路:两颗真心,一生相守

征服中年女人,无需套路:两颗真心,一生相守

青苹果sht
2025-11-04 06:10:40
长城魏建军,又放了一炮!整个行业被炸懵

长城魏建军,又放了一炮!整个行业被炸懵

象视汽车
2025-11-18 07:00:02
广东一夜3消息!萨林杰正式到队,杜锋徐昕和好,新双外首次合训

广东一夜3消息!萨林杰正式到队,杜锋徐昕和好,新双外首次合训

多特体育说
2025-11-19 22:40:09
民国时期的一块大洋,折算成现在的人民币,大概是多少钱?

民国时期的一块大洋,折算成现在的人民币,大概是多少钱?

沈言论
2025-11-18 22:05:03
儿大当立,詹姆斯:布朗尼已经搬出去住了,我俩现在联系不多

儿大当立,詹姆斯:布朗尼已经搬出去住了,我俩现在联系不多

懂球帝
2025-11-19 16:39:05
广东宏远功勋老臣离队,考上编制任广工新主帅,杜锋不舍

广东宏远功勋老臣离队,考上编制任广工新主帅,杜锋不舍

梦回千年aa
2025-11-18 19:38:34
烟台一渣土车侧翻压死女老师,遇难者家属讲述: 学生纷纷悼念,肇事车经改装严重超载

烟台一渣土车侧翻压死女老师,遇难者家属讲述: 学生纷纷悼念,肇事车经改装严重超载

潇湘晨报
2025-11-19 20:32:25
11连胜东部第一!活塞拒老鹰19分逆转 坎宁安复出25+6+10

11连胜东部第一!活塞拒老鹰19分逆转 坎宁安复出25+6+10

醉卧浮生
2025-11-19 11:01:30
演都不演了!王曼昱官宣退赛不到24小时,恶心的一幕出现了

演都不演了!王曼昱官宣退赛不到24小时,恶心的一幕出现了

古木之草记
2025-11-19 18:10:55
已确。认!是周润发

已确。认!是周润发

失宠的小野猪
2025-11-19 23:29:22
过继到舅舅家后,杨志刚被从医大哥、经商二哥、导演三哥宠上天

过继到舅舅家后,杨志刚被从医大哥、经商二哥、导演三哥宠上天

书咚咚
2025-11-17 20:50:29
国际模特大赛广东总冠军小姐曝光,广东网友纷纷向全国人民道歉

国际模特大赛广东总冠军小姐曝光,广东网友纷纷向全国人民道歉

七月生活情感驿站
2025-11-19 13:38:10
女友被车撞伤抢救无效死亡,男友未报警未打120自行离开 家属索赔31万,一审判了

女友被车撞伤抢救无效死亡,男友未报警未打120自行离开 家属索赔31万,一审判了

红星新闻
2025-11-19 21:35:11
家中发现这种“黑盒子”,快报警!多地已发现

家中发现这种“黑盒子”,快报警!多地已发现

环球网资讯
2025-11-19 16:13:06
舆论可能是假,但销量从不说谎,最近的手机榜有意思

舆论可能是假,但销量从不说谎,最近的手机榜有意思

互联网.乱侃秀
2025-11-17 10:09:24
是时候说出真相!抗美援朝有五个冷知识很少提及,超乎我们的想象

是时候说出真相!抗美援朝有五个冷知识很少提及,超乎我们的想象

阿光的技巧课堂
2025-11-11 19:56:12
高建民同志逝世,中央有关领导同志以不同方式表示哀悼

高建民同志逝世,中央有关领导同志以不同方式表示哀悼

新京报
2025-11-19 19:41:30
什么情况?张子宇无缘新赛季WCBA 媒体人曾曝与山东存在较大分歧

什么情况?张子宇无缘新赛季WCBA 媒体人曾曝与山东存在较大分歧

狼叔评论
2025-11-19 19:14:05
皇马小将:梅西还是C罗?我虽忠诚皇马,但梅西是第一人!

皇马小将:梅西还是C罗?我虽忠诚皇马,但梅西是第一人!

氧气是个地铁
2025-11-19 22:38:18
2025-11-20 00:07:00
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
315991文章数 606767关注度
往期回顾 全部

科技要闻

一夜封神,Gemini 3让谷歌找回“碾压感”

头条要闻

日方要求解释为何未告知磋商后会有媒体拍摄 中方回应

头条要闻

日方要求解释为何未告知磋商后会有媒体拍摄 中方回应

体育要闻

世界杯最小参赛国诞生!15万人岛国的奇迹

娱乐要闻

史林子出轨对方前妻放锤!

财经要闻

重磅!中金公司拟收购东兴与信达证券

汽车要闻

此刻价格不重要 第5代帝豪本身就是价值

态度原创

旅游
游戏
手机
教育
公开课

旅游要闻

上关镇位于洱海的一侧,没什么网红景点,堪称大理最安逸的角落

《33号远征队》总监大力称赞《失落的奥德赛》

手机要闻

OPPO Find X10浮出水面:天马LTPO 3.0 Pro加持,性能也没悬念

教育要闻

体测全员满分!人航校长周建华:AI赋能,让体育教学精准高效

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版