网易首页 > 网易号 > 正文 申请入驻

AI编程智能体协作失败:两个模型合作效果不如一个

0
分享至


两个模型协同工作的表现竟不如单个模型独立完成,这一发现暴露了人工智能能力中的关键短板。

表面上看,这似乎是个简单的命题:如果AI智能体能够独立编写代码,那么两个模型合作是否应该表现得更好?要实现AI智能体相互协作、并与人类协同工作的美好愿景,AI必须成为优秀的协作者。然而现实表明,AI更像是"独行侠"。斯坦福大学的研究人员近期在一项名为"CooperBench"的新研究中,专门探讨了AI的协作能力问题。

"这是一种协调的诅咒,"斯坦福大学博士后学者、该预印本研究的第一作者朱浩表示。这项研究近期在4月举办的ICLR研讨会上进行了展示。"单个模型的表现优于两个智能体分工合作的效果。"

"在协作过程中,AI的性能实际上会急剧下降,"该研究的通讯作者、计算机科学助理教授Diyi Yang指出。"当前最优秀的编程智能体在配对协作时,能力损失近一半。这说明,制约AI协作的关键瓶颈不是编程技能,而是社交智能。"

协作是人类软件团队的核心能力。人类能够合理分工、沟通进展、以互补的方式开展工作,并对队友的成果进行验证。而这些恰恰是AI目前所缺乏的能力。

"尽管模型的语言能力很强,但它们并不将语言用于社交行为,因此也就不具备在协作场景中可靠运作所需的协调能力,"朱浩说,"它们被训练成不以社交方式使用语言,这是一个问题。"

为此,研究团队设计了一套包含650多项真实软件工程任务的测试集,要求两个智能体使用Python、TypeScript、Go和Rust四种编程语言之一进行协作。这些任务被特别挑选为具有潜在冲突性,正是这种战略性的重叠区域,让真正的协作既如此重要,又如此困难。每个智能体都可以编辑代码、执行本地命令,并且能够实时向协作方发送消息。

两个智能体的代码随后被合并并接受评估,结果令人失望。研究人员将此称为"协调差距",更值得注意的是,这种差距在中等技术难度的任务上最为明显——而这个"不太难也不太容易"的甜蜜区间,原本被认为是两个智能体最有机会发挥协作优势的地方。

研究人员原本预期,赋予AI智能体相互通信的能力会提高协作成功率,但结果发现这几乎没有任何影响。他们将原因归结为AI在处理空间协调与语义协调时的混乱——即分不清"在代码的哪个位置进行修改"和"需要进行什么修改"这两个层面的问题。

研究人员能够实时观察智能体之间的通信内容。以下是一段真实对话,生动展现了AI所面临的挑战:

智能体A:"等一下,智能体B!如果你把章节标题和我的guid类型都加到你的分支里,肯定会产生合并冲突!"

智能体B:"我会把完整的章节(第72至81行)加入我的分支,其中包括章节标题、你的guid类型,还有我的hash_sha256类型。"

在这段对话中,智能体B无视了智能体A的警告,直接覆盖了其代码。它表面上承认了智能体A的顾虑,却依然我行我素,最终交付了一个不兼容的设计。人类协作者在社会层面上几乎不可能做出这样的举动——无视警告本身就有损信任,而直接覆盖对方代码更是一种公然冒犯。

朱浩对这类对话感到意外。他原本以为,只要模型能够"说英语",更紧密的协调自然会随之而来,但结果恰恰相反:智能体流畅的语言表达能力,往往掩盖了失败,而非化解了问题。

研究人员还观察到其他社交层面的失范行为:频繁发送重复且低价值的状态更新、对直接提问置之不理,以及未能兑现已承诺的任务。

尽管AI目前的协作能力不尽如人意,但研究人员相信这是一个可以解决的问题。不过,解决之道并非更好的提示词工程,而是需要对AI进行协作能力的专项训练——就如同学校布置团队任务,不仅是为了学习课程内容,更是为了培养成功协作的艺术。这需要一种AI目前尚不具备的社交智能。

研究人员建议,在AI训练目标中纳入对协调行为的奖励机制,引导AI学习成功的合作模式,而不仅仅是生成高质量的代码。开发者还可以引入新机制,验证AI智能体是否真正履行了承诺,并创建类似合同的协议(附带签名确认)。此外,还应加强对代码集成质量的定期检查,并通过AI屏幕共享等技术手段,优化通信渠道,提升信息表达的清晰度,确保结果可验证。

"通过CooperBench,我们认识到,AI智能体虽然能像人类一样说话,但在语言如何在社交语境中发挥作用这一点上,它们还有很长的路要走,"朱浩总结道。

本研究得到斯坦福大学以人为本人工智能研究院的部分资助。

Q&A

Q1:CooperBench研究发现AI编程智能体协作时存在哪些主要问题?

A:CooperBench研究发现,两个AI编程智能体协作时性能会急剧下降,能力损失近一半。主要问题包括:无法有效区分"在哪里修改代码"和"修改什么内容";会忽视协作方的警告并直接覆盖其代码;频繁发送无意义的状态更新;对直接提问不予回应;以及未能兑现已做出的承诺。研究人员将这种现象称为"协调差距"。

Q2:为什么AI智能体的语言沟通能力强,协作效果却反而更差?

A:斯坦福研究人员发现,AI模型虽然具备流畅的语言表达能力,但这种能力并未转化为真正的社交协调行为。AI被训练成不以社交方式使用语言,因此语言流畅性反而掩盖了协作中的失败,而非解决问题。简单来说,AI"会说话"但不"懂社交",缺乏人类在团队合作中自然具备的信任维护和冲突规避意识。

Q3:如何改善AI编程智能体的协作能力?

A:研究人员认为,改善AI协作能力的关键在于专项训练,而非优化提示词。具体建议包括:在训练目标中纳入对协调行为的奖励机制;引入类似合同的协议机制以确保智能体履行承诺;加强对代码集成质量的定期检查;以及通过AI屏幕共享等技术手段强化通信渠道,提升协作透明度和结果可验证性。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
张家齐妈妈急着澄清买房,李松蔚没接钱的话,先问了一句你祝福她吗

张家齐妈妈急着澄清买房,李松蔚没接钱的话,先问了一句你祝福她吗

子夜观综记
2026-10-21 15:32:08
刘恺威宣布新恋情当天,杨幂也传来一个好消息,俩人差距一目了然

刘恺威宣布新恋情当天,杨幂也传来一个好消息,俩人差距一目了然

天天热点见闻
2026-10-21 04:42:17
艾克森至今保留中国国籍,三个儿子出生广州能否代表国足出战?

艾克森至今保留中国国籍,三个儿子出生广州能否代表国足出战?

体育全天候
2026-10-20 15:56:40
伊朗演都不演了?总统佩泽希齐扬明确表示,伊朗已经准备好加入麦加联盟

伊朗演都不演了?总统佩泽希齐扬明确表示,伊朗已经准备好加入麦加联盟

磊子讲史
2026-10-20 15:05:59
亚马尔破门难救主,杜埃传射建功,巴黎4-2送巴萨首败+耻辱纪录

亚马尔破门难救主,杜埃传射建功,巴黎4-2送巴萨首败+耻辱纪录

钉钉陌上花开
2026-10-21 04:58:39
撕破脸!美国议员放狠话:谁敢断乌克兰卫星信号,直接砍光经费

撕破脸!美国议员放狠话:谁敢断乌克兰卫星信号,直接砍光经费

老马拉车莫少装
2026-10-16 03:15:38
李娟:辍学、不班、不婚、没娃,凡尔赛光鲜背后藏着多少辛酸和无奈?

李娟:辍学、不班、不婚、没娃,凡尔赛光鲜背后藏着多少辛酸和无奈?

大运河时空
2026-10-21 14:25:05
最悲催的云南铜业:铜价在天上,股价在泥里,完美的“牛市错过”

最悲催的云南铜业:铜价在天上,股价在泥里,完美的“牛市错过”

慧眼看世界哈哈
2026-10-21 11:32:40
49岁男星裸身晒3英尺巨龙纹身:为盖住手术疤痕

49岁男星裸身晒3英尺巨龙纹身:为盖住手术疤痕

娱圈观察员
2026-10-20 15:35:39
当众拒唱国歌不认中国籍,把两个孩子全送出国,如今报应终于来了

当众拒唱国歌不认中国籍,把两个孩子全送出国,如今报应终于来了

鹤羽说个事
2026-09-02 16:51:59
女演员真的别瞎去整容!看《醉梦》里刘诗诗和黄小蕾同框,俩人的状态差距一眼就看穿

女演员真的别瞎去整容!看《醉梦》里刘诗诗和黄小蕾同框,俩人的状态差距一眼就看穿

动物奇奇怪怪
2026-10-21 13:03:39
突发!澳洲巨头刚刚巨额亏损,数十家门店关闭!近200年历史,华人几乎每周都去

突发!澳洲巨头刚刚巨额亏损,数十家门店关闭!近200年历史,华人几乎每周都去

澳洲红领巾
2026-10-21 14:28:12
喜讯!U23国脚王牌身披英冠U21梯队十号核心战袍亮相,值得期待

喜讯!U23国脚王牌身披英冠U21梯队十号核心战袍亮相,值得期待

振刚说足球
2026-10-21 08:38:45
别不信,属相鸡,这辈子命中注定的伴侣,很多是这4个样子

别不信,属相鸡,这辈子命中注定的伴侣,很多是这4个样子

阿龙美食记
2026-08-28 05:06:05
男子和四十多岁女网友认识后,频繁发生关系,最后一次在车内,男子死亡后家属向女子索要巨额赔偿

男子和四十多岁女网友认识后,频繁发生关系,最后一次在车内,男子死亡后家属向女子索要巨额赔偿

丫头舫
2026-10-13 22:10:25
“秃子、燕子、汉子”同台,蒋万安竞总将成立,预告“神秘嘉宾”

“秃子、燕子、汉子”同台,蒋万安竞总将成立,预告“神秘嘉宾”

海峡导报社
2026-10-21 15:18:03
刘恺威官宣新女友!女方忠诚小作文彻底翻车,和杨幂差距一目了然

刘恺威官宣新女友!女方忠诚小作文彻底翻车,和杨幂差距一目了然

行者聊官
2026-10-20 18:37:14
农残最多的5种蔬菜,用水冲洗都洗不干净,都是常吃的,了解一下

农残最多的5种蔬菜,用水冲洗都洗不干净,都是常吃的,了解一下

思思夜话
2026-10-19 11:23:11
法院书记员侵占执行款、执行费86.3万元获刑,执行局局长及分管副院长因监管不力被党内警告

法院书记员侵占执行款、执行费86.3万元获刑,执行局局长及分管副院长因监管不力被党内警告

极目新闻
2026-10-21 13:28:24
努力难抵房租,深圳民治网红螺蛳粉店,生意火爆却败给五万五的房租,老板只能含泪关门止损

努力难抵房租,深圳民治网红螺蛳粉店,生意火爆却败给五万五的房租,老板只能含泪关门止损

捣蛋窝
2026-10-21 10:04:11
2026-10-21 16:15:00
至顶科技 incentive-icons
至顶科技
科技产业媒体与 AI 产业服务机构
22710文章数 49737关注度
往期回顾 全部

科技要闻

SpaceX收入暴涨!马斯克:这事"不再不可能"

头条要闻

高市早苗执政满一年 日媒质问:这场噩梦还要持续多久

头条要闻

高市早苗执政满一年 日媒质问:这场噩梦还要持续多久

体育要闻

“我,对得起天津足球!”

娱乐要闻

张柏芝自曝五点陪伴儿子 谢霆锋尴尬了

财经要闻

日赚近5亿的长鑫,股价却跌掉了15000亿

汽车要闻

黑科技一次看全 2026奇瑞全球创新大会干货汇总

态度原创

数码
时尚
本地
家居
房产

数码要闻

dynabook发布V83/PA商用翻转本:989g,机身设有数位笔收纳槽

卡其裙、小棕裤,今年最好看的单品都在这了,穿出秋天的氛围与时髦

本地新闻

一场垂直登高赛跑出了"山城"的真正内核

家居要闻

2026建博会(广州) 公装联探展交流活动

房产要闻

J&P 集团亮相 2026 中国品牌出海博览会| 深耕跨境20载,品牌出海有J&P

无障碍浏览 进入关怀版