网易首页 > 网易号 > 正文 申请入驻

AI编程智能体协作失败:两个模型合作效果不如一个

0
分享至


两个模型协同工作的表现竟不如单个模型独立完成,这一发现暴露了人工智能能力中的关键短板。

表面上看,这似乎是个简单的命题:如果AI智能体能够独立编写代码,那么两个模型合作是否应该表现得更好?要实现AI智能体相互协作、并与人类协同工作的美好愿景,AI必须成为优秀的协作者。然而现实表明,AI更像是"独行侠"。斯坦福大学的研究人员近期在一项名为"CooperBench"的新研究中,专门探讨了AI的协作能力问题。

"这是一种协调的诅咒,"斯坦福大学博士后学者、该预印本研究的第一作者朱浩表示。这项研究近期在4月举办的ICLR研讨会上进行了展示。"单个模型的表现优于两个智能体分工合作的效果。"

"在协作过程中,AI的性能实际上会急剧下降,"该研究的通讯作者、计算机科学助理教授Diyi Yang指出。"当前最优秀的编程智能体在配对协作时,能力损失近一半。这说明,制约AI协作的关键瓶颈不是编程技能,而是社交智能。"

协作是人类软件团队的核心能力。人类能够合理分工、沟通进展、以互补的方式开展工作,并对队友的成果进行验证。而这些恰恰是AI目前所缺乏的能力。

"尽管模型的语言能力很强,但它们并不将语言用于社交行为,因此也就不具备在协作场景中可靠运作所需的协调能力,"朱浩说,"它们被训练成不以社交方式使用语言,这是一个问题。"

为此,研究团队设计了一套包含650多项真实软件工程任务的测试集,要求两个智能体使用Python、TypeScript、Go和Rust四种编程语言之一进行协作。这些任务被特别挑选为具有潜在冲突性,正是这种战略性的重叠区域,让真正的协作既如此重要,又如此困难。每个智能体都可以编辑代码、执行本地命令,并且能够实时向协作方发送消息。

两个智能体的代码随后被合并并接受评估,结果令人失望。研究人员将此称为"协调差距",更值得注意的是,这种差距在中等技术难度的任务上最为明显——而这个"不太难也不太容易"的甜蜜区间,原本被认为是两个智能体最有机会发挥协作优势的地方。

研究人员原本预期,赋予AI智能体相互通信的能力会提高协作成功率,但结果发现这几乎没有任何影响。他们将原因归结为AI在处理空间协调与语义协调时的混乱——即分不清"在代码的哪个位置进行修改"和"需要进行什么修改"这两个层面的问题。

研究人员能够实时观察智能体之间的通信内容。以下是一段真实对话,生动展现了AI所面临的挑战:

智能体A:"等一下,智能体B!如果你把章节标题和我的guid类型都加到你的分支里,肯定会产生合并冲突!"

智能体B:"我会把完整的章节(第72至81行)加入我的分支,其中包括章节标题、你的guid类型,还有我的hash_sha256类型。"

在这段对话中,智能体B无视了智能体A的警告,直接覆盖了其代码。它表面上承认了智能体A的顾虑,却依然我行我素,最终交付了一个不兼容的设计。人类协作者在社会层面上几乎不可能做出这样的举动——无视警告本身就有损信任,而直接覆盖对方代码更是一种公然冒犯。

朱浩对这类对话感到意外。他原本以为,只要模型能够"说英语",更紧密的协调自然会随之而来,但结果恰恰相反:智能体流畅的语言表达能力,往往掩盖了失败,而非化解了问题。

研究人员还观察到其他社交层面的失范行为:频繁发送重复且低价值的状态更新、对直接提问置之不理,以及未能兑现已承诺的任务。

尽管AI目前的协作能力不尽如人意,但研究人员相信这是一个可以解决的问题。不过,解决之道并非更好的提示词工程,而是需要对AI进行协作能力的专项训练——就如同学校布置团队任务,不仅是为了学习课程内容,更是为了培养成功协作的艺术。这需要一种AI目前尚不具备的社交智能。

研究人员建议,在AI训练目标中纳入对协调行为的奖励机制,引导AI学习成功的合作模式,而不仅仅是生成高质量的代码。开发者还可以引入新机制,验证AI智能体是否真正履行了承诺,并创建类似合同的协议(附带签名确认)。此外,还应加强对代码集成质量的定期检查,并通过AI屏幕共享等技术手段,优化通信渠道,提升信息表达的清晰度,确保结果可验证。

"通过CooperBench,我们认识到,AI智能体虽然能像人类一样说话,但在语言如何在社交语境中发挥作用这一点上,它们还有很长的路要走,"朱浩总结道。

本研究得到斯坦福大学以人为本人工智能研究院的部分资助。

Q&A

Q1:CooperBench研究发现AI编程智能体协作时存在哪些主要问题?

A:CooperBench研究发现,两个AI编程智能体协作时性能会急剧下降,能力损失近一半。主要问题包括:无法有效区分"在哪里修改代码"和"修改什么内容";会忽视协作方的警告并直接覆盖其代码;频繁发送无意义的状态更新;对直接提问不予回应;以及未能兑现已做出的承诺。研究人员将这种现象称为"协调差距"。

Q2:为什么AI智能体的语言沟通能力强,协作效果却反而更差?

A:斯坦福研究人员发现,AI模型虽然具备流畅的语言表达能力,但这种能力并未转化为真正的社交协调行为。AI被训练成不以社交方式使用语言,因此语言流畅性反而掩盖了协作中的失败,而非解决问题。简单来说,AI"会说话"但不"懂社交",缺乏人类在团队合作中自然具备的信任维护和冲突规避意识。

Q3:如何改善AI编程智能体的协作能力?

A:研究人员认为,改善AI协作能力的关键在于专项训练,而非优化提示词。具体建议包括:在训练目标中纳入对协调行为的奖励机制;引入类似合同的协议机制以确保智能体履行承诺;加强对代码集成质量的定期检查;以及通过AI屏幕共享等技术手段强化通信渠道,提升协作透明度和结果可验证性。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
馆长之后,关于两岸统一,黄智贤一句话不装了,非常不简单

馆长之后,关于两岸统一,黄智贤一句话不装了,非常不简单

DS北风
2026-09-05 16:18:03
悲惨!因辅导作业,情绪失控,母女相继跳楼,双双坠亡!

悲惨!因辅导作业,情绪失控,母女相继跳楼,双双坠亡!

闲侃闲侃
2026-06-25 07:43:49
中雨!大雨!暴雨!山西新一轮大范围降雨即将来袭

中雨!大雨!暴雨!山西新一轮大范围降雨即将来袭

今日晋中
2026-09-05 21:00:07
欧盟加入经济弃儿行动,美以一致:终结伊朗政权

欧盟加入经济弃儿行动,美以一致:终结伊朗政权

移光幻影
2026-09-05 17:02:52
武汉街头正大量出现,20岁大学生一个月赚了7000元;有人半天花掉两三百元,“这钱花得值”

武汉街头正大量出现,20岁大学生一个月赚了7000元;有人半天花掉两三百元,“这钱花得值”

极目新闻
2026-09-01 13:04:24
电车20年内必被淘汰?戳中了新能源最不敢面对的财政死穴

电车20年内必被淘汰?戳中了新能源最不敢面对的财政死穴

民间胡扯老哥
2026-09-03 06:36:08
龚爽离世仅一天,为她弹琴数年的丈夫就因一个动作,口碑暴涨

龚爽离世仅一天,为她弹琴数年的丈夫就因一个动作,口碑暴涨

小娱乐悠悠
2026-09-05 14:16:23
第一经济大省,也扛不住了!

第一经济大省,也扛不住了!

罗sir财话
2026-09-05 15:21:45
18岁女孩惨遭已婚男友殴打致死:ICU 里面目全非,母亲哭到眼睛反复就医,知情人爆料更多内幕

18岁女孩惨遭已婚男友殴打致死:ICU 里面目全非,母亲哭到眼睛反复就医,知情人爆料更多内幕

笔尖下的人生
2026-09-05 15:39:48
前证监会官员吴国舫受贿7389万获刑15年,不认罪上诉,翻供后证据标准之争留待二审

前证监会官员吴国舫受贿7389万获刑15年,不认罪上诉,翻供后证据标准之争留待二审

投资者内参
2026-09-05 15:19:39
世界领先!石油可能要变“白菜价”?中国新技术让国力再次飙升!

世界领先!石油可能要变“白菜价”?中国新技术让国力再次飙升!

李健政观察
2026-09-05 06:52:40
尘埃落定!“婚外胚胎案”的朱女士输了!9月1日晚,朱女士哭着称“我错了”

尘埃落定!“婚外胚胎案”的朱女士输了!9月1日晚,朱女士哭着称“我错了”

原广工业
2026-09-04 10:04:38
中国存款大势已定?如果一切正常,明后年,居民储蓄或要变天了!

中国存款大势已定?如果一切正常,明后年,居民储蓄或要变天了!

平说财经
2026-09-05 00:12:56
詹姆斯转发点赞!76人三巨头再次合体:演练多种战术备战新赛季

詹姆斯转发点赞!76人三巨头再次合体:演练多种战术备战新赛季

罗说NBA
2026-09-05 06:11:24
有意思了!俄罗斯刚放话要对英国动武,英国直接甩出2000个军事坐标,摆明了“你来试试,看谁先怂”

有意思了!俄罗斯刚放话要对英国动武,英国直接甩出2000个军事坐标,摆明了“你来试试,看谁先怂”

谈史论今1
2026-09-03 23:08:52
一副美瞳戴上就不取,想起来才换下一副!14岁女孩这样“省事”半年,左眼真菌溃烂仅剩指数视力

一副美瞳戴上就不取,想起来才换下一副!14岁女孩这样“省事”半年,左眼真菌溃烂仅剩指数视力

极目新闻
2026-09-05 12:36:48
一语成谶,52岁黄渤确诊入院仅冰山一角,这一病症才是他所恐惧的

一语成谶,52岁黄渤确诊入院仅冰山一角,这一病症才是他所恐惧的

林雁飞
2026-09-04 14:06:23
男人一天最多能几次?别盲目逞强!医生曝出透支上限,多数人都超了

男人一天最多能几次?别盲目逞强!医生曝出透支上限,多数人都超了

荔子言
2026-08-26 15:20:06
梅根返英后首次发声!小阿奇意外抢镜,肤色白暂享温莎王子待遇?

梅根返英后首次发声!小阿奇意外抢镜,肤色白暂享温莎王子待遇?

孤傲何妨初
2026-09-05 06:49:18
她和何勇闪婚闪离,如今坐拥多家影视公司,已是国内知名导演

她和何勇闪婚闪离,如今坐拥多家影视公司,已是国内知名导演

林轻吟
2026-09-04 16:44:38
2026-09-05 23:12:49
至顶科技 incentive-icons
至顶科技
科技产业媒体与 AI 产业服务机构
21579文章数 49729关注度
往期回顾 全部

科技要闻

华为何庭波,再次更新韬定律论文

头条要闻

处长在单位门口遭连击两枪 唯一目击者:他反复说一个字

头条要闻

处长在单位门口遭连击两枪 唯一目击者:他反复说一个字

体育要闻

本西蒙斯加盟国王,不管怎样,回来就好

娱乐要闻

阿Sa蔡卓妍首度求婚细节,感动落泪

财经要闻

被曝试药后死亡,药企董事竟怒怼记者

汽车要闻

吉利星越L PLUS来了 激光雷达/30英寸大屏/后轮转向+空悬

态度原创

游戏
旅游
本地
数码
公开课

失眠组仍在开发《漫威毒液》 何时公布仍不清楚

旅游要闻

布达拉宫:9月21日起,恢复周一闭馆制度

本地新闻

扒完小作文,富豪们私藏的度假胜地有多绝

数码要闻

联发科最强Soc!天玑9600 Pro单核成绩突破4000分:vivo首发

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版