网易首页 > 网易号 > 正文 申请入驻

AI编程智能体协作失败:两个模型合作效果不如一个

0
分享至


两个模型协同工作的表现竟不如单个模型独立完成,这一发现暴露了人工智能能力中的关键短板。

表面上看,这似乎是个简单的命题:如果AI智能体能够独立编写代码,那么两个模型合作是否应该表现得更好?要实现AI智能体相互协作、并与人类协同工作的美好愿景,AI必须成为优秀的协作者。然而现实表明,AI更像是"独行侠"。斯坦福大学的研究人员近期在一项名为"CooperBench"的新研究中,专门探讨了AI的协作能力问题。

"这是一种协调的诅咒,"斯坦福大学博士后学者、该预印本研究的第一作者朱浩表示。这项研究近期在4月举办的ICLR研讨会上进行了展示。"单个模型的表现优于两个智能体分工合作的效果。"

"在协作过程中,AI的性能实际上会急剧下降,"该研究的通讯作者、计算机科学助理教授Diyi Yang指出。"当前最优秀的编程智能体在配对协作时,能力损失近一半。这说明,制约AI协作的关键瓶颈不是编程技能,而是社交智能。"

协作是人类软件团队的核心能力。人类能够合理分工、沟通进展、以互补的方式开展工作,并对队友的成果进行验证。而这些恰恰是AI目前所缺乏的能力。

"尽管模型的语言能力很强,但它们并不将语言用于社交行为,因此也就不具备在协作场景中可靠运作所需的协调能力,"朱浩说,"它们被训练成不以社交方式使用语言,这是一个问题。"

为此,研究团队设计了一套包含650多项真实软件工程任务的测试集,要求两个智能体使用Python、TypeScript、Go和Rust四种编程语言之一进行协作。这些任务被特别挑选为具有潜在冲突性,正是这种战略性的重叠区域,让真正的协作既如此重要,又如此困难。每个智能体都可以编辑代码、执行本地命令,并且能够实时向协作方发送消息。

两个智能体的代码随后被合并并接受评估,结果令人失望。研究人员将此称为"协调差距",更值得注意的是,这种差距在中等技术难度的任务上最为明显——而这个"不太难也不太容易"的甜蜜区间,原本被认为是两个智能体最有机会发挥协作优势的地方。

研究人员原本预期,赋予AI智能体相互通信的能力会提高协作成功率,但结果发现这几乎没有任何影响。他们将原因归结为AI在处理空间协调与语义协调时的混乱——即分不清"在代码的哪个位置进行修改"和"需要进行什么修改"这两个层面的问题。

研究人员能够实时观察智能体之间的通信内容。以下是一段真实对话,生动展现了AI所面临的挑战:

智能体A:"等一下,智能体B!如果你把章节标题和我的guid类型都加到你的分支里,肯定会产生合并冲突!"

智能体B:"我会把完整的章节(第72至81行)加入我的分支,其中包括章节标题、你的guid类型,还有我的hash_sha256类型。"

在这段对话中,智能体B无视了智能体A的警告,直接覆盖了其代码。它表面上承认了智能体A的顾虑,却依然我行我素,最终交付了一个不兼容的设计。人类协作者在社会层面上几乎不可能做出这样的举动——无视警告本身就有损信任,而直接覆盖对方代码更是一种公然冒犯。

朱浩对这类对话感到意外。他原本以为,只要模型能够"说英语",更紧密的协调自然会随之而来,但结果恰恰相反:智能体流畅的语言表达能力,往往掩盖了失败,而非化解了问题。

研究人员还观察到其他社交层面的失范行为:频繁发送重复且低价值的状态更新、对直接提问置之不理,以及未能兑现已承诺的任务。

尽管AI目前的协作能力不尽如人意,但研究人员相信这是一个可以解决的问题。不过,解决之道并非更好的提示词工程,而是需要对AI进行协作能力的专项训练——就如同学校布置团队任务,不仅是为了学习课程内容,更是为了培养成功协作的艺术。这需要一种AI目前尚不具备的社交智能。

研究人员建议,在AI训练目标中纳入对协调行为的奖励机制,引导AI学习成功的合作模式,而不仅仅是生成高质量的代码。开发者还可以引入新机制,验证AI智能体是否真正履行了承诺,并创建类似合同的协议(附带签名确认)。此外,还应加强对代码集成质量的定期检查,并通过AI屏幕共享等技术手段,优化通信渠道,提升信息表达的清晰度,确保结果可验证。

"通过CooperBench,我们认识到,AI智能体虽然能像人类一样说话,但在语言如何在社交语境中发挥作用这一点上,它们还有很长的路要走,"朱浩总结道。

本研究得到斯坦福大学以人为本人工智能研究院的部分资助。

Q&A

Q1:CooperBench研究发现AI编程智能体协作时存在哪些主要问题?

A:CooperBench研究发现,两个AI编程智能体协作时性能会急剧下降,能力损失近一半。主要问题包括:无法有效区分"在哪里修改代码"和"修改什么内容";会忽视协作方的警告并直接覆盖其代码;频繁发送无意义的状态更新;对直接提问不予回应;以及未能兑现已做出的承诺。研究人员将这种现象称为"协调差距"。

Q2:为什么AI智能体的语言沟通能力强,协作效果却反而更差?

A:斯坦福研究人员发现,AI模型虽然具备流畅的语言表达能力,但这种能力并未转化为真正的社交协调行为。AI被训练成不以社交方式使用语言,因此语言流畅性反而掩盖了协作中的失败,而非解决问题。简单来说,AI"会说话"但不"懂社交",缺乏人类在团队合作中自然具备的信任维护和冲突规避意识。

Q3:如何改善AI编程智能体的协作能力?

A:研究人员认为,改善AI协作能力的关键在于专项训练,而非优化提示词。具体建议包括:在训练目标中纳入对协调行为的奖励机制;引入类似合同的协议机制以确保智能体履行承诺;加强对代码集成质量的定期检查;以及通过AI屏幕共享等技术手段强化通信渠道,提升协作透明度和结果可验证性。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
义乌医院顶风引进长沙争议女医生曾琦引争议

义乌医院顶风引进长沙争议女医生曾琦引争议

尘埃里的看客
2026-07-20 12:20:09
人民日报怒批!这次“目中无人”的冯小刚,被周星驰用票房上一课

人民日报怒批!这次“目中无人”的冯小刚,被周星驰用票房上一课

聚焦瞬间
2026-07-19 19:14:38
事态升级!抢在特朗普动武前,中方亮出宪章,不许美军打第三国

事态升级!抢在特朗普动武前,中方亮出宪章,不许美军打第三国

理想闲谈
2026-07-19 11:33:12
外媒:亚当斯去世前曾与女友争吵,并向父亲表示自己撑不住了

外媒:亚当斯去世前曾与女友争吵,并向父亲表示自己撑不住了

懂球帝
2026-07-19 23:00:10
还以为中国落后一年,Kimi K3突然杀到!特朗普顾问:美国要输掉AI竞赛了

还以为中国落后一年,Kimi K3突然杀到!特朗普顾问:美国要输掉AI竞赛了

青青子衿
2026-07-18 13:01:05
世界杯决赛巨大争议!尼科进球被吹,阿根廷又获益,名宿集体开炮

世界杯决赛巨大争议!尼科进球被吹,阿根廷又获益,名宿集体开炮

奥拜尔
2026-07-20 05:37:21
张雪峰曾说过,真正有远见的父母,不会把小学六年浪费在钢琴、机器人、舞蹈等兴趣班

张雪峰曾说过,真正有远见的父母,不会把小学六年浪费在钢琴、机器人、舞蹈等兴趣班

户外阿毽
2026-07-15 06:02:59
左宗棠巡营发现士兵暴晒半日无汗,当即下令:此人有情况,处理掉

左宗棠巡营发现士兵暴晒半日无汗,当即下令:此人有情况,处理掉

凡人侃史
2026-07-20 16:14:37
51岁钟汉良做梦也没想到,因张凌赫一个造型,让他的口碑一夜暴涨

51岁钟汉良做梦也没想到,因张凌赫一个造型,让他的口碑一夜暴涨

娱乐圈笔娱君
2026-07-20 14:14:04
印度开出 5500 万天价罚单,比亚迪一招全身而退!给所有出海中企上了生死一课

印度开出 5500 万天价罚单,比亚迪一招全身而退!给所有出海中企上了生死一课

爱看剧的阿峰
2026-07-20 07:43:07
中国商飞:290座级的C929宽体飞机设计工作正在稳步推进

中国商飞:290座级的C929宽体飞机设计工作正在稳步推进

IT之家
2026-07-20 22:16:17
39岁梅西落寞呆立!看着亚马尔激情庆祝:8场8球无缘金靴奖 卫冕失利

39岁梅西落寞呆立!看着亚马尔激情庆祝:8场8球无缘金靴奖 卫冕失利

风过乡
2026-07-20 06:26:21
穆里尼奥封神!皇马放弃 1.2 亿巨星太明智,世界杯决赛彻底崩盘

穆里尼奥封神!皇马放弃 1.2 亿巨星太明智,世界杯决赛彻底崩盘

澜归序
2026-07-20 07:20:58
具俊晔友人称其已搬到大S墓地附近,S妈还会给他做饭吃;蓝正龙首度回应大S去世“很多事放心里就好”

具俊晔友人称其已搬到大S墓地附近,S妈还会给他做饭吃;蓝正龙首度回应大S去世“很多事放心里就好”

大象新闻
2026-07-20 13:48:29
埃及名宿:梅西更配世界杯最佳球员,他带着10个棋子在踢球

埃及名宿:梅西更配世界杯最佳球员,他带着10个棋子在踢球

懂球帝
2026-07-20 18:20:19
不给总统面子!米莱宣布全国放假一天,梅西不返回阿根廷参加庆典

不给总统面子!米莱宣布全国放假一天,梅西不返回阿根廷参加庆典

全景体育V
2026-07-20 20:42:26
红遍大江南北的刘欢,嗜酒如命患上不死癌症,早已走上一条不归路

红遍大江南北的刘欢,嗜酒如命患上不死癌症,早已走上一条不归路

打小我就醜
2026-07-19 01:05:10
比亚迪车顶光伏实测:晒8小时充4度电,你们说这8000块花得值不值

比亚迪车顶光伏实测:晒8小时充4度电,你们说这8000块花得值不值

趣味萌宠的日常
2026-07-19 04:33:39
全国退休人员注意:12万亿家底已公布,养老金通知晚发原因在这

全国退休人员注意:12万亿家底已公布,养老金通知晚发原因在这

白昼说故事
2026-07-20 09:38:48
SpaceX斥资520亿美元采购1.3万台英伟达GB300服务器 富士康斩获大单

SpaceX斥资520亿美元采购1.3万台英伟达GB300服务器 富士康斩获大单

cnBeta.COM
2026-07-20 09:08:02
2026-07-20 22:47:00
至顶科技 incentive-icons
至顶科技
科技产业媒体与 AI 产业服务机构
20174文章数 49721关注度
往期回顾 全部

科技要闻

网易科技"未来大奖2026上半年AI榜单"揭晓

头条要闻

致82人死亡矿难发生后 山西多部门已有10余名官员落马

头条要闻

致82人死亡矿难发生后 山西多部门已有10余名官员落马

体育要闻

65岁肌肉男,世界杯最年长冠军主帅

娱乐要闻

谢霆锋发文确认父亲谢贤去世 享年89岁

财经要闻

AI开始挤泡沫

汽车要闻

综合续航超1600km 2027款星途ES上市置换价16.99万起

态度原创

房产
手机
时尚
游戏
本地

房产要闻

北师附、人大附、西侨、丘海…招生、划片最新变化来了!

手机要闻

荣耀Robot Phone核心组件已申请专利:友商很难跟进模仿

夏天才最适合穿连衣裙,看看这些裙装穿搭,舒适优雅又清新

《MXGP 26: The Official Game》官宣 10月发售

本地新闻

2026暑期旅行新灵感:跟着影视去旅行

无障碍浏览 进入关怀版