网易首页 > 网易号 > 正文 申请入驻

提交量涨240%,发布只涨30%:多出的代码卡在哪

0
分享至

自主编程智能体加入之后,提交量的累计效应是240%,发布量只涨了30%。两个数字都来自一份NBER工作论文,样本追踪了超过50万名GitHub开发者。


这两个数字之间的落差,是近期关于编程智能体最有用的一份材料。多出来的代码并没有消失,大部分正卡在提交和发布之间的某个环节上。

论文题为《Writing Code vs. Shipping Code: Productivity Effects Across Generations of AI Coding Tools》,作者是Mert Demirer、Leon Musolff和Liyuan Yang,编号NBER Working Paper 35275。第一版2026年5月出炉,PDF在9月修订。

作者把2020年1月至2026年5月的公开GitHub数据,与微软内部关于GitHub Copilot使用情况的遥测数据合并,用匹配事件研究法,把每个采用工具的开发者,与一年前同一周活跃度相近的开发者做对比。

论文摘要的原话是:240%的累计效应,落到项目数量上降到80%,落到实际发布上降到30%。需要说明的是,+240%换算下来是基线的3.4倍,"三倍"是算术换算,不是论文的用词。

30%这个数字还有一处口径问题。论文的明细表没有给出自主智能体单独的发布数字,因为发布"无法拆分为智能体撰写和人类撰写的部分"。单看交互式智能体,发布量上涨19.8%。

多出来的240%去了哪

论文检验了两种解释。一种是范围:也许每次发布的内容变大了。另一种是试验:开发者在成本低的阶段启动更多工作,其中很多永远走不到终点。作者的结论是,范围"只占很小一部分",落差的大部分"反映的是试验"。

论文也点名了限制代码向上流动的人类环节:跨文件整合改动、审查和合并拉取请求、管理发布,以及质量控制和发布容量。审查在这份清单上,但只是其中一项。

拉取请求这一层把堆积显示得很清楚。交互式智能体让拉取请求上涨86%,发布只涨约20%,进入审查的改动多于以发布形式离开的改动。自主智能体让拉取请求上涨68.5%,略高于提交量的60.7%,论文没有给出可对比的单独发布数字。

Christian Bird在《Why aren't we shipping faster now?》这场基于访谈和问卷的演讲里追问的,正是写代码和发版之间这道口子为什么这么宽。他在Hacker News的讨论中澄清,他的观点并不是团队没有比以前发得更快。

代码卡住的六个位置

  • 被重写或删除的代码行
  • 没人合并的分支
  • 审查队列
  • 测试与质量控制
  • 集成与协调
  • 永远发不出去的发布和项目

采用交互式智能体后,样本中的开发者新增代码行数是原来的7.0倍,删除行数则是12.2倍。大量生成代码是草稿材料,随后被替换掉。作者在这里很谨慎:被放弃的工作不一定质量低,试三个版本留一个可以是正常做法。代价出现在后面——得有人分得清哪个是留下的版本,哪个是草稿。

样本中的开发者在采用交互式智能体后创建的分支多了79%,论文的说法是"探索后来常被放弃的功能"。陈旧分支创建起来便宜,理清楚却昂贵。一个带着半成品智能体改动的分支,携带着没人审查过的上下文,迟早有人要问它能不能安全合并或删除。

审查是测量最直接的堵点,数字来自NBER论文之外。哈佛的Fiona Chen和James Stratton研究了655家公司的720542名员工,论文题为《Artificial Intelligence in the Firm: Bottlenecks in Software Production》,当前版本日期为2026年11月9日。

他们的数据来自工程分析平台Jellyfish。企业采用AI智能体后,代码提交审查到获批的时间上涨56.1%,在3.56天的均值上多出1.99天。在积压中等待的时间上涨59.9%,处于实际审查中的时间上涨58.5%。

审查者每处理一个改动也更费劲。至少带一条审查评论的代码改动占比上升13.1%,每个改动的评论数上升38.6%。更早一代的AI助手,对上述指标没有显著影响。

工具还没有消掉这条队列。Chen和Stratton报告,79.1%的企业已经采用AI代码审查工具,但绝大多数审查和评论仍由人写。NBER论文引用他们的研究,称其发现企业内部"代码审查是约束条件"。

Bird的访谈给这些数字配上了人脸。一位资深工程师在访谈中说:"我们不得不审查的速度,已经远远超过我们审查的能力。"

质量控制同样受限于人的容量。Bird和同事在《(When) Should a Software Factory be Lights-off?》中用真实缺陷评测审查智能体,包含1000个开源审查任务,外加某家公司私有仓库的800个任务。

最好的智能体配置在其前五条评论中抓到了71.9%的已知缺陷,五个月前这个数字是47.7%。在私有仓库上、在需要超出代码差异进行推理的缺陷上,表现出现下滑。作者的结论是,"熄灯"运行只适合"范围狭窄、后果轻微的拉取请求"。

不同人和不同智能体写出的代码,仍然要拼到一起。Bird的演讲引用了30场访谈,来自一篇仍在投稿中的论文。一位参与者的说法很到位:"如果过去做一个功能要一年,现在一个月就能做完,某种意义上,一年的协作量得在那一个月里发生。"

另一位管理着几十年历史产品的参与者描述:"我管理之下的代码,正在被我从没听说过的人改动,我根本没被拉进那个PR。"打字速度压缩了,协调并不会跟着压缩。

在最末端,论文追踪了项目。首月之后毫无活动的新仓库占比,从2021年的60%升到2026年的69%。更多想法开了头,更大比例早早停住。作者还看了四个软件市场,发现"新应用数量急剧增加,但总使用量没有增加"。Bird的受访者描述了同一种拖拽感:"就算你一天能把代码写完,离真正部署上线还是得谈30天。"

这些数字也有边界。NBER的样本是带Copilot遥测的开发者公开GitHub活动,"发布"指GitHub发布计数,不是生产部署。两篇都是工作论文。企业层面的智能体提交效应估计,包括Chen和Stratton的,都小于NBER的开源估计,NBER作者认为差距可能反映组织惯性。两篇论文都没有评估任何具体的审查产品,也没有说单一解法能填上这道口子。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
1987年,邓小平在众目昭彰下,猛地指向刘华清和洪学智,大声追问杨尚昆:命令究竟有没有下达

1987年,邓小平在众目昭彰下,猛地指向刘华清和洪学智,大声追问杨尚昆:命令究竟有没有下达

唠叨说历史
2026-11-11 13:38:14
比穷更可怕!农村“新四害”疯狂蔓延,害苦无数家庭

比穷更可怕!农村“新四害”疯狂蔓延,害苦无数家庭

笑熬浆糊111
2026-09-29 09:15:18
博物馆展品清代“扬州八怪”汪士慎画作疑似现代仿品?工作人员回应:实为工艺品,因工作失误错误地标注为清代,已修改

博物馆展品清代“扬州八怪”汪士慎画作疑似现代仿品?工作人员回应:实为工艺品,因工作失误错误地标注为清代,已修改

极目新闻
2026-11-13 18:19:58
我感觉其实不用再猜了,万斯大概率就是下一届美国总统。真要是他入主白宫,首当其冲的就是中国

我感觉其实不用再猜了,万斯大概率就是下一届美国总统。真要是他入主白宫,首当其冲的就是中国

扶苏聊历史
2026-10-26 17:56:12
34%关税只是幌子,中国真正的目标是台湾!剑指美国“军工企业”

34%关税只是幌子,中国真正的目标是台湾!剑指美国“军工企业”

文史道
2025-04-05 12:29:24
听说两种药混吃能“上头”,一对男女KTV饮酒后从两家药店买药,在酒店各吃下23颗,当天男子死亡……妻子起诉多方索赔百万元,法院:驳回

听说两种药混吃能“上头”,一对男女KTV饮酒后从两家药店买药,在酒店各吃下23颗,当天男子死亡……妻子起诉多方索赔百万元,法院:驳回

都市快报橙柿互动
2026-11-14 02:43:07
听了30年相声,说句得罪人的实话:姜昆和郭德纲,中后期都退步了

听了30年相声,说句得罪人的实话:姜昆和郭德纲,中后期都退步了

阿废冷眼观察所
2026-11-13 08:34:01
1955 年授衔名单传到海外,英国元帅蒙哥马利骤然起身,吃惊问副官:除了彭德怀,还有九位元帅?朝鲜三年到底在和什么样的对手交战

1955 年授衔名单传到海外,英国元帅蒙哥马利骤然起身,吃惊问副官:除了彭德怀,还有九位元帅?朝鲜三年到底在和什么样的对手交战

磊子讲史
2026-11-13 18:30:05
“早该炸掉”?让西安人民痛恨的三门峡大坝,到底壮举还是败笔?

“早该炸掉”?让西安人民痛恨的三门峡大坝,到底壮举还是败笔?

混沌录
2026-11-13 23:00:12
注意!宁波交警全域严查

注意!宁波交警全域严查

象山发布
2026-11-13 17:32:33
“志短比人穷可怕多了!”小男孩抱紧茅台不撒手,网友:丢的全是父母的脸

“志短比人穷可怕多了!”小男孩抱紧茅台不撒手,网友:丢的全是父母的脸

妍妍教育日记
2026-10-20 13:38:53
华为轮值董事长罕见在美国《时代》杂志刊文

华为轮值董事长罕见在美国《时代》杂志刊文

观察者网
2026-11-13 19:08:02
“沈阳北站”灯不亮?刘克斌回复了

“沈阳北站”灯不亮?刘克斌回复了

沈阳公交网小林
2026-11-13 03:24:31
600715,股价翻倍!逾172亿元资金,流入这一板块

600715,股价翻倍!逾172亿元资金,流入这一板块

证券时报
2026-11-13 17:32:06
两名50多岁科室主任,为争抢20岁小护士大打出手,一人被打进ICU

两名50多岁科室主任,为争抢20岁小护士大打出手,一人被打进ICU

四海神君
2026-11-02 21:00:07
国内金饰价格集体下跌

国内金饰价格集体下跌

北青网-北京青年报
2026-11-13 08:07:07
美媒突然表示:中国大批歼-16突然服役,距离核潜艇基仅几百公里,敌军战机无法靠近,西方没想到速度这么快

美媒突然表示:中国大批歼-16突然服役,距离核潜艇基仅几百公里,敌军战机无法靠近,西方没想到速度这么快

绝对军评
2026-11-10 10:16:11
《谷雨》大结局:欧阳煦赢了,8人下场各异,第9把伞没上棋盘

《谷雨》大结局:欧阳煦赢了,8人下场各异,第9把伞没上棋盘

天玑影视说
2026-11-13 20:53:47
欠薪400万,厂里人去楼空,创始人玩消失,中国饮料巨头破产了?

欠薪400万,厂里人去楼空,创始人玩消失,中国饮料巨头破产了?

梦史
2026-07-16 22:06:54
69岁张瑜将上亿资产,上海江景大平层、北京四合院全都转给外甥,一句我蛮可怜的,格外戳人心

69岁张瑜将上亿资产,上海江景大平层、北京四合院全都转给外甥,一句我蛮可怜的,格外戳人心

背包旅行
2026-09-07 14:55:30
2026-11-14 04:20:49
Ping值焦虑
Ping值焦虑
有态度网友ytd
240文章数 112关注度
往期回顾 全部

科技要闻

黄仁勋辞职,马斯克们抱不平!

头条要闻

媒体:出轨的巨头很多 只有黄仁勋犯了大忌"非走不可"

头条要闻

媒体:出轨的巨头很多 只有黄仁勋犯了大忌"非走不可"

体育要闻

坎宁安52分:肯吃苦的人就有吃不完的苦

娱乐要闻

陈晓楠对话厉娜和许飞引全网热议

财经要闻

黄仁勋和英伟达的6大难题还在后头

汽车要闻

原厂宽体 2027款领克03家族上市限时10.38万起

态度原创

教育
时尚
手机
数码
军事航空

教育要闻

华师上新啦!这次不止有花海!

算不懂双十一,是数学不好,还是你太单纯?

手机要闻

华为新旗舰真机曝光,本月多款手机新品你期待哪款?

数码要闻

成本推动价格修复 大尺寸面板12月有望小幅涨价

军事要闻

普京拒绝外国军队驻扎乌克兰

无障碍浏览 进入关怀版