网易首页 > 网易号 > 正文 申请入驻

谷歌测了10年发现:AI写代码快3倍,debug时间却翻倍

0
分享至


2024年,GitHub Copilot让开发者写测试的速度提升了55%。但同一批团队花在调试上的时间,同比增加了47%。

这不是某个小团队的特例。Google的内部调研覆盖了1200名工程师,Stripe的A/B测试跑了18个月,结果指向同一个反常识:我们自动化了生产,却没能自动化理解。

测试工具的三次迭代,每次都漏了同一件事

2010年代的测试框架解决的是"能不能跑"——JUnit、Selenium让自动化成为可能。2020年代初的AI代码生成解决的是"写得快不快"——Copilot、Cursor把测试生成从小时级压缩到分钟级。

但2025年的现状是:当测试失败时,开发者平均需要23分钟才能定位根因。其中14分钟花在理解"这个失败到底在说什么",只有9分钟花在真正修复。

TestNeo团队用了一个精妙的类比:现在的测试工具像一台只能拍照不能对焦的相机。快门按得再快,照片糊了还是看不清。

他们拆解了一个典型失败日志——某电商平台的登录按钮测试报错。传统输出是:"AssertionError: expected true but got false"。开发者需要手动排查:是按钮没渲染?定位器变了?还是异步加载超时?

而他们的理想输出是:"登录按钮因header组件近期CSS变更发生布局偏移,导致原定位器失效。建议更新selector至data-testid='login-btn-v2'。"

为什么"理解"比"生成"难10倍


生成测试的本质是模式匹配——AI看过足够多的类似代码,就能拼凑出合理的测试结构。但理解失败需要三层穿透:

第一层是测试层本身:断言为什么失败。第二层是应用层:UI状态、API响应、数据库变更的交叉验证。第三层是变更层:最近谁改了什么,这些改动如何传导到当前失败点。

TestNeo的解法是把这三层数据织成一张因果图。不是给开发者更多数据,而是直接给出"最可能的解释路径"。

这有点像医学诊断。发烧只是症状,医生需要区分感冒、肺炎还是免疫疾病。现在的测试工具只告诉你"体温38度",却不告诉你"为什么"。

他们展示了一个内部案例:某SaaS产品的结账流程测试间歇性失败。传统调试需要复现环境、比对日志、排查竞态条件,平均耗时4小时。而他们的系统直接关联到三天前的一次部署——支付SDK的版本升级改变了iframe的加载时序。

MCP协议没解决的,正是这个缺口

2024年底,Anthropic推出的MCP(模型上下文协议,Model Context Protocol)被寄予厚望。它让AI工具能标准化地访问外部数据——代码库、文档、运行时状态。

但MCP解决的是"AI能拿到什么数据",不是"AI怎么理解这些数据的关系"。就像给一个人图书馆的钥匙,不等于他能写出一篇论文。

TestNeo的尝试是在MCP之上加一层"语义翻译":把原始的技术信号(堆栈跟踪、DOM快照、网络请求)转化为开发者能直接行动的结论。他们不是第一个想到这点的——Applitools的视觉AI、Sentry的错误聚类都在这个方向探索。


区别在于颗粒度。视觉AI告诉你"页面看起来不一样",错误聚类告诉你"这类错误发生了127次"。但开发者真正想知道的是:"这个失败和我上周改的代码有什么关系?"

他们的早期用户反馈里有一条很典型:「以前看到测试失败会本能地烦躁,现在至少知道该骂谁。」

这个方向能走通吗?三个待验证的假设

TestNeo团队自己列出了三个风险点。第一,因果推断的准确率——误报一次,开发者就会回到手动排查的老路。第二,解释的可信度——AI给出的结论需要附带证据链,否则只是另一种黑箱。第三,集成成本——现代测试栈涉及十几种工具,每个的数据格式都是方言。

他们目前的策略是深耕Playwright生态,从浏览器自动化切入,再逐步扩展到API和移动端。这是一个务实的选择:Playwright的增长曲线陡峭,且开发者对调试痛点的感知最直接。

但竞争窗口正在收窄。GitHub、Vercel、Datadog都在测试领域加码,而"AI解释失败"这个细分赛道,2025年Q1已经出现了4家新创公司。

TestNeo的差异化可能是"产品经理念头"——创始人自己就是前Stripe的QA lead,经历过从手工测试到全自动化转型的完整周期。这种"被问题折磨过"的背景,在工具创业里往往是关键变量。

他们在官网放了一个开放问题:你的团队里,写测试和调试测试,哪个更耗时间?

这个问题本身就在筛选用户——只有真正被调试折磨过的人,才会停下来思考答案。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
钱再多也没用!41岁美女老板朱明月去世,死因曝光,家人崩溃痛哭

钱再多也没用!41岁美女老板朱明月去世,死因曝光,家人崩溃痛哭

墨印斋
2026-03-30 11:17:03
家长注意了!这些全是“假牛奶”!别再整箱往家搬了!花钱还坑娃

家长注意了!这些全是“假牛奶”!别再整箱往家搬了!花钱还坑娃

番外行
2026-03-27 10:27:39
李宗仁捐献文物,大多是假的,毛主席意味深长道:他这是投石问路

李宗仁捐献文物,大多是假的,毛主席意味深长道:他这是投石问路

浩渺青史
2026-03-31 13:52:07
美防长:特朗普将在对伊军事行动结束后就北约的未来作出决定

美防长:特朗普将在对伊军事行动结束后就北约的未来作出决定

澎湃新闻
2026-03-31 21:48:05
出狱后的雷政富沧桑感袭面而来,前后对比引人唏嘘

出狱后的雷政富沧桑感袭面而来,前后对比引人唏嘘

霹雳炮
2026-03-14 22:49:47
19岁少女被困柬埔寨遭轮奸威胁,父亲称已付两次赎金,警方已立案侦查

19岁少女被困柬埔寨遭轮奸威胁,父亲称已付两次赎金,警方已立案侦查

观威海
2026-04-01 09:47:03
出大事了,以色列做出重大转向,乌欧集体炸锅,特朗普态度成关键

出大事了,以色列做出重大转向,乌欧集体炸锅,特朗普态度成关键

梦史
2026-04-01 10:05:03
国足0-2不敌喀麦隆,范志毅犀利点评一针见血,句句切中要害!

国足0-2不敌喀麦隆,范志毅犀利点评一针见血,句句切中要害!

田先生篮球
2026-03-31 17:44:37
没想到不翻不知道,一翻吓一跳,张雪峰几乎每个月都在网上喊累

没想到不翻不知道,一翻吓一跳,张雪峰几乎每个月都在网上喊累

岁月有情1314
2026-03-26 12:13:10
7.98万元起,一汽-大众全新速腾S汽车上市

7.98万元起,一汽-大众全新速腾S汽车上市

IT之家
2026-03-31 16:44:15
北京楼市:一天卖出850套,上热榜了

北京楼市:一天卖出850套,上热榜了

北京房姐
2026-04-01 10:30:05
妻子转走我爸救命钱给男闺蜜,我申请强制执行后她满脸伤哭着回

妻子转走我爸救命钱给男闺蜜,我申请强制执行后她满脸伤哭着回

晓艾故事汇
2026-03-20 08:15:31
光纤FPV无人机:美西方搅局新工具

光纤FPV无人机:美西方搅局新工具

烽火瞭望者
2026-04-01 06:27:30
本赛季造三分犯规榜:哈登55次断层领先,鲍威尔28次位居次席

本赛季造三分犯规榜:哈登55次断层领先,鲍威尔28次位居次席

懂球帝
2026-04-01 11:30:09
毕节一副局长被曝曾公开在微博宣布自己不是中国人

毕节一副局长被曝曾公开在微博宣布自己不是中国人

映射生活的身影
2026-03-31 02:04:09
1949年北京饭店,面对百万大军南下的天量粮草,林彪做了一个决定

1949年北京饭店,面对百万大军南下的天量粮草,林彪做了一个决定

饭小妹说历史
2026-03-30 11:09:00
复仇热火!哈登历史第二,斯特鲁斯29+8,骑士让东部没有悬念了

复仇热火!哈登历史第二,斯特鲁斯29+8,骑士让东部没有悬念了

巴叔GO聊体育
2026-04-01 11:38:06
住豪宅、定居杭州,59岁茹萍,一家5口把人生过成舒服模样

住豪宅、定居杭州,59岁茹萍,一家5口把人生过成舒服模样

白面书誏
2026-03-31 14:40:03
意大利,没有世界杯的十二年和更久

意大利,没有世界杯的十二年和更久

懂球帝
2026-04-01 12:02:43
高市早苗5月底会自主辞掉首相的职位,这种判断应该是正确的。

高市早苗5月底会自主辞掉首相的职位,这种判断应该是正确的。

斜烟风起雨未
2026-03-31 08:18:51
2026-04-01 12:35:02
固件更新中
固件更新中
有态度网友ytd
978文章数 5关注度
往期回顾 全部

科技要闻

营收翻倍、巨亏31亿!中国大模型太烧钱了

头条要闻

牛弹琴:战争开始烂尾 特朗普要跑了以色列目瞪口呆

头条要闻

牛弹琴:战争开始烂尾 特朗普要跑了以色列目瞪口呆

体育要闻

美加墨梦碎!意大利连续三届无缘世界杯

娱乐要闻

宋宁峰人设崩塌!带娃偷情+反向索赔

财经要闻

电商售械三水光针 机构倒货or假货猖獗?

汽车要闻

2026年3月小米汽车交付超2万台 新SU7上市即交付

态度原创

手机
数码
艺术
健康
教育

手机要闻

别急着换手机!OPPO卓世杰明确Find X10 Ultra今年不会上市

数码要闻

有线耳机穿搭火了 手机未必配合拒绝回旋镖

艺术要闻

Alexandra Manukyan油画选刊(二)

干细胞抗衰4大误区,90%的人都中招

教育要闻

以爱为舟渡学海,以智为帆引航程——刘洪雨家教好故事

无障碍浏览 进入关怀版