网易首页 > 网易号 > 正文 申请入驻

一次评审说1个测试失败,重跑后变成6个

0
分享至

一次评审指出,有一个测试在动手改代码之前就已经失败了。把调用 git 的九个测试文件放进一份全新副本里重跑,失败的不是一个,是六个。另有 206 个通过,10 个被跳过。

这套测试的做法是故意把代码改坏,看测试能不能抓住。每次改坏都在项目的一份临时副本里跑,副本里有 git 跟踪的文件,但没有 .git 文件夹——有代码,没有历史。

六个测试为什么失败

这六个测试都要读 git 的输出再做判断。五个用 git show 或 git log 去读一个旧提交或文件的旧版本;一个用 git grep 列出所有调用某个函数的文件,并检查这份清单里正好有两个文件。

没有 .git 文件夹,git 什么都不打印,每个测试都把这份空输出读成了错误答案。测试套件里另一些测试在没有历史的副本里本来就会自动跳过,这六个没有。

第一次修复被评审打回

第一版修复加了一个跳过条件:git 返回非零退出码,就跳过这个测试。副本里全绿了。

随后的评审把它否了。git grep 找不到匹配时返回退出码 1,在仓库之外 git 返回 128。那个 git grep 测试存在的意义,是抓住一种回归:函数的调用方消失了。在真实仓库里,这种回归会让 git grep 什么都找不到并返回 1,测试就会跳过而不是失败。这个修复恰好藏起了测试本来要抓的失败。

第二次修复换了判断对象

跳过条件改成看环境,不看结果:只有当项目里没有 .git 文件夹时,测试才跳过。在真实仓库里,git 报错或匹配为空仍然会走到断言并失败。

另有一个新测试把这条规则钉住。它在真实仓库里伪造退出码 1 和 128,检查没有任何测试被跳过:辅助函数交回空输出,git grep 测试抛出断言错误。它还会在没有历史的副本里跑每一个调用 git 的测试文件,并期望它们在那里通过。

在副本里,整套测试跑完:4,312 个通过,18 个跳过,0 个失败,用时 4 分 45 秒。那次运行用的是第一版修复;在没有 .git 的情况下,两版修复跳过的是同一批测试。在真实仓库里,受影响的测试文件加上新测试共跑了 126 个测试,没有一个被跳过。另外手工埋了三个破坏:去掉一个跳过条件,把两个测试改回按退出码跳过。新测试在每一次都失败了。

同样的形状还有十二处

接着在套件其余部分搜索同一种写法:调用 git,然后根据它的退出码做决定。又找到十二处,分布在四个测试文件里,每一处检查的都是某条书面结论所依赖的 git 历史。

  • 九处在退出码非零时跳过。
  • 三处只在退出码为零时才跑 git 检查,于是 git 一出错,这些检查就被丢掉,测试照样通过。
  • 这十二处现在都改用文件夹检查,并对退出码做断言,而不是在退出码上分支。

第三次评审又发现一处:git 输出为空时它就跳过。它得到了同样的修复。

最初给这类问题上的锁是一张形状清单,评审不断找出它漏掉的形状:> 0、bool(...)、包住一段检查的 == 0。最后留下来的锁更笨也更硬:在每一个直接启动 git 的测试文件里,任何提到 .returncode 的 if、elif 或 while 行都会让一个测试失败。它看不见基于空输出的跳过,也看不见退出码先被复制到另一个名字的情况,这些仍然靠手工检查。

留下的规则

  • 测试在某个地方跑不了时,按环境跳过,不按结果跳过。结果分不清"没能检查"和"检查过、发现了 bug"。
  • 在把非零读成"不可用"之前,先弄清每个退出码的含义。对 git grep 来说,没有匹配就是 1。
  • 评审说一个测试失败时,把整组重跑一遍。评审说一个,实际是六个。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
此人主政中国最大省长达20年,晚年升任副主席掌权中枢,8个子女都是栋梁之才

此人主政中国最大省长达20年,晚年升任副主席掌权中枢,8个子女都是栋梁之才

磊子讲史
2026-11-18 14:30:02
红船观察丨王忠林被查,权威声音释放关键信息

红船观察丨王忠林被查,权威声音释放关键信息

红船融媒
2026-11-17 11:36:09
内蒙主持人孟静茹去世!年仅42岁,身材高挑且漂亮,老公走后半年确诊抑郁症

内蒙主持人孟静茹去世!年仅42岁,身材高挑且漂亮,老公走后半年确诊抑郁症

裕丰娱间说
2026-11-18 11:39:59
体制内近亲繁殖整治,从省级系统查到街道办

体制内近亲繁殖整治,从省级系统查到街道办

再战五百回合
2026-11-18 22:33:39
继子替我亲儿子坐牢5年,刑满释放那天我去接他,狱警愣住了:你儿子早在7个月前就被他父亲接走了

继子替我亲儿子坐牢5年,刑满释放那天我去接他,狱警愣住了:你儿子早在7个月前就被他父亲接走了

南派将军
2026-11-18 15:27:25
金正恩访问越南,乘专列耗时65时40分,为什么不坐飞机?大有讲究

金正恩访问越南,乘专列耗时65时40分,为什么不坐飞机?大有讲究

文史达观
2025-07-05 06:45:03
贺子珍始终认定朱道来是战乱之中失散的儿子,可朱道来后来坦言:过去他没有说出所有真相

贺子珍始终认定朱道来是战乱之中失散的儿子,可朱道来后来坦言:过去他没有说出所有真相

磊子讲史
2026-09-16 15:28:05
Lisa男伴舞在协助脱衣环节中失手,直接把短裤往下扯,险些造成走光

Lisa男伴舞在协助脱衣环节中失手,直接把短裤往下扯,险些造成走光

韩小娱
2026-11-16 12:15:37
57岁洛佩兹谈离婚:失望到不想起床,想死

57岁洛佩兹谈离婚:失望到不想起床,想死

热搜摘要官
2026-11-18 03:43:11
22岁女大学生嫁60岁沙特王子,每天雷打不动5次夫妻生活,陪他走过11年,临终前他却把457亿家产留初恋,她平静一笑:有个秘密我藏了11年

22岁女大学生嫁60岁沙特王子,每天雷打不动5次夫妻生活,陪他走过11年,临终前他却把457亿家产留初恋,她平静一笑:有个秘密我藏了11年

温柔记事簿
2026-11-18 19:12:38
高三男孩喀纳斯湖失踪,母亲守岸7天后直言放弃,意外竟在此时发生

高三男孩喀纳斯湖失踪,母亲守岸7天后直言放弃,意外竟在此时发生

古怪奇谈录
2025-10-16 10:53:42
不装了,沪指微涨0.09%,北向、杠杆却狂抛130亿,明天A股谎言将彻底被撕破?

不装了,沪指微涨0.09%,北向、杠杆却狂抛130亿,明天A股谎言将彻底被撕破?

财报翻译官
2026-11-18 19:36:15
这是中国最不要脸的一个群体,无耻之极,世所罕见!

这是中国最不要脸的一个群体,无耻之极,世所罕见!

晓楖科普
2026-11-11 13:09:39
麦丹准绝杀!开拓者惜败森林狼遭双杀,多苏姆30分利拉德25+5

麦丹准绝杀!开拓者惜败森林狼遭双杀,多苏姆30分利拉德25+5

湖人崛起
2026-11-18 11:38:46
1981年病重的宋庆龄对沈粹缜说想见宋美龄,宋美龄却拒绝:不必了

1981年病重的宋庆龄对沈粹缜说想见宋美龄,宋美龄却拒绝:不必了

纪实文录
2025-07-07 13:33:52
发现一个奇怪的现象:电车没有干掉油车,却干掉了汽车修理厂!

发现一个奇怪的现象:电车没有干掉油车,却干掉了汽车修理厂!

補懂事的孩紙
2026-11-17 01:00:42
世预赛36强赛分档出炉:国足第二档!日韩第一档,印尼印度第三档

世预赛36强赛分档出炉:国足第二档!日韩第一档,印尼印度第三档

念洲
2026-11-18 18:38:01
山东大师王兴夫被抓捕归案,99名女徒弟揭露内幕,真相让人意外

山东大师王兴夫被抓捕归案,99名女徒弟揭露内幕,真相让人意外

诡谲怪谈
2025-03-25 17:25:18
黄一鸣自曝:王思聪每次约她,车费都给10万,来给5万,回再给5万

黄一鸣自曝:王思聪每次约她,车费都给10万,来给5万,回再给5万

汉史趣闻
2025-06-24 10:07:59
大蒜再次被重视!研究发现:糖尿病吃一次大蒜,或等于给血糖添堵

大蒜再次被重视!研究发现:糖尿病吃一次大蒜,或等于给血糖添堵

小杨说事情
2026-11-17 16:10:03
2026-11-18 23:47:00
灰度测试中
灰度测试中
生活正在重构,目前还在灰度测试阶段,暂不全量发布。
240文章数 90关注度
往期回顾 全部

科技要闻

老黄想回来?英伟达董事会:没门

头条要闻

中国女子在希腊失踪半年 保险箱发现10万欧元现金

头条要闻

中国女子在希腊失踪半年 保险箱发现10万欧元现金

体育要闻

伪强队?拥4亿豪阵欧国联6连败+世界杯出局

娱乐要闻

陈晓楠对话厉娜和许飞引全网热议

财经要闻

10万人逼宫英伟达,黄仁勋要复职了?

汽车要闻

全新红旗H9最有意思的地方,是它开始有自己的豪华逻辑了

态度原创

游戏
时尚
家居
本地
数码

PC Gamer试玩GTA6百小时:双主角出色但任务重复

秋天衣服别总穿纯色,试试这几件条纹单品,简单时尚又减龄

家居要闻

2026建博会(广州) 公装联探展交流活动

本地新闻

乌兰察布:以前种土豆,现在种Token

数码要闻

苹果公布2026古典乐年度专辑:任奫灿《哥德堡变奏曲》获奖

无障碍浏览 进入关怀版