网易首页 > 网易号 > 正文 申请入驻

故障复盘不是写检讨:为什么你的团队浪费了每次崩溃

0
分享至

你的系统昨晚又挂了。凌晨三点,工程师被叫醒,手忙脚乱重启服务,监控面板终于变绿。大家松了口气,互道晚安,准备把这件事抛在脑后。

等等。这次崩溃的唯一价值,就是让你发现它——然后你就让它溜走了。


大多数团队处理故障的"急性期"还算过得去:症状被压制,服务恢复,值班表继续轮转。但真正的损失发生在事后。当疲惫的工程师关掉电脑,当产品经理催促着看新功能进度,当Slack频道里的告警记录被新消息淹没——学习的机会就这样消失了。

这不是道德问题,是机械问题。没有结构化的复盘,同样的故障会在六周后、三个月后、明年春天,以熟悉的面目再次出现。而你付出的,是又一个凌晨三点。

要解决这个问题,需要先厘清两个被混用的概念。

【Post-mortem vs RCA:不是一回事】

Post-mortem(事后复盘)是一份文档,也是一场对话。它记录时间线、响应过程、影响范围、哪些措施有效、哪些无效,以及团队承诺做出的改变。本质上,这是一件学习工具。

Root Cause Analysis(根因分析)则是复盘内部使用的一种技术——通常是"五个为什么"或其变体——用来穿透表面症状,找到让故障得以发生的底层条件。RCA是你填写复盘文档中最重要章节时使用的工具之一。

你可以只做RCA不写复盘(很多团队确实这么干,在Slack线程里草草了事,记录随即消失)。你也可以写复盘却不做真正的RCA(很多团队也这么干,最后产出"数据库挂了"这种毫无穿透力的结论,从不追问为什么)。只有两者结合,才能真正产生学习。

【"无责"不是道德姿态,是信息机制】

复盘最重要的属性是"无责"(blameless)。不是"除了这个明显案例之外无责",不是"无责但我们会记下谁值班",是完全无责。

原因在于机制,而非道德。一旦人们相信复盘可能被用来追责,信息就会干涸。工程师不再主动说明发布变更时的真实想法,运维不再承认没看懂手册。文档变成精心编织的虚构作品,优化目标是保护作者,真正的根因无人问津。

你无法修复看不清的系统。追责保证你看不清。

有效的框架来自Etsy的John Allspaw十多年前的表述:假设所有当事人在当时拥有的信息条件下,行为都是合理的。如果他们的行为导致了故障,真正有趣的问题是——什么让这种行为看起来合理?这个问题的答案几乎总是指向系统的某个方面:缺失的信号、模糊的职责边界、混乱的工具链、不足的测试覆盖——而这些才是你能真正修复的东西。

【可执行,否则等于没做】

以"团队下次会更小心"收尾的复盘,不是复盘,是被文字记录下来的情绪。

有用的复盘产出是一份具体、有负责人、可跟踪的行动清单。"当队列深度超过10000时增加告警,由平台团队负责,目标本冲刺完成"——这是行动项。"改进我们的监控"——这不是。

更好的清单会进一步区分:哪些是立即修复的止血措施,哪些是消除一类故障的预防性工作,哪些是需要长期投入的系统重构。没有这种区分,紧急事务永远会淹没重要事务。

【让复盘成为习惯,而非例外】

把复盘变成可选流程,就等于把它变成从不执行的流程。有效的团队将复盘纳入标准工作流:重大故障必须在48小时内启动复盘,文档在72小时内完成并评审,行动项进入与普通需求同等的跟踪系统。

更关键的可能是文化层面:团队领导是否会在复盘会议上首先分享自己引入的bug?是否会把"我们发现了系统盲区"作为值得庆祝的发现,而非需要遮掩的失误?

故障本身不会让你的系统更可靠。对故障的回应才会。当凌晨三点的告警再次响起,你希望团队只是疲惫地修复症状,还是在修复的同时,已经开始构思如何让下一次崩溃根本不可能发生?

选择权在你。但记住:系统不会自己变聪明,除非你从每次故障中偷走它的秘密。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
微软把grep装进Windows:命令行工具的革命还是妥协

微软把grep装进Windows:命令行工具的革命还是妥协

野生运营
2026-06-03 11:22:09
五个女博士,又翻车了!扒一扒它的“套路”和信息差

五个女博士,又翻车了!扒一扒它的“套路”和信息差

无冕财经
2026-06-03 10:04:00
太敢说了!魏建军直播直言被紧急叫停,部分汽车厂商惊出一身冷汗

太敢说了!魏建军直播直言被紧急叫停,部分汽车厂商惊出一身冷汗

火山詩话
2026-06-02 06:07:10
月薪四千养不起一场恋爱?女生收到男友9000块转账,她看备注哭了

月薪四千养不起一场恋爱?女生收到男友9000块转账,她看备注哭了

捣蛋窝
2026-06-04 05:54:56
太窒息了!1米长的五步蛇藏电瓶车挡风被下 男子开锁时被咬中虎口 医生提醒:有条件尽量留存毒蛇样貌照片

太窒息了!1米长的五步蛇藏电瓶车挡风被下 男子开锁时被咬中虎口 医生提醒:有条件尽量留存毒蛇样貌照片

闪电新闻
2026-06-03 11:54:05
创始人套现2.96亿后,蓝色光标市值蒸发了240亿

创始人套现2.96亿后,蓝色光标市值蒸发了240亿

ZAKER新闻
2026-06-04 15:24:34
局部大暴雨,广东高考期间有强对流天气

局部大暴雨,广东高考期间有强对流天气

新快报新闻
2026-06-04 15:51:45
买房最后悔的两波人:一波是2019年高价接盘,一波是2026抄底被套

买房最后悔的两波人:一波是2019年高价接盘,一波是2026抄底被套

今朝牛马
2026-06-03 21:30:38
60岁以后,存款超过这三个数,那么恭喜您,你已经超过了大多数人

60岁以后,存款超过这三个数,那么恭喜您,你已经超过了大多数人

猫叔东山再起
2026-06-04 08:55:11
拼豆,已致人死亡

拼豆,已致人死亡

一刻talks丨硬科技趣思想
2026-05-30 20:36:16
功德林降俘特赦后执意赴台,潜伏 26 年晚年揭开机要任务

功德林降俘特赦后执意赴台,潜伏 26 年晚年揭开机要任务

唠叨说历史
2026-06-01 09:52:26
检察机关依法对高兴夫涉嫌受贿案提起公诉

检察机关依法对高兴夫涉嫌受贿案提起公诉

新华社
2026-06-04 10:00:54
重磅!广州演唱会+1

重磅!广州演唱会+1

羊城攻略
2026-06-04 16:36:44
江苏千亿国资迎来70后总裁!

江苏千亿国资迎来70后总裁!

深水财经社
2026-06-04 09:34:51
奉劝所有人:退休后,跟别人关系再好,一日游、二日游都行,但千万别尝试长时间一起游,否则早晚会后悔

奉劝所有人:退休后,跟别人关系再好,一日游、二日游都行,但千万别尝试长时间一起游,否则早晚会后悔

背包旅行
2026-05-28 18:04:35
又一起吃他汀猝死!医生再三强调:夏季吃他汀的人,要警惕这4点

又一起吃他汀猝死!医生再三强调:夏季吃他汀的人,要警惕这4点

垚垚分享健康
2026-06-04 14:11:06
刚访华结束,塞尔维亚形势反转,武契奇接班人出现,对华态度曝光

刚访华结束,塞尔维亚形势反转,武契奇接班人出现,对华态度曝光

流史岁月
2026-06-04 14:24:36
少林寺原方丈被判24年,消息传到日本,反应居然是集体破防?

少林寺原方丈被判24年,消息传到日本,反应居然是集体破防?

日本物语
2026-06-03 21:09:23
逆势抗跌!10只电力低位股洗盘收官,主升浪一触即发

逆势抗跌!10只电力低位股洗盘收官,主升浪一触即发

慧眼看世界哈哈
2026-06-04 11:39:35
亚洲球员身价前10:胡桑诺夫5000万欧第1,佐野海舟4000万第2

亚洲球员身价前10:胡桑诺夫5000万欧第1,佐野海舟4000万第2

懂球帝
2026-06-03 20:33:22
2026-06-04 18:36:49
薛定谔的BUG
薛定谔的BUG
有态度网友ytd
4481文章数 57关注度
往期回顾 全部

科技要闻

历史最大IPO!马斯克下周冲击万亿富豪

头条要闻

女子花27万买的车4年后突然被扣押 交管部门:是"假车"

头条要闻

女子花27万买的车4年后突然被扣押 交管部门:是"假车"

体育要闻

欧冠决赛躺赢?他也曾是大巴黎的英雄

娱乐要闻

难怪奚梦瑶能嫁入豪门

财经要闻

SpaceX发行价135美元 6月12日上市交易

汽车要闻

北京现代5月销量强势反弹:国内17065辆 出口环比翻倍

态度原创

旅游
房产
家居
公开课
军事航空

旅游要闻

暑期出境游的玩法,已经被这届游客改写了

房产要闻

震撼!海口顶豪“素颜出境”,直接顶穿品质天花板!

家居要闻

220平对味儿家 空间情绪宅

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

美众议院要求特朗普停止对伊动武并撤军

无障碍浏览 进入关怀版