网易首页 > 网易号 > 正文 申请入驻

出了几次事故后,我们把全公司的中间件拆了

0
分享至

当初下决心封装,是被痛醒的甜头没吃几个月,账单就开始上门干这活的人,才是最委屈的我们的完整轮回:封装、膨胀、事故、拆分什么阶段做什么事,一张表说清五条掏心窝的话,替你省几场通宵写在最后

凌晨十二点半,公司大群突然弹出一条消息:「统一中间件出问题了,所有业务线暂停发布,等回滚通知。」那一晚,好几个团队的工程师同时从被窝里爬起来开电脑。问题不在任何一条业务代码上,而是出在那层谁都离不开、平时又没人多看一眼的「公共中间件」上。

我在这件事里从头熬到尾,也算把公司封装中间件的完整轮回亲眼看了一遍:从咬牙抽人封装,到越包越厚,再到几场事故之后亲手把一部分拆掉。今天把这段经历摊开讲,给同样在纠结「要不要封装中间件」的你,省下几场通宵。

公司还只有一条业务线的时候,日子其实挺好过。十来个人,各服务直接对接第三方 SDK,写法五花八门也无所谓,出了问题吼一嗓子就有人应。

变化是随着业务线一条条多起来发生的。同样是接一个短信服务,A 团队一套写法,B 团队另一套,日志格式、异常处理、重试策略全都对不上。真出了问题,光把各家代码翻一遍就得半天。

于是我们抽了人做统一封装,效果立竿见影:新人入职看一个示例就能接入,不用再啃几十页的官方文档;第三方爆出安全漏洞,中间件修一次、大家升个版本就完事;所有调用走统一入口,加个埋点就能看清调用量、成功率、平均耗时,限流熔断也能在同一层配置。连省钱都顺带了——短信通道对接好几家供应商,哪家便宜切哪家。



第一个坑是升级。你可能只是修了个小 Bug、改了一行代码,但这一行影响的是几百个服务。你得挨个业务线去协调:一起升级、一起测试、一起发布。但凡有一个团队正在赶需求排不进来,这版就推不下去;推不下去,那个漏洞就一直悬在头顶。

第二个坑是瓶颈。用户中心、权限服务、消息中心这些处在链路核心位置的中间服务,几乎所有服务都要调它们。有一次中间服务的数据库查询慢了 200 毫秒,结果全链路跟着超时,各业务线互相踩踏,像雪崩一样倒了一大片。

第三个坑最致命:中间件团队自以为改了个很小的逻辑,测试环境也跑通了,上线后一个没覆盖到的边界条件直接把所有依赖方拖下水。修复的时候要同时安排几百个服务的回滚或升级,那种感觉,就像给几百辆高速行驶的车同时换轮胎,车还不能停。

还有两个不那么显眼但同样磨人的问题。一是过度封装:业务方提一个特殊需求就加一个参数,加着加着,自己那层比官方 SDK 还厚,最后人家干脆绕开你直接用原生的。二是排查变难了:出了 Bug,业务方查到中间件那层就断了,得换中间件团队接手,再往下又是第三方 SDK,一来一回好几个团队陪着一个 Bug 转,加上层层代理和切面,堆栈信息看得人一头雾水。

上面这些坑,大公司人多资源多还能扛,小公司就更难了——通常没有专职的中间件团队,就是一个技术不错的人兼着:白天写自己的业务需求,晚上维护中间件,精力根本不够用。

更扎心的是这活的价值感。中间件做得好,没人夸你,一句「这不是应该的嘛」就打发了;出了问题,全公司都在问「怎么又崩了」。到了绩效季更尴尬,你维护的东西不直接产出业务功能,成绩根本没法写。

还有一个慢性炸弹:当初封装的那个人一旦离职,接手的人大概率不敢动那块代码。时间一长,它就成了一个谁都不敢碰的黑盒,只敢往上堆功能,越堆越臃肿,越臃肿越没人敢动。

复盘我们走过的路,基本就是一部中间件的兴衰史。

最早只有一条业务线,不封装是对的;后来业务线多了,同一个短信服务三套对接代码,有的服务还在用两年前的 SDK 版本,已知漏洞都没人知道——这个阶段抽人统一封装,也是对的。

问题出在后半段。服务数量滚起来之后,中间服务先扛不住,高峰期响应明显变慢;紧接着几次升级引入 Bug,几百个服务陪着回滚,业务线对中间件的信任就这么崩了。大家嘴上不说,行动上已经在「用脚投票」——有团队悄悄绕开中间件,直接接原生 SDK。

那之后我们开始「去中间件」。不是一刀切全拆,而是回归理性:SDK 类不再深度封装,官方的已经够好用,我们把精力挪到真正需要统一的地方——密钥集中管理、环境配置隔离;中间服务能并回业务线的就并回去,减少不必要的网络调用;只保留网关、认证中心这些真正值得独立部署的,重点砸资源做好高可用和降级。

这轮做完,调用链路明显变短,性能上来了,更要紧的是故障影响面小了——一个服务出问题,不再拖垮一大片。业务线拿回了自主权,迭代速度也跟着回来了。



• 封装不要太早。服务少、人少的时候,沟通成本远低于维护成本,硬封装是给自己找事。

  • • 封装不要太厚。做一层薄薄的门面,把密钥、配置、监控这些真正该统一的东西管住,底层能力尽量透传,别想着把官方 SDK 重新发明一遍。
  • • 没有人兜底,就别封装。中间件不是写完就结束,它需要有人长期扛。团队里没有那个技术过硬又愿意长期负责的人,宁可不做。
  • • 保留逃生通道。任何中间件都得有降级方案,它挂了业务方要能降级处理,不能全线陪着瘫痪。
  • • 灰度是生命线。中间件的任何变更,先在非核心服务上跑一段时间,指标没问题再推全量。「一夜之间全公司升级」这种事,一次都别干。

封装、膨胀、出事故、拆分、再封装——这个轮回本身不是失败,它是技术组织长身体的正常过程。要紧的是每一轮都比上一轮清醒一点:封装适度、组织匹配、容灾到位。与其追求大而全的统一平台,不如做小而美的薄封装加配置管控,把选择权还给业务线。

说到底,最好的中间件,是让你感觉不到它存在的那种。

你所在的公司有没有那种「祖传中间件」——没人敢动、又谁都在用?你在封装和拆分之间踩过什么坑?评论区聊聊,让后来人少熬几个通宵。

声明:内容由AI生成

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
林诗栋又捅马蜂窝?发微博不敢提男单夺冠,却替队长总结男团丢冠

林诗栋又捅马蜂窝?发微博不敢提男单夺冠,却替队长总结男团丢冠

三十年莱斯特城球迷
2026-09-30 15:27:59
人人增收!农业农村部重磅宣告:农村房屋可出租,宅基地盘活了!

人人增收!农业农村部重磅宣告:农村房屋可出租,宅基地盘活了!

影孖看世界
2026-09-30 21:59:36
热苏斯:我和C罗约好首战后休两场,热身太久没上他生我气了

热苏斯:我和C罗约好首战后休两场,热身太久没上他生我气了

懂球帝
2026-10-01 03:04:06
这4种病一得,生命就进入倒计时?医生:千万别低估体检的重要性

这4种病一得,生命就进入倒计时?医生:千万别低估体检的重要性

健康科普365
2026-09-29 09:27:23
闹大了!官媒点评饭圈批邓亚萍“不懂球”,知名作家怒斥饭圈无知

闹大了!官媒点评饭圈批邓亚萍“不懂球”,知名作家怒斥饭圈无知

吴蒂旅行ing
2026-10-01 16:04:03
2699元,小米把晾衣机做成了半封闭烘干房

2699元,小米把晾衣机做成了半封闭烘干房

固件更新中
2026-09-30 05:09:20
为什么空姐下跪事件折射出服务生态之困?

为什么空姐下跪事件折射出服务生态之困?

风铃草语
2026-10-01 08:02:38
荒谬至极!台湾岛内流传“共产党要感谢日本人”

荒谬至极!台湾岛内流传“共产党要感谢日本人”

海峡导报社
2026-09-30 07:50:03
子女有以下习惯,大多不会孝顺,父母要给自己留后路

子女有以下习惯,大多不会孝顺,父母要给自己留后路

艺鉴在线
2026-09-21 05:27:48
拍出这张照片的人就是天才!网友:不得不佩服

拍出这张照片的人就是天才!网友:不得不佩服

摄影技巧入门教程
2026-09-18 16:18:32
邻居6年每天往我家门口扔垃圾,我没理会,卖房后她愣了:你别走

邻居6年每天往我家门口扔垃圾,我没理会,卖房后她愣了:你别走

温情邮局
2025-07-15 11:57:58
刘嘉玲不雅照引爆全港!回溯90年被绑内幕,那晚她究竟受了啥罪?

刘嘉玲不雅照引爆全港!回溯90年被绑内幕,那晚她究竟受了啥罪?

离离言几许
2026-09-08 00:18:07
铝代铜的狂飙 电车的定时炸弹

铝代铜的狂飙 电车的定时炸弹

铁流1988
2026-09-26 05:08:17
你所不知道的蔡元培:是蒋介石发动“四一二”政变的马前卒

你所不知道的蔡元培:是蒋介石发动“四一二”政变的马前卒

阿胡
2025-09-28 16:53:12
斯瓦泰克亮相北京郡王府,亲临Tecnifibre品牌日!

斯瓦泰克亮相北京郡王府,亲临Tecnifibre品牌日!

全网球APP
2026-09-30 20:35:27
夺冠仅6天,迎1大噩耗!全家为日本效力的张本智和,终究自食恶果

夺冠仅6天,迎1大噩耗!全家为日本效力的张本智和,终究自食恶果

阿讯说天下
2026-10-01 04:14:27
本田新车上市:18.48万起,价格有点香啊

本田新车上市:18.48万起,价格有点香啊

科技堡垒
2026-09-29 10:23:08
黑龙江富豪惨遭灭门,保姆装死逃过一劫,保姆:凶手怎么会是他?

黑龙江富豪惨遭灭门,保姆装死逃过一劫,保姆:凶手怎么会是他?

林林故事揭秘
2025-04-10 17:37:49
女人在车里偷情,会是怎样的感受呢?

女人在车里偷情,会是怎样的感受呢?

思絮情感
2026-09-30 15:26:51
现在轮到银行发愁!越来越多的储户,都主动把存款分散到不同银行

现在轮到银行发愁!越来越多的储户,都主动把存款分散到不同银行

三农老历
2026-10-01 17:25:41
2026-10-01 18:40:49
千纸鹤安安
千纸鹤安安
大自然的搬运工
151文章数 3关注度
往期回顾 全部

头条要闻

迪拜客机乘客披露救治细节:机长倒在血泊 手几乎被切断

头条要闻

迪拜客机乘客披露救治细节:机长倒在血泊 手几乎被切断

体育要闻

“今天的表现,我们可以昂首离开球场”

娱乐要闻

宋佳二封金鹰视后 内娱奖项史即将改写

财经要闻

智谱发上亿Token 能挽回开发者信任吗?

科技要闻

5999元起!华为Mate 90系列发布

汽车要闻

2027款极氪001将于明年一季度上市 现款猎装同步推新配色

态度原创

家居
健康
教育
数码
旅游

家居要闻

2026建博会(广州) 公装联探展交流活动

刷酸祛痘,为什么有人翻车?

教育要闻

已知条件如下,求途中阴影部分的面积是多少?

数码要闻

AirPods 5降噪体验:戴了一阵子,我愿称之为最强降噪TWS耳机

旅游要闻

尽显大明风华!南京明故宫地铁站成新晋打卡地

无障碍浏览 进入关怀版