网易首页 > 网易号 > 正文 申请入驻

监控说“坏了”,然后呢?一次实时运维知识连接的落地实验

0
分享至

几乎每个技术团队迟早都会撞上同一堵墙。监控系统会告诉你某些东西出了问题,然后它的价值就停在那里了。错误率上升了,响应延迟出现了,请求失败量在爬坡,这些数据你都能看到。但在故障期间真正关键的那几个问题,往往找不到答案。谁拥有这个服务?它的上下游依赖是什么?对应的标准作业流程手册在哪儿?我应该用哪个即时通讯频道上报?当前情况是一次真实宕机,还是一种已知的故障模式?

这些信息断层,就是这次做了一个小型主动式可观测性演示的直接原因。搭了一个精简的购物应用,用开放遥测协议完成了埋点,把远程遥测数据发送给了 Dynatrace,然后把 Port 当作上下文信息层,将运行信号与工程团队知识串联了起来。最后出来的故障排查流程,远比原来盯着仪表盘靠猜要顺畅得多。你可以直接问系统现在发生了什么,然后在一处同时拿到实时健康数据和团队约定好的上下文信息,比如谁是负责人、应急预案在哪里。


整个技术搭建刻意保持在小规模,但问题映射感很强,对应到真实系统里那种一团乱麻的状态非常到位。应用里包含了商品展示、购物车、结账流程,还预置了几种故障场景,让可观测性这套能力有实际的事件可以捕捉和暴露。

过去可观测性的强项集中在检测环节。它可以说清楚哪个服务状态不正常,响应时间在拉长,或是失败率在持续上升,这当然有它的价值。但事件响应的过程里,检测只能算起点,磨合和消耗紧接着就开始了。需要知道是哪个团队在负责这个服务。需要搞清楚服务的分级,是不是直接关系到核心业务。需要理解上游和下游的依赖关系。需要找到对应的操作手册。需要知道怎么联系能够恢复服务的人。需要累积足够多的前提信息,才能判断当前这个异常是意料之中的波动、人为误操作造成的连带影响,还是只是一次压测。

这也正是主动式可观测性开始显得有意思的地方。想做的不再只是源源不断地收集遥测数据,而是想办法让这些遥测数据变得可以操作,通过把它们和系统周围已经存在的运行框架、团队分工信息关联起来,让原始信号多出一层现实指向。自动化不是终点,可行动的上下文才是。

在架构选型上有意保持精简,总共只涉及三个主要组成模块,但这三者的组合创造出的使用流程,比任何单一工具所能提供的都要扎实得多。一个基于 Flask 的购物应用,负责模拟贴近真实的用户行为和故障触发。Dynatrace 用来接收链路追踪数据,分析服务健康度、延迟趋势、日志和错误分布。Port 承担上下文层的角色,存储服务归属、重要等级、应急预案、即时通讯频道以及相应元数据。

把可观测平台和上下文层粘合在一起的关键连接点,是 Port 里的模型上下文协议连接器。通过这个连接器接入了 Dynatrace 的模型上下文协议服务器,Port 就能在读取实时监控数据的同时,持续将体验锚定在工程上下文中。这一步组合,基本就是这个版本的主动式可观测性的核心逻辑。Dynatrace 掌握着系统当前正在发生什么,Port 掌握着系统应该如何被理解和处置,连接建立之后,两个世界的信息不再割裂运行。

在这个小而完整的演示环境里,排查路径发生了实质变化。不需要在监控系统和文档之间反复切换,然后靠经验去缝合线索。一个自然语言的问题就能同时带出两种维度的回应:当前这个服务的延迟是不是在持续恶化,它的处理手册在哪里,谁在线,影响的是哪些下游服务。这种回应方式更接近事件发生时实际想要的人机协作状态,而不是继续在沉默的告警页面上独自完成推理闭环。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
台岛以东日菲擅自划界,我海警前出维权台当局“炸毛”

台岛以东日菲擅自划界,我海警前出维权台当局“炸毛”

观察者网
2026-06-02 22:17:06
一根管道测出三方红线:俄罗斯耗不起,中国不松口,蒙古还在幻想

一根管道测出三方红线:俄罗斯耗不起,中国不松口,蒙古还在幻想

卷史
2026-06-02 23:46:39
重大外交挫折:卡塔尔拒绝给120亿美元,伊朗谈判底牌被当场按住

重大外交挫折:卡塔尔拒绝给120亿美元,伊朗谈判底牌被当场按住

流史岁月
2026-06-02 17:10:03
辽宁舰现身西太,美日心理受冲击

辽宁舰现身西太,美日心理受冲击

风铃草语
2026-06-02 06:52:51
演员朱珠疑似塌房?照片流出,惊呆网友!

演员朱珠疑似塌房?照片流出,惊呆网友!

大眼妹妹
2025-12-15 10:39:19
专家预警:明后年这4样东西将持续大跌,现在千万别急着入手!

专家预警:明后年这4样东西将持续大跌,现在千万别急着入手!

音乐时光的娱乐
2026-06-03 00:57:43
皇马球迷气炸!姆巴佩两年四大皆空,还逼老佛爷签自己好兄弟

皇马球迷气炸!姆巴佩两年四大皆空,还逼老佛爷签自己好兄弟

奶盖熊本熊
2026-06-03 04:15:18
性学专家说:男人一定要记住,女人,她爱不爱你,根本不用去试探

性学专家说:男人一定要记住,女人,她爱不爱你,根本不用去试探

伊人河畔
2026-03-03 10:47:05
台湾42岁老师性侵6年级小学生,4个月9次 生下一孩,判17年仍不服

台湾42岁老师性侵6年级小学生,4个月9次 生下一孩,判17年仍不服

墨策史
2026-06-01 01:30:05
五年之差:为什么巴菲特“浪费”时间,恰恰证明了投资的唯一真理

五年之差:为什么巴菲特“浪费”时间,恰恰证明了投资的唯一真理

格上理财网
2026-02-14 20:53:15
美伊临时停火以来 最戏剧化的一天

美伊临时停火以来 最戏剧化的一天

看看新闻Knews
2026-06-02 18:32:59
姚明恩师离世!名帅阿德尔曼去世享年79岁:曾率火箭打出22连胜

姚明恩师离世!名帅阿德尔曼去世享年79岁:曾率火箭打出22连胜

罗说NBA
2026-06-02 06:54:26
我年终奖八千助理拿八十万,女总裁亲自续约,我摆摆手说不用了

我年终奖八千助理拿八十万,女总裁亲自续约,我摆摆手说不用了

千秋文化
2026-05-15 19:51:05
A股:刚刚,中央一部门发布,释放三个信号,周三将迎来新变盘?

A股:刚刚,中央一部门发布,释放三个信号,周三将迎来新变盘?

云鹏叙事
2026-06-03 00:00:07
28只基金6月1日净值增长超5%,最高回报7.75%

28只基金6月1日净值增长超5%,最高回报7.75%

证券时报
2026-06-02 09:34:03
沉默45年,中国终于迎来第二轮“严打”!目标改变总体战正式打响

沉默45年,中国终于迎来第二轮“严打”!目标改变总体战正式打响

闻识
2026-05-04 08:59:03
第九届数字中国建设峰会,走进中国移动展区,提前看见未来生活

第九届数字中国建设峰会,走进中国移动展区,提前看见未来生活

网易科技态度见闻
2026-05-04 09:00:18
日本人在美网探问:如果日本再次侵略中国,中国人会不会害怕?

日本人在美网探问:如果日本再次侵略中国,中国人会不会害怕?

深析古今
2026-05-31 14:13:27
政变只是一个开始,伊朗要变天了,中国最担心的事情,恐将发生

政变只是一个开始,伊朗要变天了,中国最担心的事情,恐将发生

墨羽怪谈
2026-04-14 09:39:31
「生男生女不随机」,再添新证!哈佛连发两篇:母亲孕前压力大,生男孩的概率跌13%;29岁后生育,后代“性别扎堆”概率高13%

「生男生女不随机」,再添新证!哈佛连发两篇:母亲孕前压力大,生男孩的概率跌13%;29岁后生育,后代“性别扎堆”概率高13%

梅斯医学
2026-06-01 07:55:21
2026-06-03 04:40:49
报错免疫体
报错免疫体
一名在需求评审和数据异常中反复横跳的产品运营。
4525文章数 33关注度
往期回顾 全部

科技要闻

烧掉千亿后,美团、阿里、京东谁先止血?

头条要闻

演员魏宗万去世 曾在94版《三国演义》中饰演"司马懿"

头条要闻

演员魏宗万去世 曾在94版《三国演义》中饰演"司马懿"

体育要闻

1米74的业余联赛替补,在英超踢中卫

娱乐要闻

奚梦瑶何猷君补办婚礼超幸福

财经要闻

智元和宇树的“暗战”愈演愈烈

汽车要闻

星途神秘新车轮廓曝光 又一款性能SUV要来了?

态度原创

时尚
旅游
本地
数码
艺术

蓝色系下装看着清爽不闷,裤子、裙子都凉快,随便穿都不出错

旅游要闻

北京位列全球数字旅游引领型城市榜首

本地新闻

用剪纸的方式,打开江苏扬州

数码要闻

HPB散热加持!三星HBM5预计2028年实现量产

艺术要闻

抖音砸60个亿,要盖一座“不像医院”的医院?

无障碍浏览 进入关怀版