网易首页 > 网易号 > 正文 申请入驻

传统监控看不出Agent错在哪,AWS这次想解决它

0
分享至

一个AI Agent跑完了任务,日志里没有报错,延迟正常,CPU也没飙。但它调错了工具,抓了一堆没用的信息,最后给出一个看起来像模像样的错误答案。传统监控体系对此一无所知。

这是AWS高级专家解决方案架构师Daniel Abib点出的核心矛盾。他说,对传统应用来说,延迟、错误率、CPU和可用性这些指标通常足以定位运维问题。但AI Agent不一样——一次执行在技术上可以完全成功,结果却是错的:用错了工具、检索到劣质信息,或者走了一条不必要的高成本路径。


更麻烦的是Agent行为的非确定性。改一句提示词,回复质量可能就下滑了,而标准指标上什么异常都看不出来。团队只能花几个小时手动翻多个系统的日志,既找不到变化点,也说不清原因。

Omni想补上哪几块拼图

最近发布的Amazon CloudWatch Omni,定位是AI优先的可观测性平台,目标是在统一环境里监控、评估和排查应用与自主AI Agent的问题。

它做的事情可以拆成几条:

  • 捕获端到端追踪,把一次Agent执行的完整链路记录下来
  • 评估正确性、连贯性、检索质量和工具选择是否合理
  • 支持提示词对比,把生产流量沉淀成测试数据集
  • 跑实验、检测回归,看改动之后表现是变好还是变差

这几项对应的正是前面那些"指标看不出来"的盲区。质量下滑、工具选错、检索拉胯,都属于执行成功但结果不对的范畴,需要靠评估和追踪来暴露,而不是靠CPU曲线。

框架、标准与第三方评估器

CloudWatch Omni支持的Agent框架包括LangChain、LangGraph、CrewAI、OpenAI SDK、Strands和Vercel AI SDK。它同时采用OpenInference和AWS Distro for OpenTelemetry(ADOT)这类开放标准,并集成Amazon Bedrock AgentCore。

评估环节上,它接入了第三方评估器,包括Braintrust、DeepEval和Ragas。这意味着团队不必只依赖平台自带的一套评判逻辑。

统一可观测性是它的另一条主线:把传统微服务、云基础设施和生成式AI/Agent工作负载放进同一个视野里。它提供原生OpenTelemetry支持,已有遥测数据可以直接接入,不需要复杂改造。

使用形态上做了双工作区设计。一个是独立Web体验,运维人员可以通过单点登录(SSO)在传统AWS管理控制台之外访问;另一个是免费的本地IDE扩展,面向开发者,同时支持VS Code和Kiro。

此外还有AI驱动的调查能力,用户可以用自然语言查询日志、指标和追踪数据,用来识别拓扑问题、定位根因。

三位从业者怎么看

AWS副总裁Chet Kapoor在LinkedIn上总结这个新工具时说,它"帮助你主动发现问题,追踪到根因,并在一个地方识别出你的Agent、应用和基础设施的改进点"。

前AWS首席安全顾问Jorg Huser的观点更直接:"一个能解释Agent为什么那样行动的统一视图,是在规模化下保持信心的唯一方式。"

德意志银行首席DevOps工程师Florin Lungu则强调了另一点:CloudWatch Omni"支持开放标准和内置评估器,用于质量保证"。

它不是唯一的选择

对于跑在AWS上的应用,CloudWatch Omni可能是顺理成章的搭配。但把追踪、评估、提示词实验和数据集结合起来的可观测性工具和平台并不止它一个,且都聚焦于Agentic应用,其中包括LangChain LangSmith、LangFuse、Arize AI Phoenix等。

换句话说,Agent可观测性这条赛道已经挤进了不少玩家。AWS的入场方式是把这件事塞进自家云监控体系,同时用开放标准和第三方评估器降低迁移门槛——至于团队会不会为此换掉现有工具链,取决于他们有多想在一个控制台里同时看到微服务和Agent。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“家长要求女幼师扶男孩尿尿”上热搜:病态群体,把自己当人上人

“家长要求女幼师扶男孩尿尿”上热搜:病态群体,把自己当人上人

嫹笔牂牂
2026-09-30 07:04:53
仅4.97英寸,这可能是今年最有意思的手机了

仅4.97英寸,这可能是今年最有意思的手机了

刘奔跑
2026-09-29 18:04:12
权贵们绕开高考走捷径:北理工裴轶和协会 4+4 一个路数

权贵们绕开高考走捷径:北理工裴轶和协会 4+4 一个路数

放开他让wo来
2026-09-27 13:45:46
金鹰奖:于和伟获视帝,杨紫又陪跑,壹心娱乐组团拿奖,《小巷人家》奖项挂零

金鹰奖:于和伟获视帝,杨紫又陪跑,壹心娱乐组团拿奖,《小巷人家》奖项挂零

水中烧烤的娱
2026-09-30 00:00:36
顾客吐槽猫窝尺寸有问题,老板看完买家秀沉默了...网友:我真的很少站卖家这边!

顾客吐槽猫窝尺寸有问题,老板看完买家秀沉默了...网友:我真的很少站卖家这边!

铲屎官阿伟
2026-09-29 14:04:36
一个编辑器顶掉两个,我删了VS Code和Notepad++

一个编辑器顶掉两个,我删了VS Code和Notepad++

薛定谔的BUG
2026-09-29 22:37:31
演员万千惠巴黎遇盗:对方假意请求帮拍照,30秒偷走相机

演员万千惠巴黎遇盗:对方假意请求帮拍照,30秒偷走相机

观察者网
2026-09-30 07:05:53
韩国热门电影《暗杀者们》被控歪曲历史:电影以韩国前总统朴正熙的夫人陆英修遭枪击事件为素材,在政界引发争议

韩国热门电影《暗杀者们》被控歪曲历史:电影以韩国前总统朴正熙的夫人陆英修遭枪击事件为素材,在政界引发争议

台州交通广播
2026-09-29 19:26:32
北理工裴轶事件大结局:清华教授站台也没用!学校通报字字诛心

北理工裴轶事件大结局:清华教授站台也没用!学校通报字字诛心

老赵闲聊社会
2026-09-30 00:00:05
国足vs韩国首发:王钰栋搭档张玉宁!依木兰替补,CCTV5直播冲决赛

国足vs韩国首发:王钰栋搭档张玉宁!依木兰替补,CCTV5直播冲决赛

球场没跑道
2026-09-30 12:59:01
伟人这8个字,我认错了3个。您要是全读对了,眼力比我强。说正经的,认草书能靠猜意思吗?还是非得一个字一个字学?

伟人这8个字,我认错了3个。您要是全读对了,眼力比我强。说正经的,认草书能靠猜意思吗?还是非得一个字一个字学?

书画相约
2026-09-30 06:57:01
女儿失踪后,老公把院子新铺了水泥地,我却发现上面总落着一群苍蝇

女儿失踪后,老公把院子新铺了水泥地,我却发现上面总落着一群苍蝇

罪案洞察者
2025-09-13 14:15:19
大势已去?也门政府军24小时356次强攻大胜,胡塞476人伤亡

大势已去?也门政府军24小时356次强攻大胜,胡塞476人伤亡

午夜搭车a
2026-09-30 05:15:54
密密麻麻!33岁女子体内取出197枚,医生:从医以来第一次见

密密麻麻!33岁女子体内取出197枚,医生:从医以来第一次见

上海约饭局
2026-09-19 10:42:08
女性长期使用情趣用品,身体可能出现哪些不适?不少人缺乏认知

女性长期使用情趣用品,身体可能出现哪些不适?不少人缺乏认知

看世界的人
2026-08-07 09:22:50
争议?对手决胜局刚超分,丁俊晖就握手认输,观众大喊:永远支持你

争议?对手决胜局刚超分,丁俊晖就握手认输,观众大喊:永远支持你

风过乡
2026-09-30 08:45:56
知青往事:一块糖饼,一辈子难忘的温暖回忆

知青往事:一块糖饼,一辈子难忘的温暖回忆

草根情感故事茶社
2026-09-29 11:40:59
来了!苹果开启 iPhone Duo 提前预购通道,可以优先下单

来了!苹果开启 iPhone Duo 提前预购通道,可以优先下单

XCiOS俱乐部
2026-09-30 09:47:23
小红书为什么执着于线下活动?

小红书为什么执着于线下活动?

新莓daybreak
2026-09-28 19:43:13
陪睡门主角魏莹奢靡生活曝光,豪车出行、到处旅游打卡,纸醉金迷

陪睡门主角魏莹奢靡生活曝光,豪车出行、到处旅游打卡,纸醉金迷

一曲一场談
2026-08-20 15:50:26
2026-09-30 13:55:00
Ping值焦虑
Ping值焦虑
有态度网友ytd
196文章数 106关注度
往期回顾 全部

科技要闻

OpenAI凌晨大上新!新助手dots迎战Muse

头条要闻

疑妙瓦底电诈园新据点卫星图公开 建筑群迅速"繁殖"

头条要闻

疑妙瓦底电诈园新据点卫星图公开 建筑群迅速"繁殖"

体育要闻

石雨豪:亚运金牌与背后的十年

娱乐要闻

金鹰这夜,演员争辉,有惊喜,反差

财经要闻

中央财政首次贴息房贷 定向支持首套刚需

汽车要闻

5.1米大车跑云南盘山路,海狮08试驾体验超预期

态度原创

房产
亲子
家居
公开课
军事航空

房产要闻

7字头上车,不到80万买三房!海口这个大盘放出狠价!

亲子要闻

孩子以后长多高, 可以用这个公式计算!

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

伊朗最高领袖最新发声:伊朗现已变得独立、强大

无障碍浏览 进入关怀版