网易首页 > 网易号 > 正文 申请入驻

智能体跑成功了却答错了,亚马逊云科技怎么查?

0
分享至

一次执行没有报错,延迟正常,CPU 平稳,可用性满分——但智能体给出的结果是错的。它调用了不该调用的工具,检索到质量很差的信息,或者绕了一条贵得毫无必要的执行路径。传统监控指标对此一无所知。

亚马逊云科技高级专业解决方案架构师Daniel Abib指出了这个断层:对于传统应用程序,延迟、错误、CPU 和可用性等指标通常足以帮助识别运维问题;但对于 AI 智能体,技术层面的成功和业务层面的正确,是两件事。


问题出在非确定性上

智能体的行为具有非确定性。即使标准指标没有显示任何错误,提示词的变化也可能导致响应质量下降。团队需要花费数小时手动审查多个系统中的日志,却仍然无法确定发生了什么变化,也不知道变化的原因。

这正是最近推出的Amazon CloudWatch Omni想解决的问题。它被定位为一个 AI 优先的可观测性平台,目标是通过统一环境监控、评估和排查应用程序及自主 AI 智能体的问题。

具体做法是:Omni 会捕获端到端追踪数据,评估正确性、连贯性、检索效果和工具选择,并允许用户比较提示词、根据生产流量构建测试数据集、运行实验以及检测回归。换句话说,它评估的不只是系统跑没跑起来,还有智能体干得对不对。

开放标准与多框架支持

在兼容性上,Omni 支持多种智能体框架,包括 LangChain、LangGraph、CrewAI、OpenAI SDK、Strands 和 Vercel AI SDK。它采用 OpenInference 和 AWS Distro for OpenTelemetry(ADOT)等开放标准,并与 Amazon Bedrock AgentCore 集成。评估方面,它还支持 Braintrust、DeepEval 和 Ragas 等第三方评估器。

Omni 提供统一可观测性,将传统微服务、云基础设施以及生成式 AI 和智能体工作负载纳入同一个体系,提供统一视图。它原生支持 OpenTelemetry,使现有遥测数据无须复杂的重新配置即可接入。

使用体验上,它提供双工作区:运维人员可以在传统 AWS Management Console 之外,通过单点登录(SSO)使用独立的 Web 体验;开发者则可以使用免费、本地且易于使用的 IDE 扩展,该扩展同时支持 VS Code 和 Kiro。

此外,CloudWatch Omni 支持 AI 驱动的调查功能,允许用户通过自然语言查询日志、指标和追踪数据,从而识别拓扑问题并定位根本原因。

信任来自能解释

亚马逊云科技副总裁Chet Kapoor在 LinkedIn 上这样概括这款新工具:它“可以帮助你主动发现问题、追踪其根本原因,并在同一个平台中找出智能体、应用程序和基础设施的改进空间”。

亚马逊云科技前首席安全顾问Jorg Huser同样指出:“能够解释智能体为何采取某项行动的统一视图,是在大规模应用中维持信任的唯一方式。”

德意志银行 DevOps 主管工程师Florin Lungu则强调,CloudWatch Omni“支持开放标准,并提供用于质量保证的内置评估器”。

虽然 CloudWatch Omni 可能最适合运行在亚马逊云科技上的应用程序,但还有多种其他可观测性工具和平台将追踪、评估、提示词实验和数据集结合起来,重点面向智能体应用。其中包括 LangChain LangSmith、LangFuse、Arize AI Phoenix 等。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
日本声称对中方的做法绝不接受!那么问题来了,日本能有什么办法?

日本声称对中方的做法绝不接受!那么问题来了,日本能有什么办法?

扶苏聊历史
2026-10-15 17:10:08
我国这一动作,直接打欧盟七寸上,欧盟内部瞬间安静了,不简单

我国这一动作,直接打欧盟七寸上,欧盟内部瞬间安静了,不简单

DS北风
2026-10-15 11:14:07
三星堆来源之谜终于揭晓,DNA检测结果出炉,与专家推测完全一致

三星堆来源之谜终于揭晓,DNA检测结果出炉,与专家推测完全一致

趣文说娱
2026-10-14 07:12:17
20-0!27分把雷霆按在地上摩擦!火箭好像又行了!?

20-0!27分把雷霆按在地上摩擦!火箭好像又行了!?

贵圈真乱
2026-10-16 13:44:28
张国强:被前妻嫌穷,40岁二婚带子娶郭京飞旧爱,现在苦尽甘来

张国强:被前妻嫌穷,40岁二婚带子娶郭京飞旧爱,现在苦尽甘来

大眼妹妹
2026-10-16 10:08:47
51岁蒙嘉慧复出状态冲上热搜,本人回应身体发福,透露丈夫郑伊健还希望她能再瘦一点

51岁蒙嘉慧复出状态冲上热搜,本人回应身体发福,透露丈夫郑伊健还希望她能再瘦一点

动物奇奇怪怪
2026-10-14 14:46:14
不查不知道一查吓一跳,身价千万独居北京的孙颖莎,私底下有多壕

不查不知道一查吓一跳,身价千万独居北京的孙颖莎,私底下有多壕

手工制作阿歼
2026-10-16 06:57:53
仅差661分!哈登迎来神级里程碑,托马斯的纪录也保不住了

仅差661分!哈登迎来神级里程碑,托马斯的纪录也保不住了

微评体育圈
2026-10-16 10:15:27
赵少康被蓝营支持者攻击后,陈水扁发声,沈伯洋向中间选民出手了

赵少康被蓝营支持者攻击后,陈水扁发声,沈伯洋向中间选民出手了

温读史
2026-10-16 13:32:20
新机怎么就「褪色」了?红色iPhone 18 Pro被吐槽:真机惨不忍睹

新机怎么就「褪色」了?红色iPhone 18 Pro被吐槽:真机惨不忍睹

泡泡网
2026-10-15 15:43:06
曝60岁老戏骨上海独栋别墅,院子大到能踢球,炫富的毛病还是没改

曝60岁老戏骨上海独栋别墅,院子大到能踢球,炫富的毛病还是没改

山谷里的怒吼
2026-10-14 19:17:29
DeepSeek 频频崩溃真相:不是技术拉胯,免费 AI 本来就是伪命题!

DeepSeek 频频崩溃真相:不是技术拉胯,免费 AI 本来就是伪命题!

呼呼历史论
2026-10-16 04:57:41
长鑫科技,吓坏了美韩存储巨头

长鑫科技,吓坏了美韩存储巨头

凤凰网财经
2026-10-14 23:30:38
10亿铂金级肉签发行申购,发行收益高,股民中签吃大肉!

10亿铂金级肉签发行申购,发行收益高,股民中签吃大肉!

数据挖掘分析
2026-10-16 07:08:51
“不显老”的男人,多半有3个好习惯,占1个就了不起

“不显老”的男人,多半有3个好习惯,占1个就了不起

白宸侃片
2026-09-28 08:28:30
我刚交了一个女朋友23岁,我们同居后,我发现她还没有来过月经。

我刚交了一个女朋友23岁,我们同居后,我发现她还没有来过月经。

普陀动物世界
2026-09-14 12:45:29
家长晒“10岁女儿的脚”,才知道啥叫家教差距,很多人被养得太差

家长晒“10岁女儿的脚”,才知道啥叫家教差距,很多人被养得太差

番外行
2026-10-10 10:07:57
白宫前官员:梅拉尼娅厌恶特朗普,但有一个人比她更恨特朗普

白宫前官员:梅拉尼娅厌恶特朗普,但有一个人比她更恨特朗普

最美的巧合
2026-10-16 06:34:12
柴桢菜得抠脚!申花留力中超送三镇降级?球迷:刘诚宇留柬埔寨找工作吧

柴桢菜得抠脚!申花留力中超送三镇降级?球迷:刘诚宇留柬埔寨找工作吧

刀锋体育
2026-10-16 09:11:31
黄子韬已掉粉超18万

黄子韬已掉粉超18万

雷达财经
2026-10-16 11:19:31
2026-10-16 14:28:49
灰度测试中
灰度测试中
生活正在重构,目前还在灰度测试阶段,暂不全量发布。
247文章数 88关注度
往期回顾 全部

科技要闻

杨天若院士:AI是中国弯道超车的机会

头条要闻

92岁老人夺世界冠军:仅中国队参赛 走到终点都是金牌

头条要闻

92岁老人夺世界冠军:仅中国队参赛 走到终点都是金牌

体育要闻

工资一分不要,曼联名将想把母队带回西甲

娱乐要闻

徐艺洋官宣生子,完全看不出生过宝宝

财经要闻

特斯拉“飞”起来了!意向金33.2万元

汽车要闻

年轻人专属的大五座 小鹏MONA L05预售16.98万起

态度原创

手机
本地
艺术
公开课
军事航空

手机要闻

小米REDMI Turbo 6/Max手机曝光,内部代号sofia/denver

本地新闻

因新荣记出圈,这座浙东小城才是吃货天堂

艺术要闻

徐明 风景油画选

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

知情人士:乌克兰"爱国者"拦截弹库存耗尽

无障碍浏览 进入关怀版