使用云监控2.0页面诊断问题根因-延迟分析指南

简介: 针对一次故障的根因诊断,云监控2.0调用链分析发现异常耗时,经排查为【checkout】服务独占耗时过长,进一步分析确认其CPU使用率突增至100%,判定根因为【checkout.cpu】性能问题。

1. 输入数据

{"problem_id": "003", "time_range": "2025-08-29 10:14:20 ~ 2025-08-29 10:19:20", "candidate_root_causes": ["ad.Failure", "ad.LargeGc", "ad.memory", "ad.cpu","ad.networkLatency", "cart.Failure", "cart.cpu", "checkout.cpu", "checkout.Failure", "image-provider.cpu", "image-provider.memory", "image-provider.networkLatency", "inventory.Failure", "inventory.cpu", "inventory.memory", "inventory.networkLatency", "load-generator.cpu", "load-generator.FloodHomepage", "payment.Failure", "payment.Unreachable", "payment.cpu", "payment.memory", "payment.networkLatency", "product-catalog.Failure", "product-catalog.cpu", "product-catalog.memory", "product-catalog.networkLatency", "recommendation.CacheFailure", "recommendation.Failure", "recommendation.cpu", "recommendation.memory", "recommendation.networkLatency", "system.NodeKiller"], "alarm_rules": ["frontend_avg_rt"]}


2. 页面操作

2.1 查看错误数据

  1. 访问下面的链接进入云监控2.0调用链分析页面:
  1. 依次点击左栏应用监控、顶栏调用链分析;
  2. 将故障时段2025-08-29 10:14:20 ~ 2025-08-29 10:19:20原样复制,粘贴至页面右上角时间输入框,回车确认。在Span列表中,点击耗时排序箭头,在操作列点击详情按钮,查看耗时较长的 Span 信息:

根据文档说明,点击黑线最长的轨迹,可见自身耗时较长的调用段checkout SERVER,对应的主机名为checkout-5d79bbcb9-mvnkr

2.3 智能分析

在Trace详情页面,点击检测到异常右侧的魔棒按钮,可展开 Copilot 并向其提问:

2.4 定位性能问题

在左栏菜单点击容器洞察,悬停展开资源中心菜单,点击Pod列表:

在页面顶部点击+展开查询栏。展开 key 菜单,选定name;展开 value 菜单,选择前文出现异常的机器名checkout-5d79bbcb9-mvnkr,点击确认:

在Pod 名称列表中,悬停展开操作列表,点击眼球按钮,在弹出页面中点击打开实体:

在实体详情页面,CPU Resource栏目下点击CPU Usage图表中的同比环比按钮:

点击展开选单,选择1小时,点击查询:

对比 1 小时前的数据可发现:CPU 使用率从 24.889%显著上升至 99.287%,可视为异常。

3. 得出结论

结合调用链视图与 Copilot 分析结果,观察独占耗时高的调用段(Span)及其性能指标,可以定位故障根因系checkout出现 CPU 负载故障。

{"problem_id": "003", "root_causes": ["checkout.cpu"]}


相关文章
|
监控
使用云监控2.0页面诊断问题根因-错误分析指南
针对一次故障的根因诊断,通过云监控2.0调用链分析。
2721 0
|
9月前
|
人工智能 弹性计算 机器人
2026年阿里云SAE部署OpenClaw(Clawdbot)攻略 附快速部署步骤指南
在AI智能助理深度融入办公场景的2026年,OpenClaw(曾用名Clawdbot)凭借自主执行邮件管理、代码编写、日历调度等实际任务的能力,成为个人与企业打造专属AI助手的优选框架。阿里云Serverless应用引擎(SAE)为OpenClaw提供了一站式部署方案,依托Serverless架构的弹性伸缩、全托管免运维特性,完美适配OpenClaw的潮汐式工作负载,既保证功能完整执行,又能实现按实际使用量付费,大幅降低资源闲置成本。本文将基于阿里云官方部署指南,详细拆解SAE部署OpenClaw的全流程,包含可直接复制的代码命令、网络配置、模型对接及钉钉AI助理构建步骤,同时新增新手专属的阿
2216 1
|
运维 Kubernetes 容器
使用SPL快速诊断问题根因 -- 延迟分析指南
查找故障时段内系统异常根因。
1070 0
|
11月前
|
运维 监控 前端开发
基于AI大模型的故障诊断与根因分析落地实现
本项目基于Dify平台构建多智能体协作的AIOps故障诊断系统,融合指标、日志、链路等多源数据,通过ReAct模式实现自动化根因分析(RCA),结合MCP工具调用与分层工作流,在钉钉/企业微信中以交互式报告辅助运维,显著降低MTTD/MTTR。
8011 28
|
10月前
|
人工智能 JSON 前端开发
|
运维 监控 存储
使用SPL快速诊断问题根因 -- 错误分析指南
本内容记录了一次故障排查过程
2366 0
|
11月前
|
机器学习/深度学习 人工智能 运维
别只盯着 CPU 爆了!一篇文章带你看懂:从指标到根因的 AIOps 自动化故障定位流水线
别只盯着 CPU 爆了!一篇文章带你看懂:从指标到根因的 AIOps 自动化故障定位流水线
1007 15
|
12月前
|
Kubernetes API 开发工具
深入浅出K8S技术原理,搞懂K8S?这一篇就够了!
本文以“K8S帝国”为喻,系统解析Kubernetes核心技术原理。从声明式API、架构设计到网络、存储、安全、运维生态,深入浅出揭示其自动化编排本质,展现K8S如何成为云时代分布式操作系统的基石。(239字)
4726 8
|
人工智能 Kubernetes Perl
2025 AI 原生编程挑战赛 术语说明与FAQ
本文档介绍了天池2025比赛的相关术语和一些疑问的解答。包括云监控平台(CloudMonitor 2.0)、日志服务(SLS)、观测数据租户(Workspace)、地域(Region)等平台与入口概念,并详解了Trace、Span、Log、Metric、Event等核心数据模型及其关键字段。文档还涵盖了PromQL告警规则、SPL日志查询、Kubernetes实体层级、诊断方法论术语等内容,同时提供了根因分析的命名规范、提交格式(JSONL)、时间窗口要求及常见问题解答,旨在帮助参赛者高效定位并解决系统故障。
1637 2
|
人工智能 运维 监控
2025 AI 原生编程挑战赛 数据获取文档
本文介绍了参赛者如何配置阿里云服务以参加AI运维赛。首先开通阿里云日志服务,随后创建RAM用户并为其分配访问权限。接着为该用户授权,确保其具备读取数据的权限。最后,可选地创建或重新生成AccessKey以用于后续的数据查询操作。整个流程帮助选手完成基础环境配置,以便使用阿里云日志服务进行数据分析。
3009 2