AI 助理
备案控制台
开发者社区 数据库 文章 正文

线上服务假死排查

2024-04-25 47
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
日志服务 SLS，月写入数据量 50GB 1个月
简介： 线上服务假死排查

3月26号晚上9点上线之后，3月27早上服务假死，无法访问，暂时重启服务，3月29号下午3点服务再次假死，重启服务，3月30日上午8点左右查看服务假死，3月30号下午开始排查

日志查询

日志排查

通过日志分析

锁定了是这个sql导致的查询了3百万条数据，很可能就是这个问题导致服务假死

通过分析sql，知道了是脚手架内嵌的monitor检测的模块，monotor数据库有13个G的数据，

紧急解决方案就是暂时关闭monitor，清空monotor旧数据。

通过关闭日志查询，发现没有再出现过假死

加大内存，修改日志搜索范围，限制数据量，定期清理日志

设置服务自启动


文章标签：
日志服务
SQL
监控
数据库
相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
渐暖
目录
相关文章
BookSea
|
Arthas Java 测试技术
【线上问题排查】死锁和僵尸进程排查
【线上问题排查】死锁和僵尸进程排查
BookSea
202 1
开发者小助手_LS
|
SQL 监控 网络协议
线上故障如何快速排查？来看这套技巧大全
有哪些常见的线上故障？如何快速定位问题？本文详细总结工作中的经验，从服务器、Java应用、数据库、Redis、网络和业务六个层面分享线上故障排查的思路和技巧。较长，同学们可收藏后再看。
开发者小助手_LS
13025 2
线上故障如何快速排查？来看这套技巧大全
2G冲浪词条
|
2月前
|
存储 监控 Java
线上OOM排查
本文介绍了JDK工具的使用方法及其应用场景。首先详细说明了`jps`、`jstack`、`jstat`和`jmap`等工具的基本用法及参数含义，帮助开发者实时监控Java进程的状态，诊断线程问题及内存使用情况。接着介绍了`jvisualvm.exe`和`MemoryAnalyzer.exe`两款内存诊断工具，展示了如何通过这些工具进行内存分析。最后，文章提供了在线上OOM故障排查的具体步骤，并给出了解决方案示例，以便开发者更好地理解和解决实际问题。
2G冲浪词条
50 2
线上OOM排查
FeelTouchLabs
|
3月前
|
消息中间件 Java 调度
一次线上服务CPU100%的排查过程
文章记录了一次线上服务CPU使用率达到100%的排查过程，通过使用top命令和jstack工具确定了导致高CPU使用的线程，并分析了Disruptor组件的不当配置是问题原因，通过修改组件的策略成功解决了问题。
FeelTouchLabs
77 0
绿皮龟
|
6月前
|
SQL 运维 监控
如何排查线上问题的？
在当今的互联网时代，线上问题对企业的业务连续性和用户体验产生的影响越来越大。无论是网站崩溃、应用性能下降，还是服务中断，这些问题都可能对企业的声誉和用户满意度造成严重影响。因此，快速、准确地排查并解决线上问题变得至关重要。本文将介绍一些高效的线上问题排查方法，帮助您在面对线上问题时，迅速定位并解决问题。我们将在接下来的内容中详细讨论如何利用日志分析、监控系统、代码审查等手段，以及如何制定有效的应急预案。通过这些策略的实施，您将能够提高线上问题的解决速度，减少对业务的影响，并提高用户满意度。
绿皮龟
154 2
东风_
|
11月前
线上排查堆栈
线上排查堆栈
东风_
58 1
在下uptown
|
监控 NoSQL Java
【线上问题】服务CPU彪高排查
后端程序员出去面试经常会有面试官喜欢问你有没有排查过线上问题，遇到后怎么排查的。
在下uptown
537 0
【线上问题】服务CPU彪高排查
路由器没有路
|
运维 监控 前端开发
记一次线上 bug 的排查分析过程及总结
记一次线上 bug 的排查分析过程及总结
路由器没有路
349 1
记一次线上 bug 的排查分析过程及总结
陈大剩
|
运维 PHP Perl
总结一些线上问题排查的命令，可能用得到！
开发运维，统计所遇到的运维问提。运维问提排查，以下场景，你可能遇到？
陈大剩
177 0
总结一些线上问题排查的命令，可能用得到！
虚行
|
Arthas NoSQL Java
线上服务器CPU100%的真相排查【Bug利器Arthas】
这起CPU100%的事故，由某个客户演示的bug暴露出来，气氛比较尴尬....
虚行
751 0
线上服务器CPU100%的真相排查【Bug利器Arthas】

热门文章

最新文章

  • 1
    Java 生成 UUID
  • 2
    一文读懂 Serverless 的起源、发展和落地实践
  • 3
    Fiddler抓包：下载、安装及使用
  • 4
    用CodeViz绘制函数调用关系图(call graph)
  • 5
    阿里AI上岗双11服装车间，能识别头发丝直径十分之一的瑕疵
  • 6
    SpringBoot开发案例之整合Dubbo提供者(一)
  • 7
    Dubbo架构介绍
  • 8
    警惕垃圾邮件借加沙新闻进行钓鱼攻击
  • 9
    美国博客刊文发布NetApp StoreVault停产通知
  • 10
    IntelliJ IDEA 12 创建Web项目 教程 超详细版
  • 1
    通义灵码与云计算平台的融合：基础与概述
    36
  • 2
    《深度解析：死锁的“前世今生”与防范之道》
    29
  • 3
    《探秘程序崩溃：核心转储（Core Dump）分析全攻略》
    34
  • 4
    今日 AI 开源｜共 12 项｜开源的DIY健康追踪项目，基于低成本的智能戒指构建私人的健康监测应用
    37
  • 5
    Open Interpreter：AI 赋能终端！在终端中对话AI模型进行编程，通过运行代码来完成各种计算机操作任务
    31
  • 6
    「Mac畅玩鸿蒙与硬件15」鸿蒙UI组件篇5 - Slider 和 Progress 组件
    40
  • 7
    ai断点怎么做?
    16
  • 8
    AI Shell：在命令行里“对话” AI ，微软推出将 AI 助手引入命令行的 CLI 工具，打造对话式交互命令行
    19
  • 9
    ai怎么设计迷宫字体效果?
    15
  • 10
    「Mac畅玩鸿蒙与硬件14」鸿蒙UI组件篇4 - Toggle 和 Checkbox 组件
    29

    • 相关课程

    更多
  • 线上Linux服务器优化经验
  • 线上问题排查利器 Alibaba Arthas（上）
  • 线上问题排查利器 Alibaba Arthas（下）

    • 相关电子书

    更多
  • 美团crash监控分析系统优化之路
  • 手机京东Crash自动分析处理系统
  • 美团 crash 监控分析系统优化之路：crash 率从千分位到万分位
    • 下一篇
    阿里云OSS设置跨域访问