AI 助理
备案控制台
开发者社区 数据库 文章 正文

线上服务假死排查

2024-04-25 60
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
日志服务 SLS，月写入数据量 50GB 1个月
简介： 线上服务假死排查

3月26号晚上9点上线之后，3月27早上服务假死，无法访问，暂时重启服务，3月29号下午3点服务再次假死，重启服务，3月30日上午8点左右查看服务假死，3月30号下午开始排查

日志查询

日志排查

通过日志分析

锁定了是这个sql导致的查询了3百万条数据，很可能就是这个问题导致服务假死

通过分析sql，知道了是脚手架内嵌的monitor检测的模块，monotor数据库有13个G的数据，

紧急解决方案就是暂时关闭monitor，清空monotor旧数据。

通过关闭日志查询，发现没有再出现过假死

加大内存，修改日志搜索范围，限制数据量，定期清理日志

设置服务自启动


文章标签：
日志服务
SQL
监控
数据库
相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
渐暖
目录
相关文章
BookSea
|
Arthas Java 测试技术
【线上问题排查】死锁和僵尸进程排查
【线上问题排查】死锁和僵尸进程排查
BookSea
217 1
开发者小助手_LS
|
SQL 监控 网络协议
线上故障如何快速排查？来看这套技巧大全
有哪些常见的线上故障？如何快速定位问题？本文详细总结工作中的经验，从服务器、Java应用、数据库、Redis、网络和业务六个层面分享线上故障排查的思路和技巧。较长，同学们可收藏后再看。
开发者小助手_LS
13201 2
线上故障如何快速排查？来看这套技巧大全
2G冲浪词条
|
3月前
|
存储 监控 Java
线上OOM排查
本文介绍了JDK工具的使用方法及其应用场景。首先详细说明了`jps`、`jstack`、`jstat`和`jmap`等工具的基本用法及参数含义，帮助开发者实时监控Java进程的状态，诊断线程问题及内存使用情况。接着介绍了`jvisualvm.exe`和`MemoryAnalyzer.exe`两款内存诊断工具，展示了如何通过这些工具进行内存分析。最后，文章提供了在线上OOM故障排查的具体步骤，并给出了解决方案示例，以便开发者更好地理解和解决实际问题。
2G冲浪词条
66 2
线上OOM排查
FeelTouchLabs
|
4月前
|
消息中间件 Java 调度
一次线上服务CPU100%的排查过程
文章记录了一次线上服务CPU使用率达到100%的排查过程，通过使用top命令和jstack工具确定了导致高CPU使用的线程，并分析了Disruptor组件的不当配置是问题原因，通过修改组件的策略成功解决了问题。
FeelTouchLabs
104 0
绿皮龟
|
7月前
|
SQL 运维 监控
如何排查线上问题的？
在当今的互联网时代，线上问题对企业的业务连续性和用户体验产生的影响越来越大。无论是网站崩溃、应用性能下降，还是服务中断，这些问题都可能对企业的声誉和用户满意度造成严重影响。因此，快速、准确地排查并解决线上问题变得至关重要。本文将介绍一些高效的线上问题排查方法，帮助您在面对线上问题时，迅速定位并解决问题。我们将在接下来的内容中详细讨论如何利用日志分析、监控系统、代码审查等手段，以及如何制定有效的应急预案。通过这些策略的实施，您将能够提高线上问题的解决速度，减少对业务的影响，并提高用户满意度。
绿皮龟
174 2
东风_
线上排查堆栈
线上排查堆栈
东风_
68 1
在下uptown
|
监控 NoSQL Java
【线上问题】服务CPU彪高排查
后端程序员出去面试经常会有面试官喜欢问你有没有排查过线上问题，遇到后怎么排查的。
在下uptown
548 0
【线上问题】服务CPU彪高排查
BookSea
|
监控 Java
【线上问题排查】CPU100%和内存100%排查
【线上问题排查】CPU100%和内存100%排查
BookSea
192 1
陈大剩
|
运维 PHP Perl
总结一些线上问题排查的命令，可能用得到！
开发运维，统计所遇到的运维问提。运维问提排查，以下场景，你可能遇到？
陈大剩
183 0
总结一些线上问题排查的命令，可能用得到！
游客gybmahbtqgs6y
|
运维 监控 NoSQL
一次线上问题排查所引发的思考
之前或多或少分享过一些内存模型、对象创建之类的内容，其实大部分人看完都是懵懵懂懂，也不知道这些的实际意义。
游客gybmahbtqgs6y
162 0

热门文章

最新文章

  • 1
    基于区块链的机器学习模型创建方案
  • 2
    性能的极致,Rust的加持,Zed-Dev编辑器快速搭建Python3.10开发环境
  • 3
    首届Global VR Hackathon完结 全球前三甲诞生
  • 4
    我的博客即将入驻“云栖社区”，诚邀技术同仁一同入驻。
  • 5
    iptables
  • 6
    DevExpress 10.2.4系列-ASPxListBox根据列值不同设置不同图标
  • 7
    jquery的load加载js页面到指定div中
  • 8
    分享平时工作中那些给力的shell命令（更新版）
  • 9
    如何在ubuntu下用SVN commit
  • 10
    hdu 1800 Flying to the Mars
  • 1
    HelloMeme：开源的面部表情与姿态迁移框架，将视频中的人物表情迁移到静态图像中生成动态视频
    102
  • 2
    VSI-Bench：李飞飞谢赛宁团队推出视觉空间智能基准测试集，旨在评估多模态大语言模型在空间认知和理解方面的能力
    32
  • 3
    CLEAR：新加坡国立大学推出线性注意力机制，使8K图像的生成速度提升6.3倍，显著减少了计算量和时间延迟
    35
  • 4
    Kheish：开源的多智能体开发框架，通过 YAML 配置工作流和多个 Agent 共同协作解决复杂任务
    41
  • 5
    Bamba-9B：基于 Mamba2 架构的仅解码语言模型，旨在提高大型语言模型在推理时的效率
    37
  • 6
    DisPose：清华北大等多所高校联合推出基于人物图像增强视频生成技术，实现对人物动画的准确控制和一致性
    43
  • 7
    InvSR：开源图像超分辨率生成模型，提升分辨率，修复老旧照片为超清图像
    41
  • 8
    Univer：开源全栈 AI 办公工具，支持 Word、Excel、PPT 等文档处理和多人实时协作
    30
  • 9
    《人工智能：驱散新材料数据噪声与填补缺失值的曙光》
    28
  • 10
    《人工智能：解锁新材料最佳掺杂元素及比例的密码》
    21

    • 相关课程

    更多
  • 线上问题排查利器 Alibaba Arthas（上）
  • 线上问题排查利器 Alibaba Arthas（下）

    • 相关电子书

    更多
  • 美团crash监控分析系统优化之路
  • 使用Arthas 抽丝剥茧深入应用-线上诊断利器之外
  • 美团 crash 监控分析系统优化之路：crash 率从千分位到万分位
    • 下一篇
    DataWorks售前咨询