开发者社区> 问答> 正文

阿里云 系统磁盘总读BPS 突然增长很高,导致网站502 Bad Gateway

阿里云 系统磁盘总读BPS 突然增长很高,导致网站502 Bad Gateway

展开
收起
ponote 2017-06-01 21:48:53 27886 9
25 条回答
写回答
取消 提交回答
  • 到现在还有这问题,没有解决方案吗

    2024-06-07 16:51:18
    赞同 1 展开评论 打赏
  • image.png

    2023-12-18 14:12:55
    赞同 22 展开评论 打赏
  • 微信图片_20231017182147.png

    同问。
    刚开始按此贴网友的建议,已经禁用了 dnf-makecache 和 dnf-makecache.timer
    这两个服务。
    但是后来又出现了,业务本来就不大,出现这个运维无法跟上面交待,我们需要阿里云一个交待。

    2023-10-17 18:30:26
    赞同 40 展开评论 打赏
  • 一样遇到该问题,楼下提供的关闭自动更新可以解决

    2023-05-15 10:55:04
    赞同 22 展开评论 打赏
  • 用命令 iotop -o 查看是哪个进程io读写高 然后搜下限制io方法就可以了

    2023-03-09 23:42:33
    赞同 20 展开评论 打赏
  • 我也遇到了这个情况,处理的过程这里分享一下 1. 根据时间轴检查系统日志

     cat /var/log/messages
    

    发现如下异常日志

    Feb 20 22:41:12 ecs-for-tesla-001 systemd[1]: Starting dnf makecache...
    Feb 20 22:41:13 ecs-for-tesla-001 dnf[4229]: AnolisOS-8 - AppStream                          140 kB/s | 4.3 kB     00:00
    Feb 20 22:41:13 ecs-for-tesla-001 dnf[4229]: AnolisOS-8 - BaseOS                             350 kB/s | 4.3 kB     00:00
    Feb 20 22:41:13 ecs-for-tesla-001 dnf[4229]: AnolisOS-8 - Extras                             106 kB/s | 3.8 kB     00:00
    Feb 20 22:41:13 ecs-for-tesla-001 dnf[4229]: AnolisOS-8 - PowerTools                         113 kB/s | 4.2 kB     00:00
    Feb 20 22:41:14 ecs-for-tesla-001 dnf[4229]: Docker CE Stable - x86_64                        23 kB/s | 3.5 kB     00:00
    Feb 20 22:41:14 ecs-for-tesla-001 dnf[4229]: Extra Packages for Enterprise Linux 8 - x86_64  378 kB/s | 4.7 kB     00:00
    Feb 20 22:41:23 ecs-for-tesla-001 kernel: containerd invoked oom-killer: gfp_mask=0x6200ca(GFP_HIGHUSER_MOVABLE), order=0, oom_score_adj=-999
    Feb 20 22:43:34 ecs-for-tesla-001 kernel: CPU: 0 PID: 1761 Comm: containerd Tainted: G           OE    --------- -  - 4.18.0-372.16.1.an8_6.x86_64 #1
    Feb 20 22:46:49 ecs-for-tesla-001 kernel: Hardware name: Alibaba Cloud Alibaba Cloud ECS, BIOS 449e491 04/01/2014
    Feb 20 22:49:48 ecs-for-tesla-001 kernel: Call Trace:
    Feb 20 22:51:47 ecs-for-tesla-001 kernel: dump_stack+0x41/0x60
    Feb 20 22:58:09 ecs-for-tesla-001 kernel: dump_header+0x4a/0x1db
    Feb 20 23:05:53 ecs-for-tesla-001 kernel: oom_kill_process.cold.32+0xb/0x10
    Feb 20 23:12:21 ecs-for-tesla-001 kernel: out_of_memory+0x1bd/0x4e0
    Feb 20 23:17:59 ecs-for-tesla-001 kernel: __alloc_pages_slowpath+0xbdc/0xcc0
    Feb 20 23:23:14 ecs-for-tesla-001 kernel: ? __switch_to_asm+0x35/0x70
    Feb 20 23:29:47 ecs-for-tesla-001 kernel: __alloc_pages_nodemask+0x2db/0x310
    Feb 20 23:37:38 ecs-for-tesla-001 kernel: pagecache_get_page+0xca/0x310
    Feb 20 23:42:58 ecs-for-tesla-001 kernel: Linux version 4.18.0-372.16.1.an8_6.x86_64 (mockbuild@anolis-build-01.openanolis.cn) (gcc version 8.5.0 20210514 (Anolis 8.5.0-10.0.1) (GCC)) #1 SMP Thu Jul 14 10:28:59 CST 2022
    
    1. 猜测是dnf后台更新缓存导致磁盘IO高导致,并且看到这里应该更新导致内存不足,系统还kill掉了我的docker容器

    2. 解决方案,卸载dnf或者关闭make-cache的动作

    systemctl stop dnf-makecache.timer
    systemctl disable dnf-makecache.timer
    
    2023-02-21 07:40:41
    赞同 28 展开评论 打赏
  • 一样的问题,提了多次工单未能解决。只有重启。

    2022-12-30 11:25:59
    赞同 18 展开评论 打赏
  • 只开一个nacos镜像,一下子就读写就满了,cpu也是八九十,面板卡死,命令也没法输入,关掉服务器也是很慢,一直显示停止中

    2022-06-12 18:10:15
    赞同 21 展开评论 打赏
  • 一般是内存不够,数据会缓存到磁盘,导致磁盘读写高,升级一下配置就行了

    2022-01-19 13:57:03
    赞同 9 展开评论 打赏
  • 也是同样的情况,disk read 突然飙升,网站502,ssh也连不上,ECS控制台重启也重启不了,持续大概10分钟才恢复正常,请问有谁知道原因吗

    2022-01-05 10:40:01
    赞同 9 展开评论 打赏
  • image.png 这啥子情况,有人有解决方案吗

    2021-12-27 00:06:27
    赞同 8 展开评论 打赏
  • 我的今天也遇到这种情况。。。显示网络流量不大,没有下载大文件的可能。突然BPS就到顶了。然后所有东西都操作不了,网站也访问不了。

    2021-12-09 16:07:23
    赞同 4 展开评论 打赏
  • image.png 我这一周都要重启一次,每次找客服都是要授权去登陆搞,搞完过一段又这样。

    2021-09-15 15:19:29
    赞同 3 展开评论 打赏
  • 有解决的嘛也遇到

    2021-04-13 13:05:36
    赞同 5 展开评论 打赏
  • Re阿里云 系统磁盘总读BPS 突然增长很高,导致网站502 Bad Gateway 我也有这种问题,请问是怎么解决的

    2021-04-08 14:29:24
    赞同 6 展开评论 打赏
  • 我们昨天也出现了,效果是所有端口访问拒绝,80,443,ssh所有端口连接拒绝,重启后恢复。 服务器上只有一个nginx,只有简单的页面,没有tomcat等,没有大附件。 提了工单,没有给出具体原因。 image.png

    2021-02-19 08:59:24
    赞同 7 展开评论 打赏
  • 我的今早也出现这种问题了,持续30分钟。。。

    2021-01-01 07:41:57
    赞同 6 展开评论 打赏
  • +1

    2020-09-30 15:06:33
    赞同 5 展开评论 打赏
  • 这个到底是什么问题啊,有大神解决了吗?

    2020-03-11 17:39:56
    赞同 2 展开评论 打赏
  • Re阿里云 系统磁盘总读BPS 突然增长很高,导致网站502 Bad Gateway 有人解决这个问题么,我也出现这个问题了? 求高手破

    2020-03-09 17:57:37
    赞同 1 展开评论 打赏
滑动查看更多
问答地址:
问答排行榜
最热
最新

相关电子书

更多
基于英特尔®架构的阿里云服务网格ASM技术加速应用服务加密通 立即下载
混合云存储开启企业上云新路径---阿里云混合云备份容灾方案发布 立即下载
《TEI-阿里云专有云总体经济影响报告-final》 立即下载