日常环境莫名宕机的处理-阿里云开发者社区

日常环境莫名宕机的处理

2019-03-07 1233

版权

本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

简介： ## 背景 11.21 早上 pd 给讲法务评审的时候，操作日常环境，莫名就 down 机了，而且 pd 反馈经常会这样。（ps : pd 反馈系统请求时间过长，性能很差，后续也会排查解决）于是排查了一下系统 down 机的原因 ## 原因查看内存 setenv.sh 设置 if [ $memTotal -le 2048 ]; then SERVICE_OPTS="${SE

背景

11.21 早上 pd 给讲法务评审的时候，操作日常环境，莫名就 down 机了，而且 pd 反馈经常会这样。（ps : pd 反馈系统请求时间过长，性能很差，后续也会排查解决）
于是排查了一下系统 down 机的原因

原因

查看内存 setenv.sh 设置
if [ $memTotal -le 2048 ]; then
SERVICE_OPTS="${SERVICE_OPTS} -Xms1536m -Xmx1536m"
SERVICE_OPTS="${SERVICE_OPTS} -Xmn768m"
else
SERVICE_OPTS="${SERVICE_OPTS} -Xms4g -Xmx4g"
SERVICE_OPTS="${SERVICE_OPTS} -Xmn2g"
fi

查看日常机器内存
$cat /proc/meminfo | grep MemTotal
MemTotal: 4194304 kB

看出问题了吧，我们设置的最大内存是4G，而我们的linux 机器是不会把4G 内存全部分配给应用的。应用在运行过程中，一直会消耗内存，当快达到4G 的时候，应用认为还有可用内存，并不一定会及时 GC。导致内存不足，内存被撑满了，我们的应用也就 down 机了

处理方法

两种方法：

1. 设置jvm 参数为自适应

2. 申请8G 机器

这里我选择方法一

1.拉取新的分支，修改 setenv.sh

Plain Text

# if os memory <= 4G
if [ $memTotal -le 4195 ]; then
  SERVICE_OPTS="${SERVICE_OPTS} -Xms3536m -Xmx3536m"
  SERVICE_OPTS="${SERVICE_OPTS} -Xmn1536m"
else
  SERVICE_OPTS="${SERVICE_OPTS} -Xms4g -Xmx4g"
  SERVICE_OPTS="${SERVICE_OPTS} -Xmn2g"
fi

这里根据我们的环境设置，因为日常其实是4G，线上机器是8G，所以修改只会修改日常环境。

拉取新的镜像