shell脚本实现文件自动清理并推送钉钉机器人告警

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: shell脚本实现文件自动清理并推送钉钉机器人告警

shell脚本实现文件自动清理并推送钉钉机器人告警

需求场景:

接上一篇shell脚本实现Linux磁盘空间超过阈值自动钉钉机器人告警

当磁盘空间超过阈值时,这时需要人为去清理一些不需要的历史大日志文件,那能否做成自动化呢?

解决思路

1、在磁盘空间超过阈值时自动执行清理脚本即可

2、某台特定服务器,需要清理的历史大日志文件的目录是固定的,这时可以写文件清理脚本来实现

3、清理的文件名称、路径、大小最好能通过告警通知发送出来,所见及所知

比如需要清理一个MySQL服务器的历史binlog日志,调试修改后的最终脚本如下largesizefile_delete.sh

#!/bin/bash
# 监控目录和文件名
HOSTNAME=$(hostname)
HOSTIP=$(hostname -I)
dir_path="/var/lib/mysql"
filelists=`ls -ltrh $dir_path | grep binlog | head -n 3 | awk '{print $NF}'`
# webhook 地址
webhook_url="https://oapi.dingtalk.com/robot/send?access_token=XXXX"
set_payload_file(){
cat  > /opt/payload_result.json << \EOF
{       
"msgtype": "actionCard",
"actionCard": {
"title":"binlog日志文件清理通知",
"text":"
##### 服务器<font color=#67C23A>hostname</font>(<font color=#FF0000>hostip</font> )上MySQL binlog日志文件清理通知 \n
>  ##### <font color=#67C23A> 【文件路径】</font> :<font color=#FF0000> template1 </font> \n
>  ##### <font color=#67C23A> 【文件大小】</font> :<font color=#FF0000> template2</font> \n
>  ##### <font color=#67C23A>  此文件已经完成清理,请知悉</font> \n
"
}
}        
EOF
}
delete_file(){  
cd $dir_path
for file in $filelists; do
    if [[ -f "$file" ]]; then
      # 获取文件大小(单位:字节)
      file_size=$(stat -c "%s" "$file")
      file_size_mb=$((file_size/(1024*1024)))
      rm -f $file
      # 发送告警到 webhook 机器人
        message1="$dir_path/${file}"
        message2="${file_size_mb} MB"
        set_payload_file
        sed -i "s^template1^$message1^g" /opt/payload_result.json
        sed -i "s^template2^$message2^g" /opt/payload_result.json
        sed -i "s^hostname^$HOSTNAME^g" /opt/payload_result.json
        sed -i "s^hostip^$HOSTIP^g" /opt/payload_result.json
        response=$(curl -sS -H "Content-Type: application/json" -X POST -d @/opt/payload_result.json "${webhook_url}")
        if [ $? -eq 0 ]; then
            echo "Alert sent successfully"
        else
            echo "Failed to send alert: ${response}"
        fi
      fi
done
}
delete_file

模拟测试

在之前的/opt/disk_usage_check.sh 基础上

添加一行sh /opt/largesizefile_delete.sh 调用此脚本

(图片点击放大查看)

最终的效果如下

我先生成测试的几个binlog文件,模拟某个分区磁盘空间高的告警

(图片点击放大查看)

(图片点击放大查看)

sh /opt/disk_usage_check.sh进行测试

告警效果如下

(图片点击放大查看)

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
5月前
|
弹性计算 监控 Python
有趣的python脚本【监控公司出口ip变化并发送至钉钉群】
因为公司出口ip是动态的(拨号方式),重新拨号后就会变化。因此及时发现ip变化显得尤为重要(比如及时ecs安全组中的ip),另外可把py脚本打包成exe并加到办公电脑的计划任务里。
103 2
有趣的python脚本【监控公司出口ip变化并发送至钉钉群】
|
5月前
|
JavaScript 前端开发 开发者
如果你想在钉钉环境中运行JavaScript脚本
【2月更文挑战第17天】如果你想在钉钉环境中运行JavaScript脚本
112 6
|
5月前
|
Shell
删除常规文件及隐藏文件shell脚本
删除常规文件及隐藏文件shell脚本
73 1
|
5月前
|
安全 机器人 Shell
shell脚本实现Linux磁盘空间超过阈值自动钉钉机器人告警
shell脚本实现Linux磁盘空间超过阈值自动钉钉机器人告警
105 0
|
存储 弹性计算 安全
成功案例-钉钉 | 学习笔记
快速学习 成功案例-钉钉
384 0
|
移动开发 物联网 Go
SAP Business ByDesign 和支付宝与钉钉集成的一个原型开发案例
SAP Business ByDesign 和支付宝与钉钉集成的一个原型开发案例
SAP Business ByDesign 和支付宝与钉钉集成的一个原型开发案例
|
移动开发 物联网 智能硬件
SAP Business ByDesign 和支付宝与钉钉集成的一个原型开发案例
SAP Business ByDesign 和支付宝与钉钉集成的一个原型开发案例
246 0
SAP Business ByDesign 和支付宝与钉钉集成的一个原型开发案例
|
存储 弹性计算 安全
案例分享——钉钉|学习笔记
快速学习 案例分享——钉钉
353 0
下一篇
无影云桌面