检查Linux系统日志error和mysql错误日志的脚本

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介:

    对系统日志的检查和数据库日志的检查很重要,出现问题及时的通知系统管理员更为重要,本脚本用python写的监控脚本,主要是为zabbix监控自定义的key而准备的,当然大家也可以在返回值方面做修改,可以在写个发邮件的模块,做个定时,有问题自动发邮件(在之前写过一个发邮件的类,大家可以做参考:http://wangwei007.blog.51cto.com/68019/978743)。在zabbix中自定义key来检测系统日志和数据库日志:

UnsafeUserParameters=1

 

UserParameter=check.sys_error,/usr/local/zabbix/bin/chk_err_log.py syslog

UserParameter=check.mysql_error,/usr/local/zabbix/bin/chk_err_log.py mysqllog

    本脚本适合一台服务器多实例的mysql错误日志检测,也适用于单个示例的检测,根据自己的需求做修改。

 
  1. #!/usr/bin/env python 
  2. #encoding=utf-8 
  3. import os, sys 
  4.  
  5. def chk_err(log_file,tmp_file,type,print_list,port): 
  6.     cur_num = int(os.popen("sudo grep '' %s | wc -l" % log_file).read().strip()) 
  7.     old_num = 0 
  8.     if os.path.exists(tmp_file): 
  9.         old_num = int(open(tmp_file).read().strip()) 
  10.         if cur_num < old_num: 
  11.             os.popen("echo 0 > %s" % tmp_file) 
  12.             old_num = 0 
  13.     else
  14.         os.popen("echo 0 > %s" % tmp_file) 
  15.     err_log = os.popen("sudo grep -ni 'error' %s" % log_file).readlines() 
  16.     if err_log: 
  17.         err_list = [] 
  18.         for err in err_log: 
  19.             if int(err.split(":")[0]) > old_num: 
  20.                 err_list.append(err[len(err.split(":")[0])+1:]) 
  21.         if err_list: 
  22.             os.popen("echo %s > %s" % (err_log[-1].split(":")[0], tmp_file)) 
  23.             print_list.append(port) 
  24.  
  25. def chk_err_log(type): 
  26.     try
  27.         print_list = [] 
  28.         homedir = "/home/zabbix" 
  29.         if not os.path.exists(homedir): 
  30.             os.mkdir(homedir) 
  31.         if type == "syslog"
  32.             log_file = "/var/log/messages" 
  33.             tmp_file = "%s/.syslog_num"%homedir 
  34.             cur_num = int(os.popen("sudo grep '' %s | wc -l" % log_file).read().strip()) 
  35.             old_num = 0 
  36.             if os.path.exists(tmp_file): 
  37.                 old_num = int(open(tmp_file).read().strip()) 
  38.                 if cur_num < old_num: 
  39.                     os.popen("echo 0 > %s" % tmp_file) 
  40.                     old_num = 0 
  41.             else
  42.                 os.popen("echo 0 > %s" % tmp_file) 
  43.             err_log = os.popen("sudo grep -ni 'error' %s|grep -v snmpd|grep -v sftp" % log_file).readlines() 
  44.             if not err_log: 
  45.                 return "0" 
  46.             err_list = [] 
  47.             for err in err_log: 
  48.                 if int(err.split(":")[0]) > old_num: 
  49.                     err_list.append(err[len(err.split(":")[0])+1:]) 
  50.             if not err_list: 
  51.                 return "0" 
  52.             else
  53.                 os.popen("echo %s > %s" % (err_log[-1].split(":")[0], tmp_file)) 
  54.                 return "1" 
  55.         elif type == "mysqllog"
  56.             psinfo = os.popen("ps auxww|grep mysqld|grep -v root|grep -v grep").readlines() 
  57.             if not psinfo: 
  58.                 return "No mysqld running in this server now" 
  59.             for i in psinfo: 
  60.                 port = "0" 
  61.                 for j in i.split("--"): 
  62.                     if j.find("datadir") != -1
  63.                         datadir = j.split("=")[1].strip() 
  64.                     elif j.find("port") != -1
  65.                         port = j.split("=")[1].strip() 
  66.                 if port == "0"
  67.                     continue 
  68.                 if port == "3306"
  69.                     log_file = "%s/$(hostname).err" % datadir 
  70.                 else
  71.                     log_file = "%s/mysql.err" % datadir 
  72.                 tmp_file = "%s/.mysqllog_%s" % (homedir,port) 
  73.                 chk_err(log_file,tmp_file,type,print_list,port) 
  74.             if len(print_list)==0
  75.                 return "0" 
  76.             else
  77.                 return print_list 
  78.     except Exception, e: 
  79.         return e 
  80.  
  81. if __name__ == "__main__"
  82.     print chk_err_log(sys.argv[1]) 

 



本文转自 lover00751CTO博客,原文链接:http://blog.51cto.com/wangwei007/1106735,如需转载请自行联系原作者


相关实践学习
如何快速连接云数据库RDS MySQL
本场景介绍如何通过阿里云数据管理服务DMS快速连接云数据库RDS MySQL,然后进行数据表的CRUD操作。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助 &nbsp; &nbsp; 相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
2月前
|
安全 关系型数据库 MySQL
如何将数据从MySQL同步到其他系统
【10月更文挑战第17天】如何将数据从MySQL同步到其他系统
339 0
|
1月前
|
关系型数据库 MySQL Linux
Linux系统如何设置自启动服务在MySQL数据库启动后执行?
【10月更文挑战第25天】Linux系统如何设置自启动服务在MySQL数据库启动后执行?
131 3
|
2月前
|
存储 关系型数据库 MySQL
PACS系统 中 dicom 文件在mysql 8.0 数据库中的 存储和读取(pydicom 库使用)
PACS系统 中 dicom 文件在mysql 8.0 数据库中的 存储和读取(pydicom 库使用)
45 2
|
2月前
|
Ubuntu 关系型数据库 MySQL
Linux系统MySQL安装
【10月更文挑战第19天】本文介绍了在 Linux 系统上安装 MySQL 的步骤,包括安装前准备、安装 MySQL、启动 MySQL 服务、配置 MySQL 以及验证安装。适用于 Ubuntu/Debian 和 CentOS/Fedora 系统,提供了详细的命令示例。
356 1
|
2月前
|
SQL JSON 关系型数据库
MySQL是一个广泛使用的开源关系型数据库管理系统,它有许多不同的版本
【10月更文挑战第3天】MySQL是一个广泛使用的开源关系型数据库管理系统,它有许多不同的版本
206 5
|
1月前
|
网络协议 关系型数据库 MySQL
MySQL报ERROR 2002 (HY000)解决
通过上述步骤,可以有效地解决MySQL连接时出现的 `ERROR 2002 (HY000)`错误。这些步骤包括检查和启动MySQL服务、配置文件检查、套接字文件检查、日志文件分析、进程检查、防火墙设置、客户端配置和最终的MySQL重装。确保每个步骤都按顺序执行,有助于快速定位和解决问题,使MySQL服务器恢复正常运行。
855 0
|
2月前
|
关系型数据库 MySQL Linux
Navicat 连接 Windows、Linux系统下的MySQL 各种错误,修改密码。
使用Navicat连接Windows和Linux系统下的MySQL时可能遇到的四种错误及其解决方法,包括错误代码2003、1045和2013,以及如何修改MySQL密码。
312 0
|
1月前
|
XML 安全 Java
【日志框架整合】Slf4j、Log4j、Log4j2、Logback配置模板
本文介绍了Java日志框架的基本概念和使用方法,重点讨论了SLF4J、Log4j、Logback和Log4j2之间的关系及其性能对比。SLF4J作为一个日志抽象层,允许开发者使用统一的日志接口,而Log4j、Logback和Log4j2则是具体的日志实现框架。Log4j2在性能上优于Logback,推荐在新项目中使用。文章还详细说明了如何在Spring Boot项目中配置Log4j2和Logback,以及如何使用Lombok简化日志记录。最后,提供了一些日志配置的最佳实践,包括滚动日志、统一日志格式和提高日志性能的方法。
378 30
【日志框架整合】Slf4j、Log4j、Log4j2、Logback配置模板
|
18天前
|
监控 安全 Apache
什么是Apache日志?为什么Apache日志分析很重要?
Apache是全球广泛使用的Web服务器软件,支持超过30%的活跃网站。它通过接收和处理HTTP请求,与后端服务器通信,返回响应并记录日志,确保网页请求的快速准确处理。Apache日志分为访问日志和错误日志,对提升用户体验、保障安全及优化性能至关重要。EventLog Analyzer等工具可有效管理和分析这些日志,增强Web服务的安全性和可靠性。
|
2月前
|
XML JSON Java
Logback 与 log4j2 性能对比:谁才是日志框架的性能王者?
【10月更文挑战第5天】在Java开发中,日志框架是不可或缺的工具,它们帮助我们记录系统运行时的信息、警告和错误,对于开发人员来说至关重要。在众多日志框架中,Logback和log4j2以其卓越的性能和丰富的功能脱颖而出,成为开发者们的首选。本文将深入探讨Logback与log4j2在性能方面的对比,通过详细的分析和实例,帮助大家理解两者之间的性能差异,以便在实际项目中做出更明智的选择。
339 3