MySQL-数据库监控初探

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS PostgreSQL,高可用系列 2核4GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介: MySQL-数据库监控初探

20200129003012618.png


生猛干货

带你搞定MySQL实战,轻松对应海量业务处理及高并发需求,从容应对大场面试


官方文档

https://dev.mysql.com/doc/


20200131202811239.png


如果英文不好的话,可以参考 searchdoc 翻译的中文版本

http://www.searchdoc.cn/rdbms/mysql/dev.mysql.com/doc/refman/5.7/en/index.com.coder114.cn.html


20200131203226295.png


监控指标


先大体说下几个点哈

  • 对数据库服务可用性进行监控
    有一点需要注意的是,不能仅仅监控端口或者进程是否正常,要连接进去,执行一些SQL操作。


  • 对数据库性能进行监控
    这一块就比较多了, 比如QPS 和TPS的监控, 并发线程的监控 (不是数据库的连接数)、 阻塞和死锁监控 等等
  • 对主从复制的监控
    主从链路状态 、 主从延迟 、 主从数据一致


  • 对服务器资源的监控
    磁盘空间、内存 、SWAP分区、网络I/O 、CPU等等

接下来,展开探讨一下


数据库可用性监控

如何确认数据库是否可以通过网络连接?


MySQL本地的SQL文件能连接,并不意味着可以通过网络连接,中间有好多东西隔着呢


通常有几种方式,选一种

  • mysqladmin -umonitor_user -p -h ping
-u 监控的用户


  • telnet ip db_port
  • 模拟应用程序使用网络建立数据库连接 (推荐)

如何确认数据库是否可读写

  • 检查数据库的read_only参数是否为off
比如从库这个参数 建议关闭 ,主从切换后,这个参数就要打开,防止新的主不可写。


  • 建立监控表,并对表中数据进行更新
  • 如果检测是否可读的话 ,执行 select @@version

如何监控数据库的连接数 max_connections | Threads_connected


需要时刻关注DB连接数


show variables like ‘max_connections’ , 然后 show global status like ‘Threads_connected’


max_connections参数用来设置最大连接(用户)数 , Threads_connected查看当前打开的连接的数量, 可以用这个两个参数的比值超过阈值进行告警等。

mysql>  show variables like 'max_connections';
+-----------------+-------+
| Variable_name   | Value |
+-----------------+-------+
| max_connections | 151   |
+-----------------+-------+
1 row in set (0.00 sec)
mysql> show global status like 'Threads_connected' ;
+-------------------+-------+
| Variable_name     | Value |
+-------------------+-------+
| Threads_connected | 4     |
+-------------------+-------+
1 row in set (0.00 sec)
mysql> 
mysql>  show global status like 'Threads_running';   # 当前连接数 
+-----------------+-------+
| Variable_name   | Value |
+-----------------+-------+
| Threads_running | 2     |
+-----------------+-------+
1 row in set (0.04 sec)
mysql> 

数据库性能

记录性能监控中所采集到的数据库的状态

下面我们列举下最常见的监控指标

如何计算QPS和TPS

QPS 并不是仅仅只select 的,而是数据库处理所有SQL请求的。

QPS

公式 (采集两次,通过差值获取)

QPS=(Queries2 - Queries1) / (Uptime_since_flush_status2-Uptime_since_flush_status1)

这些参数都可以通过show status 来获取 如下

mysql> show global status like 'queries'; # 这个值时累加的;
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| Queries       | 4820  |
+---------------+-------+
1 row in set (0.05 sec)
mysql> show global status like 'uptime_since_flush_status'; 
+---------------------------+--------+
| Variable_name             | Value  |
+---------------------------+--------+
| Uptime_since_flush_status | 536208 |
+---------------------------+--------+
1 row in set (0.03 sec)
mysql> 


TPS


公式

TPS = ((com_insert2+com_update2+com_delete2)-(com_insert1+com_update1+com_delete1)
                  /(uptime_since_flush_status2-uptime_since_flush_status1);


同样的 这些参数都可以通过show status 来获取 如下

mysql>  show global status like 'com_insert';   # 写入事务的数量,这个值是累加的
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| Com_insert    | 1038  |
+---------------+-------+
1 row in set (0.04 sec)
mysql> show global status like 'com_update';   # 更新事务的数量,这个值是累加的
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| Com_update    | 4     |
+---------------+-------+
1 row in set (0.00 sec)
mysql> show global status like 'com_delete';   # 删除事务的数量,这个值是累加的
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| Com_delete    | 1     |
+---------------+-------+
1 row in set (0.00 sec)
mysql> show global status like 'uptime_since_flush_status'; 
+---------------------------+--------+
| Variable_name             | Value  |
+---------------------------+--------+
| Uptime_since_flush_status | 536404 |
+---------------------------+--------+
1 row in set (0.04 sec)
mysql> 


并发数量监控 Threads_running


数据库系统的性能会随着并发处理请求数量的增加而下降;

并发的数量通常会远小于同一时间连接到数据库的线程数量。


获取并发量

mysql>  show global status like 'Threads_running'; 
+-----------------+-------+
| Variable_name   | Value |
+-----------------+-------+
| Threads_running | 2     |
+-----------------+-------+
1 row in set (0.04 sec)
mysql> 


Innodb的阻塞监控

阻塞时间> 60秒的 SQL

SELECT
  b.trx_mysql_thread_id AS '被阻塞线程',
  b.trx_query AS '被阻塞Sql',
  c.trx_mysql_thread_id AS '阻塞线程',
  c.trx_query AS '阻塞Sql',
  (
    UNIX_TIMESTAMP() - UNIX_TIMESTAMP(c.trx_started)
  ) AS '阻塞时间'
FROM
  information_schema.INNODB_LOCK_WAITS AS a
JOIN information_schema.INNODB_TRX AS b ON a.requesting_trx_id = b.trx_id
JOIN information_schema.INNODB_TRX AS c ON a.blocking_trx_id = c.trx_id
WHERE
  (
    UNIX_TIMESTAMP() - UNIX_TIMESTAMP(c.trx_started)
  ) > 60;  



20200203232042528.png

搞定MySQL


https://artisan.blog.csdn.net/article/details/104162589?spm=1001.2014.3001.5502


相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
相关文章
|
3月前
|
缓存 关系型数据库 BI
使用MYSQL Report分析数据库性能(下)
使用MYSQL Report分析数据库性能
144 3
|
3月前
|
关系型数据库 MySQL 分布式数据库
阿里云PolarDB云原生数据库收费价格:MySQL和PostgreSQL详细介绍
阿里云PolarDB兼容MySQL、PostgreSQL及Oracle语法,支持集中式与分布式架构。标准版2核4G年费1116元起,企业版最高性能达4核16G,支持HTAP与多级高可用,广泛应用于金融、政务、互联网等领域,TCO成本降低50%。
|
3月前
|
关系型数据库 MySQL 数据库
阿里云数据库RDS费用价格:MySQL、SQL Server、PostgreSQL和MariaDB引擎收费标准
阿里云RDS数据库支持MySQL、SQL Server、PostgreSQL、MariaDB,多种引擎优惠上线!MySQL倚天版88元/年,SQL Server 2核4G仅299元/年,PostgreSQL 227元/年起。高可用、可弹性伸缩,安全稳定。详情见官网活动页。
|
3月前
|
关系型数据库 分布式数据库 数据库
阿里云数据库收费价格:MySQL、PostgreSQL、SQL Server和MariaDB引擎费用整理
阿里云数据库提供多种类型,包括关系型与NoSQL,主流如PolarDB、RDS MySQL/PostgreSQL、Redis等。价格低至21元/月起,支持按需付费与优惠套餐,适用于各类应用场景。
|
3月前
|
SQL 关系型数据库 MySQL
Mysql数据恢复—Mysql数据库delete删除后数据恢复案例
本地服务器,操作系统为windows server。服务器上部署mysql单实例,innodb引擎,独立表空间。未进行数据库备份,未开启binlog。 人为误操作使用Delete命令删除数据时未添加where子句,导致全表数据被删除。删除后未对该表进行任何操作。需要恢复误删除的数据。 在本案例中的mysql数据库未进行备份,也未开启binlog日志,无法直接还原数据库。
|
3月前
|
缓存 监控 关系型数据库
使用MYSQL Report分析数据库性能(中)
使用MYSQL Report分析数据库性能
152 1
|
3月前
|
关系型数据库 MySQL 数据库
阿里云数据库RDS支持MySQL、SQL Server、PostgreSQL和MariaDB引擎
阿里云数据库RDS支持MySQL、SQL Server、PostgreSQL和MariaDB引擎,提供高性价比、稳定安全的云数据库服务,适用于多种行业与业务场景。
|
3月前
|
关系型数据库 MySQL 数据库
自建数据库如何迁移至RDS MySQL实例
数据库迁移是一项复杂且耗时的工程,需考虑数据安全、完整性及业务中断影响。使用阿里云数据传输服务DTS,可快速、平滑完成迁移任务,将应用停机时间降至分钟级。您还可通过全量备份自建数据库并恢复至RDS MySQL实例,实现间接迁移上云。
|
4月前
|
存储 运维 关系型数据库
从MySQL到云数据库,数据库迁移真的有必要吗?
本文探讨了企业在业务增长背景下,是否应从 MySQL 迁移至云数据库的决策问题。分析了 MySQL 的优势与瓶颈,对比了云数据库在存储计算分离、自动化运维、多负载支持等方面的优势,并提出判断迁移必要性的五个关键问题及实施路径,帮助企业理性决策并落地迁移方案。
|
3月前
|
Ubuntu 安全 关系型数据库
安装与配置MySQL 8 on Ubuntu,包括权限授予、数据库备份及远程连接指南
以上步骤提供了在Ubuntu上从头开始设置、配置、授权、备份及恢复一个基础但完整的MySQL环境所需知识点。
417 7

热门文章

最新文章

推荐镜像

更多