MySQL监控-Datadog数据库监控调研

本文涉及的产品
对象存储 OSS,20GB 3个月
文件存储 NAS,50GB 3个月
对象存储 OSS,内容安全 1000 次 1年
简介: MySQL是最流行的数据库之一,在大多系统的后端的存储都有MySQL的身影,MySQL运行的是否健康,直接影响着整个系统的运行,数据库的瓶颈往往也是整个系统的瓶颈,其重要性不言而喻,所以对于MySQL的监控必不可少,及时发现MySQL运行中的异常,可以有效提高系统的可用性和用户体验。本文主要介绍下MySQL如何做监控,以及对Datadog的Database Monitoring的一些简单调研。

前言

MySQL是最流行的数据库之一,在大多系统的后端的存储都有MySQL的身影,MySQL运行的是否健康,直接影响着整个系统的运行,数据库的瓶颈往往也是整个系统的瓶颈,其重要性不言而喻,所以对于MySQL的监控必不可少,及时发现MySQL运行中的异常,可以有效提高系统的可用性和用户体验。

本文主要介绍下MySQL如何做监控,以及对Datadog的Database Monitoring的一些简单调研。

监控类型

Google提出在系统监控中的黄金指标,分别是Latency,Traffic,Saturation,Errors,MySQL一般作为资源类服务系统出现,在MySQL监控中也可以以这些指标为指引来进行指标收集和监控。

黄金指标

  • Latency延迟:比如MySQL中的查询的延迟,一条Select语句的延迟可能会直接影响用户体验,监控SQL语句的平均延迟,P99延迟可以提早发现对系统的影响。
  • Traffic:在MySQL中,查询的QPS是吞吐量的一种指标,比如MySQL服务器每秒可以支持多少查询,多少更新,吞吐量的指标也会影响到用户体验。
  • Saturation饱和度:饱和度是指系统的资源被消耗殆尽的程度,比如在MySQL最大连接数为300,当前连接数已经达到240的情况可能需要引起注意,因为可能在不久的将来会将连接数打满,导致新的连接进不来,影响上层服务的可用性。
  • Errors错误:MySQL中的Aborted_clients和Aborted_connects的增加往往意味了使用方在使用的时候出现了一些错误,需要引起注意,比如客户端在退出时没有调用mysql_close会导致Aborted_clients指标的增加,所以监控这个指标对于问题的排查很有帮助。

MySQL关键指标类型

黄金指标对于指标的监控有很大的指导意义,但是选取哪些指标,也是值得考量的,这里借用Datadog的一篇MySQL监控文章来描述MySQL监控中的关键指标。从性能和资源使用角度大致分为4类:

  • Query throuput:查询吞吐量,主要包括查询的QPS和更新QPS,用来表示延迟。
  • Query performance: 查询性能,主要包括查询的消耗的平均时间,查询错误指标,慢查询数量,分别包含吞吐量和错误。
  • Connections: 连接,主要包括当前打开连接数和运行连接数表示饱和度。错误连接数用来表示错误。
  • Buffer pool usage: 缓冲池使用情况,innodb_buffer_pool_reads表示InnoDB缓冲池无法满足的请求数,计算出的缓冲池中的页面使用数量使用率可以用表示资源的饱和度。

MySQL监控流程

MySQL的监控跟其他系统的监控类似,一般会包含指标日志类的数据收集,指标的可视化展示,指标告警,问题的排查等流程。

指标收集

MySQL的指标类型有很多,可以通过两种方式获取

  • 服务内部状态/内部变量:一般通过show status或者show variable来获取,表示全局的一些指标。
  • peformance shema和sys schema,提供了更加底层的运行时的详细的指标信息。

可视化展示

通过Agent将指标数据采集到后端存储中,然后进行可视化展示,可视化仪表盘会将指标的历史值和当前值绘制成曲线,便于查看指标的变化,指标如果有明显的变化,从图表中可以明显的看出来,对于排查问题有一定的参考意义。

指标异常告警

在某个指标出现异常时,可以配置相应的告警,告警监控可以使用阈值设定或者AI算法来自动识别指标的异常,产生的告警可以分不同的严重等级,不同的等级可以配置不同的通知渠道,比如严重度低的发邮件提醒既可以,对于高严重度的指标异常,配置电话通知。

通过仪表盘或者告警,可以找到哪个指标出现了异常,然后根据不同的指标进行不同的排查方式,比如连接数超过最大连接数报警,可以调大数据库的最大连接数或者减少客户端的连接数。对于更复杂的场景,可能需要借助问题发生时其他的日志或者指标进行根因分析。


接下来以Datadog的数据库监控为例,来调研Datadog是如何做数据库监控的,文中图片来自Datadog官网。

Datadog 数据库监控

指标采集

Agent端采集

Datadog的指标采集是通过安装Agent来采集,Agent可以部署在自建机器或者云服务器上,可以连接到服务器即可。

指标数据

通过安装Datadog Agent到数据库所在服务器或者能连接到数据的服务器上,然后创建一个datadog用户,并且给datadog赋予一定的权限如REPLICATION CLIENT,PROCESS和SELECT ON performance_schema.*的权限。Datadog为了收集explain plan还会创建几个存储过程explain_statement,enable_events_statements_consumers。

日志数据

Datadog Agent支持采集MySQL服务器端General日志、错误日志、慢日志等,当然前提是MySQL服务端开启这些日志存储。

仪表盘

总体指标

MySQL总览,主要展示了收集的MySQL指标的整体态势。

Query Metrics

主要用来展示标准化查询(normalized query)的历史性能指标,可以按照查询数,平均延迟,消耗总时间,返回行数进行排序。

同时也可以根据标签或聚合维度来展示消耗了最多查询时间的Top查询和延迟。根据不同的维度来分组展示每个组的查询数,平均延迟,消耗总时间。

Query Details

在Query Metrics页面搜索特定的query,可以查看其Query Detail页面,在其中可以查看语句的平均延迟和查询总时间,同时页面还会展示查询关联的Datadog中标签,

查询页面除了延迟和消耗时间等,还会展示执行计划,时序和执行这条查询的主机分布。

  • 执行计划页面,会展示不同的执行计划及其延迟和平均消耗。

  • 性能指标页面,展示了一些常见指标的性能历史。

  • 执行查询的主机分布页面,会展示执行当前查询的主机分布,通过菜单可以链接到主机的相关页面,这对于排查问题比较方便,比如某个主机上的查询延迟非常高,可以直接跳转到改主机的相关仪表盘页面进行查看。

Query Samples

主要包含采样查询的性能数据,延迟,消耗和执行计划,同时也支持按照Table来展示Top消耗的查询语句。

告警

Datadog提供了对于指标的监控告警,主要支持五种监控类型,包括:

  • Thresold Alert:阈值监控。
  • Change Alert: 事件变更监控。
  • Anomaly Dectection:异常检测,使用机器学习算法来判断指标的异常。
  • Outlier Alert:离群点检测告警。
  • Forecast Alert:预测告警。

总结

本文首先介绍了数据库监控的关键指标和MySQL监控的一般流程主要包括指标收集,可视化展示,指标异常告警。然后通过对Datadog的数据库监控产品做介绍,除了常规的总体指标展示,Datadog的数据库监控还提供了Query相关的指标,分别包括Query Metrics,Query Detail和Query Samples,从查询的角度进行监控和分析统计,除了Query级别的指标展示,还包括对执行计划的展示,同时也支持从仪表盘Drill down到主机级别查看资源指标,通过这些仪表盘可以比较方便的看出指标的异常。

参考

  • MySQL Performance Schema【链接
  • MySQL monitoring with Datadog【链接
  • Surface and optimize slow performing queries with Datadog Database Monitoring【链接
  • The Four Golden Signals in Monitoring Distributed Systems【链接
相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
目录
相关文章
|
3月前
|
人工智能 运维 关系型数据库
数据库运维:mysql 数据库迁移方法-mysqldump
本文介绍了MySQL数据库迁移的方法与技巧,重点探讨了数据量大小对迁移方式的影响。对于10GB以下的小型数据库,推荐使用mysqldump进行逻辑导出和source导入;10GB以上可考虑mydumper与myloader工具;100GB以上则建议物理迁移。文中还提供了统计数据库及表空间大小的SQL语句,并讲解了如何使用mysqldump导出存储过程、函数和数据结构。通过结合实际应用场景选择合适的工具与方法,可实现高效的数据迁移。
565 1
|
3月前
|
SQL 关系型数据库 MySQL
Go语言数据库编程:使用 `database/sql` 与 MySQL/PostgreSQL
Go语言通过`database/sql`标准库提供统一数据库操作接口,支持MySQL、PostgreSQL等多种数据库。本文介绍了驱动安装、连接数据库、基本增删改查操作、预处理语句、事务处理及错误管理等内容,涵盖实际开发中常用的技巧与注意事项,适合快速掌握Go语言数据库编程基础。
205 62
|
2月前
|
SQL 存储 关系型数据库
MySQL功能模块探秘:数据库世界的奇妙之旅
]带你轻松愉快地探索MySQL 8.4.5的核心功能模块,从SQL引擎到存储引擎,从复制机制到插件系统,让你在欢声笑语中掌握数据库的精髓!
|
2月前
|
SQL Oracle 关系型数据库
比较MySQL和Oracle数据库系统,特别是在进行分页查询的方法上的不同
两者的性能差异将取决于数据量大小、索引优化、查询设计以及具体版本的数据库服务器。考虑硬件资源、数据库设计和具体需求对于实现优化的分页查询至关重要。开发者和数据库管理员需要根据自身使用的具体数据库系统版本和环境,选择最合适的分页机制,并进行必要的性能调优来满足应用需求。
81 11
|
2月前
|
SQL 关系型数据库 MySQL
【赵渝强老师】MySQL中的数据库对象
本教程详细介绍了MySQL数据库中的常见对象,包括表、索引、视图、事件、存储过程和存储函数的创建与管理。内容涵盖表的基本操作、索引的使用、视图简化查询、事件调度功能等,并通过具体示例演示相关SQL语句的使用方法。
|
4月前
|
负载均衡 算法 关系型数据库
大数据大厂之MySQL数据库课程设计:揭秘MySQL集群架构负载均衡核心算法:从理论到Java代码实战,让你的数据库性能飙升!
本文聚焦 MySQL 集群架构中的负载均衡算法,阐述其重要性。详细介绍轮询、加权轮询、最少连接、加权最少连接、随机、源地址哈希等常用算法,分析各自优缺点及适用场景。并提供 Java 语言代码实现示例,助力直观理解。文章结构清晰,语言通俗易懂,对理解和应用负载均衡算法具有实用价值和参考价值。
大数据大厂之MySQL数据库课程设计:揭秘MySQL集群架构负载均衡核心算法:从理论到Java代码实战,让你的数据库性能飙升!
|
6月前
|
关系型数据库 MySQL Java
【YashanDB知识库】原生mysql驱动配置连接崖山数据库
【YashanDB知识库】原生mysql驱动配置连接崖山数据库
【YashanDB知识库】原生mysql驱动配置连接崖山数据库
|
4月前
|
存储 关系型数据库 MySQL
大数据新视界 --面向数据分析师的大数据大厂之 MySQL 基础秘籍:轻松创建数据库与表,踏入大数据殿堂
本文详细介绍了在 MySQL 中创建数据库和表的方法。包括安装 MySQL、用命令行和图形化工具创建数据库、选择数据库、创建表(含数据类型介绍与选择建议、案例分析、最佳实践与注意事项)以及查看数据库和表的内容。文章专业、严谨且具可操作性,对数据管理有实际帮助。
大数据新视界 --面向数据分析师的大数据大厂之 MySQL 基础秘籍:轻松创建数据库与表,踏入大数据殿堂
|
6月前
|
关系型数据库 MySQL 数据库连接
docker拉取MySQL后数据库连接失败解决方案
通过以上方法,可以解决Docker中拉取MySQL镜像后数据库连接失败的常见问题。关键步骤包括确保容器正确启动、配置正确的环境变量、合理设置网络和权限,以及检查主机防火墙设置等。通过逐步排查,可以快速定位并解决连接问题,确保MySQL服务的正常使用。
849 82
|
4月前
|
SQL 关系型数据库 MySQL
MySQL下载安装全攻略!小白也能轻松上手,从此数据库不再难搞!
这是一份详细的MySQL安装与配置教程,适合初学者快速上手。内容涵盖从下载到安装的每一步操作,包括选择版本、设置路径、配置端口及密码等。同时提供基础操作指南,如数据库管理、数据表增删改查、用户权限设置等。还介绍了备份恢复、图形化工具使用和性能优化技巧,帮助用户全面掌握MySQL的使用方法。附带常见问题解决方法,保姆级教学让你无忧入门!
MySQL下载安装全攻略!小白也能轻松上手,从此数据库不再难搞!

推荐镜像

更多