MYSQL调优课题

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,高可用系列 2核4GB
简介: MYSQL调优课题

1 msyql的执行过程

image.png

mysql缓存

a. 查看缓存的配置项
SHOW VARIABLES LIKE '%query_cache%';

image.png

query_cache_type | OFF 关闭缓存

MySQL缓存是默认关闭的,也就是说不推荐使用缓存,并且在MySQL8.0 版本已经将查询缓存的整块功能删掉了。这主要是它的使用场景限制造成的:
先说下缓存中数据存储格式:key(sql语句)- value(数据值),所以如果SQL语句(key)只要存在一点不同之处就会直接进行数据库查询了;
由于表中的数据不是一成不变的,大多数是经常变化的,而当数据库中的数据变化了,那么相应的与此表相关的缓存数据就需要移除掉;

b. sql解析器
sql解析器报错
image.png

c. 查询优化器

select * from province inner join city on city.fid = province.id where province.id = 1;
先查哪一个表由优化器指定

2 查询排序

explain select * from
s1 where id > 100 order by id limit 1000;

image.png

Extra 字段中是包含 Using filesort 说明sql需要再排序

image.png

3 连表查询

Index Nested-Loop JoinSimple Nested-Loop JoinBlock Nested-Loop Join

a. Index Nested-Loop Join
翻译过来的意思是:索引循环嵌套链接,简称 INLJ。它是基于索引的链接算法

explain
SELECT * FROM test_joinv1 STRAIGHT_JOIN test_joinv2 ON (test_joinv1.m = test_joinv2.m)

image.png

image.png

image.png

这是使用索引的情况下,如果不使用索引查询就会很慢了,因为要扫描全表,但是真的扫描全表了吗?继续看

b. Simple Nested-Loop Join
简单嵌套循环链接,简称 SNLJ。这个算法没有做任何优化,每一次查询都会扫描链接的所有表,性能低下

SELECT * FROM test_joinv1 STRAIGHT_JOIN test_joinv2 ON (test_joinv1.m = test_joinv2.n)

image.png

执行计划里面显示使用了Block Nested Loop

Block Nested Loop
缓存块嵌套循环链接,简称 BNLJ。这种算法是使用缓存块将所有的数据在内存中进行比较(主要是内存的速度非常快),其核心是利用内存的空间换取时间
也即是在内容中计算,如果内存不足就循环扫描表加入内存,扫描次数增加查询也会变慢,所以大数据量还是会慢

4 索引

使用or,关于组合索引,我的以往工作中使用过一次组合索引,在一个很奇葩的现象中

explain select * from test_joinv1 where m =12 or id =0

image.png

唯一索引和普通索引的区别
在B+树里面,普通索引会一直找,唯一索引找到了就返回了

5 事务

redo日志是物理日志,undo日志是逻辑日志
image.png

6 锁

全局锁 flush tables with read lock;数据迁移时使用

表锁 lock tables [tableName] read/write

行锁

共享锁 lock in share mode 共享锁的使用场景是保证数据库中数据与数据之间的关系

共享锁的主要功能是:在某个事务中某条数据只要加上了共享锁,那么对于其他的事务来说该条数据将可读但是无法修改
场景主要用于后面插入的数据以来前面的数据

select * from test_joinv1 where id =1 lock in share mode

image.png
这时候在另一个会话中查询时没有问题的,但是删除和修改时不行的

image.png
加上共享锁后,另一个会话执行删除,那么他就要等待,这个等待时间mysql时可以修改的,语句SET GLOBAL innodb_lock_wait_timeout=100,有时候方法执行缓慢的原因很可能就是由于锁导致的

排他锁 for update

在一个事务中一个更新的操作会自动添加排他锁

begin;
update test_joinv1 set m=192199433 where id = 3;
commit

image.png

行锁升级为表锁
begin;
update test_joinv1 set m=192199433 where n = 3;

image.png

行锁锁的其实时索引,更新的条件没有家索引,那么行锁就变成了表锁,影响了性能

死锁

image.png

查询一条数据有时慢有时快的原因
正常我们把数据放入buffer pool如果buffer pool满了就要进行写入磁盘io,就会依赖磁盘的io速度,可以通过调整 innodb_io_capacity 参数的方式来避免

7 事务隔离级别

幻读

update test set b = 11 where b = 10;
update test set b = 10 where b = 80;
insert into test values (100,100,10);
间隙锁 锁定某一个范围,这个范围中的数据全部都归该锁控制,以至于其他事务无法操作相关范围的数据
MySQL 不仅会锁定 b=10的相关数据,还会锁定相关的  7 区间,此时如果你想修改相关数据和新增相关的数据时,都是阻塞状态。
(-∞, 10]、(10, 20]、(10, 30]、(10, 40]、(10, 50]、(10, 60] 以及 (60, +∞)

8 主从复制

show slave status 查看是否开启主从

image.png

image.png

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
7月前
|
存储 关系型数据库 MySQL
2024年Java秋招面试必看的 | MySQL调优面试题
随着系统用户量的不断增加,MySQL 索引的重要性不言而喻,对于后端工程师,只有在了解索引及其优化的规则,并应用于实际工作中后,才能不断的提升系统性能,开发出高性能、高并发和高可用的系统。 今天小编首先会跟大家分享一下MySQL 索引中的各种概念,然后介绍优化索引的若干条规则,最后利用这些规则,针对面试中常考的知识点,做详细的实例分析。
352 0
2024年Java秋招面试必看的 | MySQL调优面试题
|
7月前
|
SQL 监控 关系型数据库
MySQL性能调优:监控和优化
MySQL性能调优:监控和优化
142 1
|
7月前
|
存储 关系型数据库 MySQL
Mysql高可用|索引|事务 | 调优
Mysql高可用|索引|事务 | 调优
|
1月前
|
监控 关系型数据库 MySQL
数据库优化:MySQL索引策略与查询性能调优实战
【10月更文挑战第27天】本文深入探讨了MySQL的索引策略和查询性能调优技巧。通过介绍B-Tree索引、哈希索引和全文索引等不同类型,以及如何创建和维护索引,结合实战案例分析查询执行计划,帮助读者掌握提升查询性能的方法。定期优化索引和调整查询语句是提高数据库性能的关键。
192 1
|
3月前
|
存储 SQL 关系型数据库
【MySQL调优】如何进行MySQL调优?从参数、数据建模、索引、SQL语句等方向,三万字详细解读MySQL的性能优化方案(2024版)
MySQL调优主要分为三个步骤:监控报警、排查慢SQL、MySQL调优。 排查慢SQL:开启慢查询日志 、找出最慢的几条SQL、分析查询计划 。 MySQL调优: 基础优化:缓存优化、硬件优化、参数优化、定期清理垃圾、使用合适的存储引擎、读写分离、分库分表; 表设计优化:数据类型优化、冷热数据分表等。 索引优化:考虑索引失效的11个场景、遵循索引设计原则、连接查询优化、排序优化、深分页查询优化、覆盖索引、索引下推、用普通索引等。 SQL优化。
585 15
【MySQL调优】如何进行MySQL调优?从参数、数据建模、索引、SQL语句等方向,三万字详细解读MySQL的性能优化方案(2024版)
|
1月前
|
监控 关系型数据库 MySQL
数据库优化:MySQL索引策略与查询性能调优实战
【10月更文挑战第26天】数据库作为现代应用系统的核心组件,其性能优化至关重要。本文主要探讨MySQL的索引策略与查询性能调优。通过合理创建索引(如B-Tree、复合索引)和优化查询语句(如使用EXPLAIN、优化分页查询),可以显著提升数据库的响应速度和稳定性。实践中还需定期审查慢查询日志,持续优化性能。
78 0
|
3月前
|
存储 缓存 关系型数据库
【MySQL调优】如何进行MySQL调优?一篇文章就够了!
MySQL调优主要分为三个步骤:监控报警、排查慢SQL、MySQL调优。 排查慢SQL:开启慢查询日志 、找出最慢的几条SQL、分析查询计划 。 MySQL调优: 基础优化:缓存优化、硬件优化、参数优化、定期清理垃圾、使用合适的存储引擎、读写分离、分库分表; 表设计优化:数据类型优化、冷热数据分表等。 索引优化:考虑索引失效的11个场景、遵循索引设计原则、连接查询优化、排序优化、深分页查询优化、覆盖索引、索引下推、用普通索引等。 SQL优化。
【MySQL调优】如何进行MySQL调优?一篇文章就够了!
|
6月前
|
SQL 算法 关系型数据库
【MySQL】专栏合集,从基础概念到调优
【MySQL】专栏合集,从基础概念到调优
46 0
|
4月前
|
关系型数据库 MySQL Java
面试官:说说MySQL调优?
面试官:说说MySQL调优?
95 5
面试官:说说MySQL调优?
|
4月前
|
SQL 关系型数据库 MySQL
Mysql原理与调优-事务与MVCC
【8月更文挑战第19天】