MySQL逻辑架构、存储引擎和SQL预热 --【MySQL高级篇1】

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,高可用系列 2核4GB
简介: MySQL逻辑架构、存储引擎和SQL预热

1、MySQL逻辑架构简介

和其他数据库相比,MySQL有点与众不同,它的架构可以在多种不同的场景中应用并发挥良好的作用,主要体现在存储引擎的架构上。插件式的存储引擎架构将查询处理和其他的系统任务以及数据的存储提取相分离。这种架构可以根据业务的需求和实际需要选择合适的存储引擎。

在这里插入图片描述

  1. 连接层最上层是一些客户端和连接服务,包含本地sock通信和大多数基于客户端/服务端工具实现的类似tcp/ip的通信。
  2. 服务层第二层架构主要完成大多数的核心服务,如SQL接口,并完成缓存的查询,SQL的分析进而优化及部分内置函数的执行。所有跨存储引擎的功能也在这一层实现,如过程、函数等。在该层,服务器会解析查询并创建相应的内部解析树,并对其完成相应的优化如确定表的顺序,是否利用索引等,最后生成相应的执行操作。如果是select语句,服务器还会查询内部的缓存。如果缓存空间足够大,这样在解决大量读的操作的环境下能够很好的提升系统的性能。
  3. 引擎层存储引擎层,存储引擎真正的负责了MySQL中的数据的存储和提取,服务器通过API与存储引擎进行通信。不同的存储引擎具有的功能不同,这样我们可以根据自己的实际需要进行选取。
  4. 存储层数据存储层,主要是将数据存储在运行于裸机设备的文件系统之上,并完成与存储引擎的交互

2、存储引擎简介

对比项 MsISAM InnoDB
主外键 不支持 支持
事务 不支持 支持
行表锁 表锁,即使操作一条记录也会锁住整个表,不适合高并发的操作 行锁,操作时只锁住某一行,不对其他行有影响,适合高并发的操作
缓存 只缓存索引,不缓存真实数据 不仅缓存索引还要缓存真实数据,对内存要求较高,而且内存大小对性能有决定性的影响
表空间
关注点 性能 事务
默认安装 Y Y
  • 阿里巴巴大部分mysql数据库其实使用的percona的原型加以修改。
  • AliSql + AliRedis

3、SQL预热

3.1、性能下降SQL慢

1. 表现

  • 执行时间长
  • 等待时间长

2. 原因

  • 查询语句写的烂。
  • 索引失效。有单值索引和复合索引
  • 关联查询太多join(设计缺陷或不得已的需求)
  • 服务器调优及各个参数设置不合理(缓冲、线程数等)

3.2、SQL执行顺序

1. 手写

SELECT DISTINCT
    < select list >
FROM
    < left_table > < join_type >
JOIN < right_table > ON < join_condition >
WHERE 
    < where_condition >
GROUP BY
    < group_by_list >
HAVING
    < having_condition >
ORDER BY
    < order_by_condition>
LIMIT < limit_number >

2. 机读

1 FROM < left_table >
2 ON < join_condition >
3 < join_type > JOIN < right_table >
4 WHERE < where_condition >
5 GROUP BY < group_by_list >
6 HAVING < having_condition >
7 SELECT
8 DISTINCT < select list >
9 ORDER BY < order_by_condition>
10 LIMIT < limit_number >

3. 总结

在这里插入图片描述

3.3、七种JOIN理论

1. LEFT JOIN

在这里插入图片描述
SQL语句

SELECT <select_list> FROM TableA A LEFT JOIN TableB B ON A.key=B.Key

2. RIGHT JOIN

在这里插入图片描述
SQL语句

SELECT <select_list> FROM TableA A RIGHT JOIN TableB B ON A.key=B.Key

3. INNER JOIN

在这里插入图片描述
SQL语句

SELECT <select_list> FROM TableA A INNER JOIN TableB B ON A.key=B.Key

4. LEFT JOIN + WHERE B.Key Is NULL

在这里插入图片描述
SQL语句

SELECT <select_list> FROM TableA A LEFT JOIN TableB B ON A.key=B.Key WHERE B.Key Is NULL

5. RIGHT JOIN + WHERE A.Key Is NULL

在这里插入图片描述
SQL语句

SELECT <select_list> FROM TableA A RIGHT JOIN TableB B ON A.key=B.Key WHERE A.Key Is NULL

6. FULL OUTER

在这里插入图片描述

SQL语句

SELECT <select_list> FROM TableA A FULL OUTER JOIN TableB B ON A.key=B.Key 

7. FULL OUTER JOIN + WHERE A.Key Is NULL OR B.Key Is NULL

在这里插入图片描述

SQL语句

SELECT <select_list> FROM TableA A FULL OUTER JOIN TableB B ON A.key=B.Key WHERE A.Key Is NULL OR B.Key Is NULL

3.4、七种JOIN的编写

建表和插入数据的SQL语句

CREATE TABLE `tbl_emp`  (
 `id` INT(11) NOT NULL AUTO_INCREMENT,
`name` VARCHAR(20)  DEFAULT NULL,
`deptId` INT(11) DEFAULT NULL,
 PRIMARY KEY (`id`) ,
KEY `fk_dept_id`(`deptId`)
)ENGINE = INNODB AUTO_INCREMENT = 1 CHARACTER SET = utf8;

 CREATE TABLE `tbl_dept`  (
 `id` INT(11) NOT NULL AUTO_INCREMENT,
`deptName` VARCHAR(30) DEFAULT NULL,
 `locAdd` VARCHAR(40) DEFAULT NULL,
 PRIMARY KEY (`id`)
) ENGINE = INNODB AUTO_INCREMENT = 1 CHARACTER SET = utf8;

INSERT INTO tbl_dept VALUES(NULL,'RD',1);
INSERT INTO tbl_dept VALUES(NULL,'HR',12);
INSERT INTO tbl_dept VALUES(NULL,'MK',13);
INSERT INTO tbl_dept VALUES(NULL,'MIS',14);
INSERT INTO tbl_dept VALUES(NULL,'FD',15);

INSERT INTO tbl_emp VALUES(NULL,'z3',1);
INSERT INTO tbl_emp VALUES(NULL,'z4',1);
INSERT INTO tbl_emp VALUES(NULL,'z5',1);
INSERT INTO tbl_emp VALUES(NULL,'w5',2);
INSERT INTO tbl_emp VALUES(NULL,'w6',2);
INSERT INTO tbl_emp VALUES(NULL,'s7',3);
INSERT INTO tbl_emp VALUES(NULL,'s8',4);
INSERT INTO tbl_emp VALUES(NULL,'s9',51);

1. LEFT JOIN

SELECT * FROM tbl_emp a LEFT JOIN tbl_dept b ON a.deptId=b.id

在这里插入图片描述
说明

就是左边表有的但没有和右边表共有,那么 右边表的相应数据补NULL

2. RIGHT JOIN

SELECT * FROM tbl_emp a RIGHT JOIN tbl_dept b ON a.deptId=b.id

在这里插入图片描述
说明

就是右边表有的但没有和左边表共有,那么 左边表的相应数据补NULL

3. INNER JOIN

SELECT * FROM tbl_emp a INNER JOIN tbl_dept b ON a.deptId=b.id

在这里插入图片描述

4. LEFT JOIN + WHERE B.Key Is NULL

SELECT * FROM tbl_emp a LEFT JOIN tbl_dept b ON a.deptId=b.id WHERE b.id IS NULL

在这里插入图片描述
说明

左边表有的但右边表没有的

5. RIGHT JOIN + WHERE A.Key Is NULL

SELECT * FROM tbl_emp a RIGHT JOIN tbl_dept b ON a.deptId=b.id WHERE a.deptId IS NULL

在这里插入图片描述
说明

右边表有的但左边表没有的

6. FULL OUTER

SELECT * FROM tbl_emp a RIGHT JOIN tbl_dept b ON a.deptId=b.id
UNION
SELECT * FROM tbl_emp a LEFT JOIN tbl_dept b ON a.deptId=b.id

在这里插入图片描述

7. FULL OUTER JOIN + WHERE A.Key Is NULL OR B.Key Is NULL

SELECT * FROM tbl_emp a RIGHT JOIN tbl_dept b ON a.deptId=b.id WHERE a.deptId IS NULL
UNION
SELECT * FROM tbl_emp a LEFT JOIN tbl_dept b ON a.deptId=b.id WHERE b.id IS NULL

在这里插入图片描述

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助 &nbsp; &nbsp; 相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
20天前
|
存储 SQL 关系型数据库
Mysql高可用架构方案
本文阐述了Mysql高可用架构方案,介绍了 主从模式,MHA模式,MMM模式,MGR模式 方案的实现方式,没有哪个方案是完美的,开发人员在选择何种方案应用到项目中也没有标准答案,合适的才是最好的。
91 3
Mysql高可用架构方案
|
16天前
|
SQL 存储 缓存
【赵渝强老师】MySQL的体系架构
本文介绍了MySQL的体系架构,包括Server层的7个主要组件(Connectors、Connection Pool、Management Service & Utilities、SQL Interface、Parser、Optimizer、Query Caches & Buffers)及其作用,以及存储引擎层的支持情况,重点介绍了InnoDB存储引擎。文中还提供了相关图片和视频讲解。
【赵渝强老师】MySQL的体系架构
|
1月前
|
存储 SQL 关系型数据库
MySQL存储引擎
本文介绍了数据库优化的多个方面,包括选择合适的存储引擎、字段定义原则、避免使用外键和触发器、大文件存储策略、表拆分及字段冗余处理等。强调了从业务层面进行优化的重要性,如通过活动设计减少外部接口调用,以及在高并发场景下的流量控制与预处理措施。文章还提供了具体的SQL优化技巧和表结构优化建议,旨在提高数据库性能和可维护性。
MySQL存储引擎
|
16天前
|
存储 缓存 关系型数据库
【赵渝强老师】MySQL的MyISAM存储引擎
在MySQL5.1版本之前,默认存储引擎为MyISAM。MyISAM管理非事务表,提供高速存储和检索,支持全文搜索。其特点包括不支持事务、表级锁定、读写互阻、仅缓存索引等。适用于读多、写少且对一致性要求不高的场景。示例代码展示了MyISAM存储引擎的基本操作。
|
16天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL的InnoDB存储引擎
InnoDB是MySQL的默认存储引擎,广泛应用于互联网公司。它支持事务、行级锁、外键和高效处理大量数据。InnoDB的主要特性包括解决不可重复读和幻读问题、高并发度、B+树索引等。其存储结构分为逻辑和物理两部分,内存结构类似Oracle的SGA和PGA,线程结构包括主线程、I/O线程和其他辅助线程。
【赵渝强老师】MySQL的InnoDB存储引擎
|
16天前
|
存储 关系型数据库 MySQL
【赵渝强老师】MySQL的Memory存储引擎
MySQL 的存储引擎层负责数据的存储和提取,支持多种存储引擎,如 InnoDB、MyISAM 和 Memory。InnoDB 是最常用的存储引擎,从 MySQL 5.5.5 版本起成为默认引擎。Memory 存储引擎的数据仅存在于内存中,重启后数据会丢失。示例中创建了使用 Memory 引擎的 test3 表,并展示了数据在重启后消失的过程。
|
1月前
|
SQL 运维 关系型数据库
MySQL 运维 SQL 备忘
MySQL 运维 SQL 备忘录
47 1
|
1月前
|
存储 SQL 缓存
MySQL存储引擎如何完成一条更新语句的执行!
MySQL存储引擎如何完成一条更新语句的执行!
MySQL存储引擎如何完成一条更新语句的执行!
|
1月前
|
SQL 存储 关系型数据库
SQL文件导入MySQL数据库的详细指南
数据库中的数据转移是一项常规任务,无论是在数据迁移过程中,还是在数据备份、还原场景中,导入导出SQL文件显得尤为重要。特别是在使用MySQL数据库时,如何将SQL文件导入数据库是一项基本技能。本文将详细介绍如何将SQL文件导入MySQL数据库,并提供一个清晰、完整的步骤指南。这篇文章的内容字数大约在
201 1
|
26天前
|
SQL 关系型数据库 MySQL
MySql5.6版本开启慢SQL功能-本次采用永久生效方式
MySql5.6版本开启慢SQL功能-本次采用永久生效方式
36 0

热门文章

最新文章

下一篇
无影云桌面