MySQL查询原理,看这一篇就够了!

简介: MySQL查询原理,看这一篇就够了!

查询原理篇

上篇文章MySQL索引篇熟悉了MySQL的索引,这篇文章来熟悉查询相关的原理

连接原理

selecte * from t1,t2 where t1.m1 > 1 and t1.m1 = t2.m2 and t2.n2 < 'd'

image.png

先在驱动表t1上使用二级索引或者聚簇索引根据t1.m1 > 1寻找符合的记录(如图中2号位置),再根据这条记录 t1.m1 = 2 去匹配另一个查询条件 2 = t2.m2 ,然后再匹配其他查询条件再被驱动表t2上查找,找到还可能需要回表查询所有记录,然后再从驱动表上寻找下一条记录

访问一次驱动表,根据驱动表的结果集来访问多次被驱动表

因此驱动表结果集越小访问被驱动表的次数就越少,因此最好小表驱动大表

这种嵌套循环连接的方式时间复杂度是指数级别的,如果联多个表时间开销会指数级增长

由于访问多次被驱动表,在联表查询时可以适当的在被驱动表上建立索引来加快连接

联表查询中使用索引的情况下,可能索引列不满足查询列表,因此会回表,这种情况下回表会产生随机IO,innodb会通过MRR缓冲排序主键值再回表,以此来避免随机IO

在嵌套循环连接且无法使用索引的情况下,时间开销会很大,innodb使用基于块的嵌套循环连接来优化:申请一块join buffer,将驱动表记录放在join buffer中,再访问被驱动表时就能够用join buffer中的记录与被驱动表记录对比,join buffer够大的情况下,完全可以只访问一次被驱动表

join buffer中存储查询列表和搜索条件,因此查询列表不要用*,在无法使用索引的情况下也可以适当增大join buffer

查询优化

优化器会对SQL的查询条件进行优化,比如移除永远为true或false的表达式、移除一些不必要的括号等

查询排序

在使用order by、group by的情况下会对某个列进行排序,如果这个列是索引列,那么使用该索引查询时,它天然就是有序的;但如果这个列不是索引列,则可能先使用二级索引或者聚簇索引查出结果集,在将这些结果放在sort buffer中对要排序的列进行排序。

对于内存充足,查询量不大的情况下使用全字段排序,sort buffer中存在完整的记录,再对需要排序的列排序后直接返回(图中对name排序,先使用city二级索引查询再排序)

image.png

对于内存不足,查询量大的情况下使用rowid排序,sort buffer中只存需要排序的列和主键值,排序好后再通过回表的方式获取完整记录

image.png

外连接消除

外连接与内连接的区别就是内连接的驱动表与被驱动表可以由优化器来选择最优的结果,而外连接由编写SQL来指定

外连接使用on来针对驱动表记录没在被驱动表中匹配时将被驱动表中的值填充为NULL加入结果集,因此只要在where条件中隐式的指定被驱动表其他列不能为NULL,就不能加入结果集,这样就能够消除外连接与内连接区别,从而让优化器来选择最优的驱动表与被驱动表

in子查询半连接优化

in 子查询半连接优化:在一定条件下会将子查询物化成一个临时表(数据量小在内存中使用哈希索引;数据量大在磁盘中使用B+树索引),由临时表与外部查询的表进行内连接,并通过一些措施防止取重复值(唯一索引保证不重复、去重等)

总结

驱动表访问一次,被驱动表访问多次,适当为被驱动表建立索引;不使用索引加快的情况下,会使用join buffer,适当增大join buffer;不要在查询列表中使用*,可能导致不使用覆盖索引、占用join buffer空间等

查询中使用order by或group by时会排序,尽量为要排序的列建立索引,否则还要使用临时表sort buffer去排序;数据量小时使用全字段排序,数据量大的情况下使用rowid排序,排序完还要进行回表查询完整记录

联表查询使用外连接时,如果能够隐式的让被驱动表其他列不为null就可以触发外连接消除,由优化器来选择最优驱动表与被驱动表

in子查询使用半连接优化,一定条件下将子查询物化为临时表,根据防重复措施来与外部查询进行内连接


相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。 &nbsp; 相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情:&nbsp;https://www.aliyun.com/product/rds/mysql&nbsp;
相关文章
|
10月前
|
SQL 缓存 监控
MySQL缓存机制:查询缓存与缓冲池优化
MySQL缓存机制是提升数据库性能的关键。本文深入解析了MySQL的缓存体系,包括已弃用的查询缓存和核心的InnoDB缓冲池,帮助理解缓存优化原理。通过合理配置,可显著提升数据库性能,甚至达到10倍以上的效果。
|
10月前
|
SQL 存储 关系型数据库
MySQL体系结构详解:一条SQL查询的旅程
本文深入解析MySQL内部架构,从SQL查询的执行流程到性能优化技巧,涵盖连接建立、查询处理、执行阶段及存储引擎工作机制,帮助开发者理解MySQL运行原理并提升数据库性能。
|
12月前
|
SQL 人工智能 关系型数据库
如何实现MySQL百万级数据的查询?
本文探讨了在MySQL中对百万级数据进行排序分页查询的优化策略。面对五百万条数据,传统的浅分页和深分页查询效率较低,尤其深分页因偏移量大导致性能显著下降。通过为排序字段添加索引、使用联合索引、手动回表等方法,有效提升了查询速度。最终建议根据业务需求选择合适方案:浅分页可加单列索引,深分页推荐联合索引或子查询优化,同时结合前端传递最后一条数据ID的方式实现高效翻页。
584 0
|
10月前
|
SQL 监控 关系型数据库
SQL优化技巧:让MySQL查询快人一步
本文深入解析了MySQL查询优化的核心技巧,涵盖索引设计、查询重写、分页优化、批量操作、数据类型优化及性能监控等方面,帮助开发者显著提升数据库性能,解决慢查询问题,适用于高并发与大数据场景。
|
10月前
|
SQL 关系型数据库 MySQL
MySQL的查询操作语法要点
储存过程(Stored Procedures) 和 函数(Functions) : 储存过程和函数允许用户编写 SQL 脚本执行复杂任务.
371 14
|
10月前
|
SQL 关系型数据库 MySQL
MySQL的查询操作语法要点
以上概述了MySQL 中常见且重要 的几种 SQL 查询及其相关概念 这些知识点对任何希望有效利用 MySQL 进行数据库管理工作者都至关重要
247 15
|
10月前
|
SQL 关系型数据库 MySQL
MySQL入门指南:从安装到第一个查询
本文为MySQL数据库入门指南,内容涵盖从安装配置到基础操作与SQL语法的详细教程。文章首先介绍在Windows、macOS和Linux系统中安装MySQL的步骤,并指导进行初始配置和安全设置。随后讲解数据库和表的创建与管理,包括表结构设计、字段定义和约束设置。接着系统介绍SQL语句的基本操作,如插入、查询、更新和删除数据。此外,文章还涉及高级查询技巧,包括多表连接、聚合函数和子查询的应用。通过实战案例,帮助读者掌握复杂查询与数据修改。最后附有常见问题解答和实用技巧,如数据导入导出和常用函数使用。适合初学者快速入门MySQL数据库,助力数据库技能提升。
|
11月前
|
存储 关系型数据库 MySQL
使用命令行cmd查询MySQL表结构信息技巧分享。
掌握了这些命令和技巧,您就能快速并有效地从命令行中查询MySQL表的结构信息,进而支持数据库维护、架构审查和优化等工作。
849 9
|
10月前
|
SQL 监控 关系型数据库
MySQL高级查询技巧:子查询、联接与集合操作
本文深入解析了MySQL高级查询的核心技术,包括子查询、联接和集合操作,通过实际业务场景展示了其语法、性能差异和适用场景,并提供大量可复用的代码示例,助你从SQL新手进阶为数据操作高手。
|
12月前
|
人工智能 Java 关系型数据库
Java的时间处理与Mysql的时间查询
本文总结了Java中时间与日历的常用操作,包括时间的转换、格式化、日期加减及比较,并介绍了MySQL中按天、周、月、季度和年进行时间范围查询的方法,适用于日常开发中的时间处理需求。
222 0

推荐镜像

更多