MYSQL索引

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS PostgreSQL,集群系列 2核4GB
简介: MYSQL索引

索引

索引分类:主键索引、唯一索引、普通索引、组合索引、以及全文索引;

主键索引

非空唯一索引,一个表只有一个主键索引;在 innodb 中,主键索引的B+树包含表数据信息;

PRIMARY KEY(key)

唯一索引

不可以出现相同的值,可以有NULL值;

UNIQUE(key)

普通索引

允许出现相同的索引内容;

INDEX(key)

-- OR

KEY(key[,...])

组合索引

对表上的多个列进行索引

INDEX idx(key1,key2[,...]);

UNIQUE(key1,key2[,...]);

PRIMARY KEY(key1,key2[,...]);

全文索引

将存储在数据库当中的整本书和整篇文章中的任意内容信息查找出来的技术;

关键词 FULLTEXT; 在短字符串中用 LIKE % ;在全文索引中用 match 和 against ;

主键选择

innodb 中表是索引组织表,每张表有且仅有一个主键;

1. 如果显示设置 PRIMARY KEY ,则该设置的key为该表的主键;

2. 如果没有显示设置,则从非空唯一索引中选择;

        1. 只有一个非空唯一索引,则选择该索引为主键;

        2. 有多个非空唯一索引,则选择声明的第一个为主键;

3. 没有非空唯一索引,则自动生成一个 6 字节的 _rowid 作为主键;

约束

为了实现数据的完整性,对于innodb,提供了以下几种约束,primary key,unique key, foreign key, default, not null;

外键约束

外键用来关联两个表,来保证参照完整性;MyISAM存储引擎本身并不支持外键,只起到注释作 用;而innodb完整支持外键;

create table parent (
id int not null,
primary key(id)
) engine=innodb;
create table child (
id int,
parent_id int,
foreign key(parent_id) references parent(id) ON DELETE CASCADE ON UPDATE
CASCADE
) engine=innodb;
-- 被引用的表为父表,引用的表称为子表;
-- 外键定义时,可以设置行为 ON DELETE 和 ON UPDATE,行为发生时的操作可选择:
-- CASCADE 子表做同样的行为
-- SET NULL 更新子表相应字段为 NULL
-- NO ACTION 父类做相应行为报错
-- RESTRICT 同 NO ACTION
INSERT INTO parent VALUES (1);
INSERT INTO parent VALUES (2);
INSERT INTO child VALUES (10, 1);
INSERT INTO child VALUES (20, 2);
DELETE FROM parent WHERE id = 1;

约束于索引的区别

创建主键索引或者唯一索引的时候同时创建了相应的约束;但是约束是逻辑上的概念;索引是一个数据结构既包含逻辑的概念也包含物理的存储方式;

索引实现

索引存储

innodb由段、区、页组成;段分为数据段、索引段、回滚段等;区大小为 1 MB(一个区由64个 连续页构成);页的默认值为16k;页为逻辑页,磁盘物理页大小一般为 4K 或者 8K;为了保证区 中的页的连续,存储引擎一般一次从磁盘中申请 4~5 个区;

页是 innodb 磁盘管理的最小单位;默认16k,可通过 innodb_page_size 参数来修改; B+树的一个节点的大小就是该页的值;

B+树

聚集索引

按照主键构造的 B+ 树;叶子节点中存放数据页;数据也是索引的一部分;

select * from user where id >= 18 and id < 40;

辅助索引(非聚集索引)

叶子节点不包含行记录的全部数据;辅助索引的叶子节点中,除了用来排序的 key 还 包含一个 bookmark ;该书签存储了聚集索引的 key;

-- 某个表 包含 id name lockyNum; id是主键,lockyNum存储辅助索引; select * from user where lockyNum = 33;

最左匹配原则

对于组合索引,从左到右依次匹配,遇到 > < between like 就停止匹配;

覆盖索引

从辅助索引中就能找到数据,而不需通过聚集索引查找;利用辅助索引树高度一般低于聚集索引 树;较少磁盘io;

索引失效

select ... where A and B 若 A 和 B 中有一个不包含索引,则索引失效;

索引字段参与运算,则索引失效;例如: from_unixtime(idx) = '2021-04-30';

索引字段发生隐式转换,则索引失效;例如: '1' 隐式转换为 1 ;

LIKE 模糊查询,通配符 % 开头,则索引失效;例如: select * from user where name like '%ark';

在索引字段上使用 NOT <> != 索引失效;如果判断 id <> 0 则修改为 idx > 0 or idx < 0 ;

组合索引中,没使用第一列索引,索引失效;(如果复合覆盖索引的话,是不成立的)

索引原则

查询频次较⾼且数据量⼤的表建⽴索引;索引选择使⽤频次较⾼,过滤效果好的列或者组合;

使⽤短索引;节点包含的信息多,较少磁盘io操作;

对于很长的动态字符串,考虑使用前缀索引;

有时候需要索引很长的字符串,这会让索引变的大且慢,通常情况下可以使用某个列开始的 部分字符串,这样大大的节约索引空间,从而提高索引效率,但这会降低索引的选择性,索 引的选择性是指不重复的索引值和数据表记录总数的比值。索引的选择性越高则查询效率越 高,因为选择性更高的索引可以让mysql在查找的时候过滤掉更多的行。对于 BLOB,TEXT,VARCHAR类型的列,必须要使用前缀索引,因为mysql不允许索引这些列的完整 长度,使用该方法的诀窍在于要选择足够长的前缀以保证较高的选择性,通过又不能太长。

select count(distinct left(name,3))/count(*) as sel3,
count(distinct left(name,4))/count(*) as sel4,
count(distinct left(name,5))/count(*) as sel5,
count(distinct left(name,6))/count(*) as sel6,
from user;
alter table user add key(name(4));
-- 注意:前缀索引不能做 order by 和 group by

对于组合索引,考虑最左侧匹配原则和覆盖索引;

尽量选择区分度⾼的列作为索引;该列的值相同的越少越好;

select count(distinct idx) / count(*) from table_name;

尽量扩展索引,在现有索引的基础上,添加复合索引;

不要 select * ; 尽量只列出需要的列字段;

索引列,列尽量设置为非空;

SQL优化

MySQL :: MySQL 5.7 Reference Manual :: 8 Optimization

EXPLAIN

用来查看SQL语句的具体执行过程。

原理:模拟优化器执行SQL查询语句,从而知道mysql是如何处理sql语句的。

执行计划

id

select查询的序列号,包含一组数字,表示查询中执行select子句或者操作表的顺序; id号分为三种情况:

1. id相同,那么执行顺序从上到下;

2. id不同,id越大越先执行;

3. id有相同的也有不同的,id相同的按 1 执行,id不同的按 2 执行;

select_type

主要用来分辨查询的类型,是普通查询还是联合查询还是子查询

table

对应行正在访问哪一个表,表名或者别名,可能是临时表或者union合并结果集;

1. 具体表名或者表的别名,从具体的物理表中获取数据;

2. 表明为derivedN的形式,表示 id 为 N 的查询产生的衍生表;

3. 当有union result的时候,表名是union n1,n2等的形式,n1,n2表示参与union的id;

type

type 显示访问类型;采用怎么样的方式来访问数据;效率从好到坏依次为:
system > const > eq_ref > ref > fulltext > ref_or_null > index_merge > unique_subquery >
index_subquery > range > index > ALL
ALL : 全表扫描;如果数据量大则需要进行优化;
index :全索引扫描这个比 ALL 的效率要好,主要有两种情况,一种是当前的查询时覆盖索引,
即我们需要的数据在索引中就可以索取,或者是使用了索引进行排序,这样就避免数据的重排序;
range :表示利用索引查询的时候限制了范围,在指定范围内进行查询,这样避免了 index 的全
索引扫描,适用的操作符: = , <> , > , >= , < , <= , IS NULL , BETWEEN , LIKE , or IN()
index_subquery :利用索引来关联子查询,不再扫描全表;
unique_subquery :该连接类型类似与 index_subquery ,使用的是唯一索引;
index_merge :在查询过程中需要多个索引组合使用;
ref_or_null :对于某个字段即需要关联条件,也需要 null 值的情况下,查询优化器会选择这
种访问方式;
ref :使用了非唯一性索引进行数据的查找;
eq_ref :使用唯一性索引进行数据查找;
const :这个表至多有一个匹配行;
system :表只有一行记录(等于系统表),这是 const 类型的特例;

possible_keys

查询涉及到字段的索引,则这些索引都会列举出来,但是不一定采纳;

key

实际使用的索引,如果为 NULL ,则没有使用索引

key_len

表示索引中使用的字节数;查询中使用的索引长度;在不损失精度的情况下长度越短越好。

ref

显示索引的哪一列被使用了,如果可能的话,是一个常数;

rows

大致估算出找出所需记录需要读取的行数,反映了sql找了多少条数据,该值越小越好。

extra

额外信息;
using filesort :使用了文件排序;
using temporary :建立临时表来保存中间结果,查询完成之后把临时表删除;
using index :采用覆盖索引,直接从索引中读取数据,而不用访问数据表。如果同时出现using
where 表名索引被用来执行索引键值的查找,如果没有,表面索引被用来读取数据,而不是真的
查找;
using where :使用where进行条件过滤;
using join buffer :使用连接缓存;
impossible where : where 语句的结果总是 false ;

优化器选择过程

优化器根据解析树可能会生成多个执行计划,然后选择最优的的执行计划;

SHOW VARIABLES LIKE 'optimizer_trace';
-- 启用优化器的追踪
SET optimizer_trace='enabled=on';
-- 执行一条查询语句
SELECT * FROM information_schema.optimizer_trace;
-- 用完关闭
SET optimizer_trace="enabled=off";
SHOW VARIABLES LIKE 'optimizer_trace';

慢日志查询

详情

MySQL :: MySQL 5.7 Reference Manual :: 5.4.5 The Slow Query Log

开启

查看

SHOW GLOBAL VARIABLES LIKE 'slow_query%';

SHOW GLOBAL VARIABLES LIKE 'long_query%';

设置

SET GLOBAL slow_query_log = ON; -- on 开启 off 关闭

SET GLOBAL long_query_time = 4; -- 单位秒;默认10s;此时设置为4s

或者修改配置

slow_query_log = ON

long_query_time = 4

slow_query_log_file = D:/mysql/mysql57-slow.log

mysqldumpslow

查找最近10条慢查询日志

mysqldumpslow -s t -t 10 -g 'select' D:/mysql/mysql57-slow.log

SHOW PROFILE

# 查看是否开启
SELECT @@profiling;
# 设置开启
SET profiling = 1;
# 查看所有 profiles
show profiles;
# 查看query id 为 10 那条查询
show profile for query 10;
# 查看最后一条查询
show profile;
# 最后关闭
SET profiling = 0;

SHOW PROCESSLIST

查看连接线程;可以查看此时线上运行的 sql 语句;

如果要查看完整的SQL语句:SHOW FULL PROCESSLIST; 然后优化该语句;

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助 &nbsp; &nbsp; 相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
4天前
|
存储 关系型数据库 MySQL
阿里面试:为什么要索引?什么是MySQL索引?底层结构是什么?
尼恩是一位资深架构师,他在自己的读者交流群中分享了关于MySQL索引的重要知识点。索引是帮助MySQL高效获取数据的数据结构,主要作用包括显著提升查询速度、降低磁盘I/O次数、优化排序与分组操作以及提升复杂查询的性能。MySQL支持多种索引类型,如主键索引、唯一索引、普通索引、全文索引和空间数据索引。索引的底层数据结构主要是B+树,它能够有效支持范围查询和顺序遍历,同时保持高效的插入、删除和查找性能。尼恩还强调了索引的优缺点,并提供了多个面试题及其解答,帮助读者在面试中脱颖而出。相关资料可在公众号【技术自由圈】获取。
|
21天前
|
存储 NoSQL 关系型数据库
为什么MySQL不使用红黑树做索引
本文详细探讨了MySQL索引机制,解释了为何添加索引能提升查询效率。索引如同数据库的“目录”,在数据量庞大时提高查询速度。文中介绍了常见索引数据结构:哈希表、有序数组和搜索树(包括二叉树、平衡二叉树、红黑树、B-树和B+树)。重点分析了B+树在MyISAM和InnoDB引擎中的应用,并讨论了聚簇索引、非聚簇索引、联合索引及最左前缀原则。最后,还介绍了LSM-Tree在高频写入场景下的优势。通过对比多种数据结构,帮助理解不同场景下的索引选择。
59 6
|
17天前
|
SQL 关系型数据库 MySQL
案例剖析:MySQL唯一索引并发插入导致死锁!
案例剖析:MySQL唯一索引并发插入导致死锁!
案例剖析:MySQL唯一索引并发插入导致死锁!
|
11天前
|
存储 关系型数据库 MySQL
Mysql(4)—数据库索引
数据库索引是用于提高数据检索效率的数据结构,类似于书籍中的索引。它允许用户快速找到数据,而无需扫描整个表。MySQL中的索引可以显著提升查询速度,使数据库操作更加高效。索引的发展经历了从无索引、简单索引到B-树、哈希索引、位图索引、全文索引等多个阶段。
46 3
Mysql(4)—数据库索引
|
5天前
|
存储 关系型数据库 MySQL
如何在MySQL中进行索引的创建和管理?
【10月更文挑战第16天】如何在MySQL中进行索引的创建和管理?
22 1
|
21天前
|
监控 关系型数据库 MySQL
MySQL数据表索引命名规范
MySQL数据表索引命名规范
27 1
|
21天前
|
存储 SQL 关系型数据库
mysql中主键索引和联合索引的原理与区别
本文详细介绍了MySQL中的主键索引和联合索引原理及其区别。主键索引按主键值排序,叶节点仅存储数据区,而索引页则存储索引和指向数据域的指针。联合索引由多个字段组成,遵循最左前缀原则,可提高查询效率。文章还探讨了索引扫描原理、索引失效情况及设计原则,并对比了InnoDB与MyISAM存储引擎中聚簇索引和非聚簇索引的特点。对于优化MySQL性能具有参考价值。
|
27天前
|
存储 关系型数据库 MySQL
MySQL中的索引及怎么使用
综上所述,MySQL索引的正确使用是数据库性能调优的关键一环。通过合理设计索引结构,结合业务需求和数据特性,可以有效提升数据库查询响应速度,降低系统资源消耗,从而确保应用的高效运行。
51 1
|
7天前
|
监控 关系型数据库 MySQL
mysql8索引优化
综上所述,深入理解和有效实施这些索引优化策略,是解锁MySQL 8.0数据库高性能查询的关键。
19 0
|
2月前
|
关系型数据库 MySQL 数据库
MySQL删除全局唯一索引unique
这篇文章介绍了如何在MySQL数据库中删除全局唯一的索引(unique index),包括查看索引、删除索引的方法和确认删除后的状态。
74 9