索引-mysql详解(三)

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS PostgreSQL,集群系列 2核4GB
简介: 索引-mysql详解(三)

上篇文章说了,mysql可以指定行格式,compactdynamic,他结构有变长字段长度列表,null值,头部和真实数据存储,compact真实数据会存一定量的页,后面指向页的页码,dynamic全部存的页码,char会根据字符集来变换存储,行溢出是65535个字节,其中null值占一个,数据长度占两个,所以实际65532个字节,也会根据不同字节来变换。Index页存储这标记是否删除,删除的数据会组成垃圾链表,也叫可重用链表,而页里的数据,会根据next_Records来组成链表方便查询,二分查找法查找不同组的槽点。

InnoDB & index页-mysql详解(二)


索引


首先我们明确下页分裂是什么呢,因为每页是16kb,这时候数据存满肯定会存到另一个页,每个新页并不是连续的,但下一页必须数据大于前一页,所以当后面的页数据小于前面页的时候,需要数据移动交换下,这个过程就是页分裂。


于是我们如何通过索引目录来查找呢,因为前面说了页分裂是从小打大排序好的,所以每个目录key都是最小的主键值,value则就是页码,通过key来查找对应的页码找到对应存储数据的页。


其实索引目录就是跟之前数据页一样的存储格式,之前records_type 0 代表普通数据,2 3代表最小记录和最大记录,而剩下的1是什么呢,就是我们存储的目录项记录页(索引页)。

目录记录页普通页除了records_type不同外,还有 普通页前面说了除了存储我们需要的真实数据外,还有头部信息等额外数据,以及最重要的roll_point指针和transaction_id,而目录记录页只有最小主键和对应的页码。


根节点:

当一个记录页不能存储所有的主键和页码的时候,这时候有多个记录页,于是就出现了最上面的根节点,而第二层就是非叶子节点或者叫内节点,而最下面一层存数据的就是叫叶子节点,或者叶节点。

这样的组成之后就是b+树。


聚簇索引:当使用记录主键为值大小进行记录和页的排序,组成一个单向链表,各个存放数据的页是双向链表,b+树叶子节点存储的是完整的记录数(包括隐藏列)。这种聚簇索引并不需要我们显式的来创建,innoDB会自动创建,索引即数据,数据即索引。

二级索引:当不能以主键为查询条件来进行搜索的时候,这时候该怎么办呢,当我们以其他列来建立索引,以其他列来排序组成单向链表,存放数据的页组成双向链表,这种b+树的叶子节点存放的不是所有的数据,存放的时候二级索引和主键,非叶子节点的数据也不再是主键+页号,而是列+页号。这时候 查不到我们需要的值怎么办,用查询到的主键来回表查询。

联合索引:每个记录页都是列+页码组成,联合索引是两个列以上,先按前面的列进行排序,如果一致,则按后面的列进行排序,本质上也是一个二级索引,如果是联合索引则只会建立一颗b+树,如果联合索引的两个列分开创建索引,则是两颗树。


前面我们说了非叶子节点(内节点)存放的是列+页码,但这样是不准确的,如果列的数值都相同,那么他就没有唯一性,于是内节点存储的还有主键值,通过三个值来确定唯一性。

前面说的都是innodb,那么,MyISAM中的索引如何存储的呢?


我们前面说了innodb的聚簇索引是索引即数据,但myISAM是不同的,他是把索引和数据分开存储,myISAM有两个文件,数据文件 和 索引文件,数据文件即是我们存储的真实数据等,索引则会存放在索引文件里,先通过索引找到对应的行号,再通过行号去找对应的记录,意味着myISAM都是需要回表查询的。


索引的代价:

空间上的代价:显而易见,每次创建索引都需要创建一颗b+树,每个b+树每个节点都是数据页,组成起来就是很大的存储空间。

时间上的代价:我们前面说了索引在叶子节点和内节点上都是排序好的,如果每次新增修改删除数据,必定会导致b+树的修改,并且修改过后,页面的回收,页面的分配,记录的位移重新排序都需要大量的时间,所以时间消耗巨大。


联合索引查询的时候,有最左原则,当我们查询的时候,只查询最左边的数据也是会走索引的,而且如果查询多条数据,只要都包含在联合索引里,即使查询的时候顺序是乱的,查询优化器也会按照最左原则来优化查询。


联合索引范围查找的时候,最左边的列是可以使用索引查询的,但如果第二个索引需要使用到的话,最左边的列则不可以使用范围查询,需要精确值,因为只有相同的值才可以之后再排序。


1排序的时候也必须建立索引来排序,如果没有建立索引的排序这时候就属于filesort,文件排序,这时候是非常缓慢的。

2联合索引列的排序必须一致,不能一个列asc一个列desc

3并且排序的时候不能用不同索引的列。

所以因为排序是排好的,索引还可以用于分组。


回表查询的代价:

当我们查询二级索引的时候是顺序I/O会查询到多个不同的id,这些id会取查询聚簇索引,而且id是随机不是顺序的,于是查询聚簇索引的时候就是随机I/O,这时候性能就会下降很多,所以在有的时候,如果回表的查询记录数据太多,这时候mysql优化器会选择全表查询都不会走索引查。


当我们控制数量的时候,比如加个limit10,这时候就会更高级别走索引查询,同样的道理适用于排序,当后面加个limit,这时候会走索引。


如何完全不回表,当我们查询的列只有索引的时候,这时候就不需要再去查询聚簇索引里的其他值,这时候就属于覆盖索引,虽然查询的是二级索引的b+树,但是并不需要回表查询。

列的基数,当一个列都是重复的值,索引的排序没有效果,列的基数太小,则创建索引没有意义,所以创建索引选列基数大的。


自增主键的重要性:我们插入数据是按顺序在b+树排序好的,如果在中间插入一条数据,意味着重新排序和页分裂,意味着性能损耗,这时候自增主键保证新增的数据在后面。


相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
21天前
|
存储 SQL 关系型数据库
MySQL高级篇——索引失效的11种情况
索引优化思路、要尽量满足全值匹配、最佳左前缀法则、主键插入顺序尽量自增、计算、函数导致索引失效、类型转换(手动或自动)导致索引失效、范围条件右边的列索引失效、不等于符号导致索引失效、is not null、not like无法使用索引、左模糊查询导致索引失效、“OR”前后存在非索引列,导致索引失效、不同字符集导致索引失败,建议utf8mb4
MySQL高级篇——索引失效的11种情况
|
21天前
|
存储 SQL 关系型数据库
【MySQL调优】如何进行MySQL调优?从参数、数据建模、索引、SQL语句等方向,三万字详细解读MySQL的性能优化方案(2024版)
MySQL调优主要分为三个步骤:监控报警、排查慢SQL、MySQL调优。 排查慢SQL:开启慢查询日志 、找出最慢的几条SQL、分析查询计划 。 MySQL调优: 基础优化:缓存优化、硬件优化、参数优化、定期清理垃圾、使用合适的存储引擎、读写分离、分库分表; 表设计优化:数据类型优化、冷热数据分表等。 索引优化:考虑索引失效的11个场景、遵循索引设计原则、连接查询优化、排序优化、深分页查询优化、覆盖索引、索引下推、用普通索引等。 SQL优化。
168 15
【MySQL调优】如何进行MySQL调优?从参数、数据建模、索引、SQL语句等方向,三万字详细解读MySQL的性能优化方案(2024版)
|
21天前
|
存储 关系型数据库 MySQL
MySQL高级篇——覆盖索引、前缀索引、索引下推、SQL优化、主键设计
覆盖索引、前缀索引、索引下推、SQL优化、EXISTS 和 IN 的区分、建议COUNT(*)或COUNT(1)、建议SELECT(字段)而不是SELECT(*)、LIMIT 1 对优化的影响、多使用COMMIT、主键设计、自增主键的缺点、淘宝订单号的主键设计、MySQL 8.0改造UUID为有序
MySQL高级篇——覆盖索引、前缀索引、索引下推、SQL优化、主键设计
|
5天前
|
存储 关系型数据库 MySQL
MySQL索引失效及避免策略:优化查询性能的关键
MySQL索引失效及避免策略:优化查询性能的关键
22 3
|
10天前
|
关系型数据库 MySQL 数据库
MySQL删除全局唯一索引unique
这篇文章介绍了如何在MySQL数据库中删除全局唯一的索引(unique index),包括查看索引、删除索引的方法和确认删除后的状态。
32 9
|
5天前
|
存储 SQL 关系型数据库
MySQL 的索引是怎么组织的?
MySQL 的索引是怎么组织的?
11 1
|
5天前
|
存储 关系型数据库 MySQL
MySQL索引的概念与好处
本文介绍了MySQL存储引擎及其索引类型,重点对比了MyISAM与InnoDB引擎的不同之处。文中详细解释了InnoDB引擎的自适应Hash索引及聚簇索引的特点,并阐述了索引的重要性及使用原因,包括提升数据检索速度、实现数据唯一性等。最后,文章还讨论了主键索引的选择与页分裂问题,并提供了使用自增字段作为主键的建议。
MySQL索引的概念与好处
|
13天前
|
关系型数据库 MySQL 数据库
MYSQL索引的分类与创建语法详解
理解并合理应用这些索引类型,能够有效提高MySQL数据库的性能和查询效率。每种索引类型都有其特定的优势,适当地使用它们可以为数据库操作带来显著的性能提升。
37 3
|
5天前
|
监控 关系型数据库 MySQL
如何优化MySQL数据库的索引以提升性能?
如何优化MySQL数据库的索引以提升性能?
14 0
|
5天前
|
监控 关系型数据库 MySQL
深入理解MySQL数据库索引优化
深入理解MySQL数据库索引优化
12 0
下一篇
无影云桌面