Mysql专栏 - mysql索引(一)

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介: Mysql专栏 - mysql索引(一)


前言

本文为mysql专栏系统索引的第一个小节的文章,索引包含的内容却是不少, 为了让这些知识点不过分的堆积在一起,这里会将本文拆分为多个小节,并且后续的内容会逐渐加深,本文更多是为索引的深入理解进行概念性的讲述,包含索引的基础结构页目录和数据页的关联,以及索引如何根据页目录扩展主键目录,以及后续的索引页的设计介绍进行前置内容的讲解。

概述

  1. 索引页的基础结构:数据页和页目录的介绍,介绍关于页分裂的细节,他是mysql维护索引的一项重要特性,直接影响索引的查询效率。
  2. 关于全表扫描的基础步骤理解,以及主键查询原理简单介绍,后续会做更加详细的介绍。
  3. 关于索引的概览:主键索引和BTree索引的基础设计介绍。

索引的基础结构

数据页

之前介绍过数据页的基本逻辑结构,在了解索引之前,我们先来了解索引的物理结构,首先我们需要知道在磁盘上大致如何存储:

在磁盘文件的结构:数据页的每一行其实是一个二进制的特殊格式,每一个数据页包含指针,一个指向上一个数据页,一个指向下一个数据页,也就是说数据页是用双向链表进行串联的。总而言之,数据页是多个链表进行串联的,那么按照推理数据行其实也是链表的方式进行存储的,不过使用的是单向的链表,并且数据行是按照主键从小到大进行排序的。

页目录

了解数据行的结构之后,接着就是和索引有关的结构,这个结构叫做页目录,为了维护数据页,每一个数据页的头部会包含页目录,根据数据行的主键进行存放,数据行同时被分散到不同的槽位上去。可以说页目录是一个从小到大排序的一个动态数组,里面存放的是键值对内容,键就是主键,值就是对应的数据页的数据行。

针对上面数据页和页目录,我们来看下整个页目录和数据页的的基础结构:

image.png

页分裂

既然提到了页目录和数据页的结构,下面需要介绍一个和索引有关的重要特性:页分裂。页分裂说的是在传统的物理存储结构上,数据页之间都是使用双向链表进行串联的,数据页内的数据行是单向链表的形式进行串联,比如像上面这样,此时如何我们新插入一条数据,会把数据按照链表的形式串联起来,并且如果主键是自增的情况下,他会按照主键自增的顺序进行链接。

**上面的情况在主键自增的情况下通常没有什么问题。**但是如果你的主键不是自增的,比如现在你插入12,下一次你插入8,就会出现问题了,此时就会很页分裂,关于页分裂的内容,可以看下面的格式:

什么是页分裂?

简单来讲,在一个多链表链接的多个数据页里面,页分裂会把一个主键较大的值挪动到新的的数据页,而新插入的主键较小的值会挪动到之前的数据页

1. 比如如果我们不按照自增的方式增长主键,就会出现下面的方式。

image.png

  1. 接着,根据页目录的维护规则,需要对于数据也进行挪移的动作,其实挪移的规则很简单:把主键更大的值挪到更新的数据页,把更小的值挪到一起

image.png

页分裂对于mysql的索引有哪些影响?

页分裂的行为会影响mysql的索引,可能会出现mysql找不到数据所在的页出现全表扫描

全表扫描

了解了数据页和页目录的基础结构之后,我们来看下全表扫描是如何处理的,全表扫描其实是数据页不断加载到缓冲区的过程,这个过程在之前的文章有过介绍这里不做过多赘述,在没有索引的情况下,数据页加载到缓冲区只能按照数据页的链表一个个访问,比如说加载第一个数据页没有找到数据,就加载第二个,没有第二个就加载第三个,以此类推,最后找到我们想要的数据为止,如果数据页十分多但是需要的数据零散的分布在多数的数据页上,这样的查找效率是非常低的。

最后我们针对索引做一个简单的介绍,这就好比你去图书馆找书,你要把所有的货架都扫完了才能找到你要的书,这样未免就太慢了,页目录就好像一个小册子,标记那一个货架有你要的书,然后找到对应的货架去扫描就行了。。

为了加快这个查找速度,我们最先想到的是主键查询的方式:

主键查询的原理

其实知道了页目录之后,我们就知道主键是如何查找的,主键是按照从小到大的顺序排序的,查找主键其实就是二分查找的方式按照页目录的排序进行查找找到对应的主键,然后取出对应的的槽位并且找到对应的数据页进行扫描,而数据页之间也是链表查找,找到数据页之后找到对应的数据行就行。这就是主键查询的大致思路。

索引介绍

主键索引

什么是主键索引?之前的页分裂我们了解了数据页会在主键上把主键的内容进行排序。而主键索引实际上就是针对主键制作一个主键目录,把每个数据页的页号,数据页最小的主键值放大一起,组成一个索引,这样通过找到最小的主键号就可以快速的找到对应的数据页和数据行了。

主键索引的结构图如下:

image.png

BTree索引(重点)

索引页的设计形式

接下来就是本文的重点也是mysql重要的btree索引,在具体的了解之前,我们需要了解一下他的索引设计结构,也就是索引页

什么是索引页?大家可以思考一下,如果把索引页和数据页分开成为单独的结构,其实是十分不方便的,这样增大了磁盘扫描和数据加载到内存的开销,并且数据页太多了之后存储页十分不方便,所以其实索引也是被设计为“数据页”的,只不过存储的内容和一般的数据页不一样,存储的是每个数据页的最小主键。这里为了更好的理解,我们从逻辑上把他们拆分为两种表现形式,下面我们用结构图来表示索引页的设计形式:

image.png

但是遇到一个问题,如果把索引页全都是平级的关系,会不知道找到哪一个索引页,所以在索引页存在上下级的关系,接下来我们又可以把索引页多加一个层级出来,在更高的索引层级里,保存了每个索引页的索引页的号码和索引页里的最小主键值

image.png

我们假设索引页如上面的设计,首先索引要先从35找到索引页1,然后使用索引页1的二分查找定位到目标的索引页,找到比如在数据页8里面有数据,然后找到数据页8的数据行进行扫描,找到最后的数据。因为在存储的过程中不断的分裂出一个层级,可以发现这种派生的方式其实就是组成一个bTree 的树。

以上就是关于BTree索引的大致设计概览,当然实际的细节远远没有上面说的简单,但是上面的内容可以基本了解关于索引的设计规则。

总结

这一节更像是对于mysql索引的底层入门介绍,但是内容并不算十分复杂。

写在最后

mysql的索引第一篇,关于索引更多的内容将会在后续的小节继续深入。

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
12天前
|
缓存 关系型数据库 MySQL
MySQL索引策略与查询性能调优实战
在实际应用中,需要根据具体的业务需求和查询模式,综合运用索引策略和查询性能调优方法,不断地测试和优化,以提高MySQL数据库的查询性能。
|
2月前
|
存储 关系型数据库 MySQL
阿里面试:为什么要索引?什么是MySQL索引?底层结构是什么?
尼恩是一位资深架构师,他在自己的读者交流群中分享了关于MySQL索引的重要知识点。索引是帮助MySQL高效获取数据的数据结构,主要作用包括显著提升查询速度、降低磁盘I/O次数、优化排序与分组操作以及提升复杂查询的性能。MySQL支持多种索引类型,如主键索引、唯一索引、普通索引、全文索引和空间数据索引。索引的底层数据结构主要是B+树,它能够有效支持范围查询和顺序遍历,同时保持高效的插入、删除和查找性能。尼恩还强调了索引的优缺点,并提供了多个面试题及其解答,帮助读者在面试中脱颖而出。相关资料可在公众号【技术自由圈】获取。
|
2月前
|
存储 NoSQL 关系型数据库
为什么MySQL不使用红黑树做索引
本文详细探讨了MySQL索引机制,解释了为何添加索引能提升查询效率。索引如同数据库的“目录”,在数据量庞大时提高查询速度。文中介绍了常见索引数据结构:哈希表、有序数组和搜索树(包括二叉树、平衡二叉树、红黑树、B-树和B+树)。重点分析了B+树在MyISAM和InnoDB引擎中的应用,并讨论了聚簇索引、非聚簇索引、联合索引及最左前缀原则。最后,还介绍了LSM-Tree在高频写入场景下的优势。通过对比多种数据结构,帮助理解不同场景下的索引选择。
88 6
|
2月前
|
SQL 关系型数据库 MySQL
案例剖析:MySQL唯一索引并发插入导致死锁!
案例剖析:MySQL唯一索引并发插入导致死锁!
117 0
案例剖析:MySQL唯一索引并发插入导致死锁!
|
2月前
|
存储 关系型数据库 MySQL
Mysql(4)—数据库索引
数据库索引是用于提高数据检索效率的数据结构,类似于书籍中的索引。它允许用户快速找到数据,而无需扫描整个表。MySQL中的索引可以显著提升查询速度,使数据库操作更加高效。索引的发展经历了从无索引、简单索引到B-树、哈希索引、位图索引、全文索引等多个阶段。
64 3
Mysql(4)—数据库索引
|
26天前
|
监控 关系型数据库 MySQL
数据库优化:MySQL索引策略与查询性能调优实战
【10月更文挑战第27天】本文深入探讨了MySQL的索引策略和查询性能调优技巧。通过介绍B-Tree索引、哈希索引和全文索引等不同类型,以及如何创建和维护索引,结合实战案例分析查询执行计划,帮助读者掌握提升查询性能的方法。定期优化索引和调整查询语句是提高数据库性能的关键。
136 1
|
2月前
|
存储 关系型数据库 MySQL
如何在MySQL中进行索引的创建和管理?
【10月更文挑战第16天】如何在MySQL中进行索引的创建和管理?
70 1
|
26天前
|
监控 关系型数据库 MySQL
数据库优化:MySQL索引策略与查询性能调优实战
【10月更文挑战第26天】数据库作为现代应用系统的核心组件,其性能优化至关重要。本文主要探讨MySQL的索引策略与查询性能调优。通过合理创建索引(如B-Tree、复合索引)和优化查询语句(如使用EXPLAIN、优化分页查询),可以显著提升数据库的响应速度和稳定性。实践中还需定期审查慢查询日志,持续优化性能。
56 0
|
2月前
|
监控 关系型数据库 MySQL
MySQL数据表索引命名规范
MySQL数据表索引命名规范
76 1
|
2月前
|
存储 SQL 关系型数据库
mysql中主键索引和联合索引的原理与区别
本文详细介绍了MySQL中的主键索引和联合索引原理及其区别。主键索引按主键值排序,叶节点仅存储数据区,而索引页则存储索引和指向数据域的指针。联合索引由多个字段组成,遵循最左前缀原则,可提高查询效率。文章还探讨了索引扫描原理、索引失效情况及设计原则,并对比了InnoDB与MyISAM存储引擎中聚簇索引和非聚簇索引的特点。对于优化MySQL性能具有参考价值。