MySQL底层存储B-Tree和B+Tree原理分析

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
云数据库 RDS MySQL,高可用系列 2核4GB
简介: MySQL底层存储B-Tree和B+Tree原理分析

1.B-Tree的原理分析

(1)什么是B-Tree

  • B-树,全称是 Balanced Tree,是一种多路平衡查找树。
  • 一个节点包括多个key (数量看业务),具有M阶的B树,每个节点最多有M-1个Key。
  • 节点的key元素个数就是指这个节点能够存储几个数据。
  • 每个节点最多有m个子节点,最少有M/2个子节点,其中M>2。
  • 数据集合分布在整个树里面,叶子节点和非叶子节点都存储数据;类似在整个树里面做一次二分查找。
  • B 树相对于平衡二叉树,每个节点存储了更多的键值(key)和数据(data)。
  • 实际业务中B树的阶数一般大于100,存储大量数据,B树高度也会很低,查询效率会更高。
  • 备注
  • 每个节点拥有最多的子节点,子节点的个数一般称为阶。
  • 阶:m阶是代表每个节点最多有m个分支(子树)。
  • 树的度:这棵树里面节点最大的度。
  • 节点的度:当前节点有几个子节点。



e6b63bcda291464baac2f8821759b228.jpg

(2)B树插入原理

  • 每个节点的数据都是顺序存储,具有M阶的B树,树的阶数表示每个结点最多可以有多少个子结点


9ddb842faada47b3a8613aa909352042.gif

(3)B树的应用场景

  • 在数据库中,B树用来维护索引,用来提高查询效率,一个节点可以存储整个页(即磁盘块)
  • 在文件系统中,B树用来存储文件的目录信息,提高文件的访问效率
  • 在操作系统中,B树可以用来存储内存管理信息,提高内存的分配效率
  • (4)思考:3层的B树,阶数为1024,最多容纳多少个元素?
  • B树的阶数表示每个结点最多可以有多少个子结点,因此B树的阶数为1024,表示每个结点最多可以有1024个子结点
  • 由于B树的3层,因此根结点可以有1024个子结点,每个子结点又可以有1024个子结点

因此一个3层的B树,阶数为1024,B树的每一层的节点数都是阶数的幂次方

计算总容量 把每一层的节点数相加 即10241+10242+1024^3 大约是 11亿个节点,假如每个节点放一个元素就是11亿个

所以在10亿个数据中找目标值,常规小于3次磁盘IO即可找到目标值,比平衡二叉树的30次提升了不少

  • 平衡二叉树的高度就等于每次查询数据时磁盘 IO 操作的次数。
  • 10亿的数据量,log2(N)约等于30次磁盘IO,
  • log2(N) 相当于2的多少次方(立方)等于N,例:log2 (8)= 3
  • 2的30次方=1073741824,所以就是30次磁盘IO

2.B+Tree的原理分析

(1)什么是B+Tree

  • 是B树的一种变形形式,B+树上的叶子结点存储关键字以及相应记录的地址,同等存储空间下比B-Tree存储更多key
  • 非叶子节点不对关键字记录的指针进行保存,只进行数据索引 , 树的层级会更少 , 所有叶子节点都在同一层,
  • 叶子节点的关键字从小到大有序排列,叶子节点之间用指针连接, 构成有序链表(稠密索引)
  • B+树上每个非叶子节点之间是一个双向链表进行链接,而叶子节点中的数据都是使用单向链表链接

查找特点

  • 当索引部分某个结点的关键字与所查的关键字相等时,并不停止查找
  • 继续沿着关键字的指针向下,每次查询必须到叶子节点才能真正获取到相关数据
  • B+Tree叶子节点相连接,对树的遍历就是只需要 一次线性遍历叶子节点
  • 由于叶子节点的数据是顺序排列,方便区间查找
  • 在B+树完成范围查找,排序查找,分组查找,去重查找 比B树效率也比较高

5cd366f34efb4ebf88673535e02ff8cd.jpg

(2)B+Tree插入流程解析

cf3ebb7cf9f645db8a3466f8319d2363.gif


总结

  • B树和B+树的最大区别在于非叶子节点是否存储数据
  • B+树非叶子节点只是当索引使用,同等空间下B+树存储更多key
  • B树,非叶子节点和叶子节点都会存储数据,找到对应节点就有对应的数据
  • B+树, 只有叶子节点才会存储数据,存储的数据都是在一行上,找到非叶子节点的key,还需要继续找到叶子节点才可以获取数据
  • B树的节点包括了key-value,所以找到对应的key即可找到对应的value,不用在继续寻找
  • 两种树各有优缺点和应用场景

3.B+Tree树应用之Mysql索引底层原理剖析

  • 背景
  • Mysql数据库是大家用最多的,查询是最高频使用的操作
  • 在多数数据库的设计里面,会用B-Tree或B+Tree做索引提高查询效率
  • 基于一张数据库的表数据进行查询(类似mysql的user表)
  • 构建索引:id用做key,然后data是数据的存储地址
内存地址 id phone name Age
0xFS 843 13820835467 张三 43
0xER 984 15738235423 李四 20
0x32 4212 12152354223 王五 18
0x93 1000 12152356324 赵六 30
0xAP 2341 18735622097 李祥 19
0xSQ … 1千万条数据

精确查找 id=2341的数据 select * from user where id = 2341

  • 未使用索引
  • 自上而下查找数据,一行行遍历,5次才找到数据
  • 使用索引
  • id建立主键索引(B+Tree结构),对应的数据存储数据的地址,2次找到数据,且数据量越多效果越明显
  • 根节点是常驻内存的,不需要进行IO操作
  • 范围查找 id>1000 和 id < 4212 的用户
  • 未使用索引
  • 自上而下查找数据,一行行遍历
  • 使用索引
  • id建立主键索引(B+Tree结构),由于本身是有序链表,所以顺序查找即可
  • Mysql的InnoDB中的索引结构与MyISAM的索引结构的区别
  • InnoDB引擎,表数据文件按B+Tree组织的,叶节点data域保存完整行数据, 树上的key就是主键, 以主键构建的B+树索引
  • 这种索引叫做聚集索引(聚簇索引 clustered index)
  • 聚簇索引一般为主键索引,而主键一个表中只能有一个,所以聚集索引一个表只能有一个
  • 聚簇索引叶子节点存储的是行数据,而非聚簇索引叶子节点存储的是聚簇索引(通常是主键 ID)
  • MyISAM引擎:索引文件和数据文件是分开的,索引结构的叶子节点放的是指向数据的主键(或者是地址)构建的B+树索引

这种索引叫做非聚集索引、二级索引、辅助索引(非聚簇索引 nonclustered index)

非聚集索引一个表可以存在多个

叶子节点中保存的不是实际数据,而是主键,获得主键值后去聚簇索引中获得数据行

注意

非聚簇索引的叶子节点上存储的并不是真正的行数据,而是主键 ID或记录的地址

当使用非聚簇索引进行查询时,会得到一个主键 ID,再使用主键 ID 去聚簇索引上找真正的行数据,把这个过程称之为回表查询

所以聚簇索引查询效率更高,而非聚簇索引需要进行回表查询,性能不如聚簇索引

非聚簇索引的叶子节点上存储的并不是真正的行数据,而是主键 ID或记录的地址

当使用非聚簇索引进行查询时,会得到一个主键 ID,再使用主键 ID 去聚簇索引上找真正的行数据,把这个过程称之为回表查询

所以聚簇索引查询效率更高,而非聚簇索引需要进行回表查询,性能不如聚簇索引

53f6a9da99964d4d842a0f211e96ba6b.jpg

相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。 &nbsp; 相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情:&nbsp;https://www.aliyun.com/product/rds/mysql&nbsp;
相关文章
|
1月前
|
存储 消息中间件 监控
MySQL 到 ClickHouse 明细分析链路改造:数据校验、补偿与延迟治理
蒋星熠Jaxonic,数据领域技术深耕者。擅长MySQL到ClickHouse链路改造,精通实时同步、数据校验与延迟治理,致力于构建高性能、高一致性的数据架构体系。
MySQL 到 ClickHouse 明细分析链路改造:数据校验、补偿与延迟治理
|
2月前
|
缓存 关系型数据库 BI
使用MYSQL Report分析数据库性能(下)
使用MYSQL Report分析数据库性能
126 3
|
4月前
|
存储 SQL 关系型数据库
mysql底层原理:索引、慢查询、 sql优化、事务、隔离级别、MVCC、redolog、undolog(图解+秒懂+史上最全)
mysql底层原理:索引、慢查询、 sql优化、事务、隔离级别、MVCC、redolog、undolog(图解+秒懂+史上最全)
mysql底层原理:索引、慢查询、 sql优化、事务、隔离级别、MVCC、redolog、undolog(图解+秒懂+史上最全)
|
1月前
|
NoSQL 算法 Redis
【Docker】(3)学习Docker中 镜像与容器数据卷、映射关系!手把手带你安装 MySql主从同步 和 Redis三主三从集群!并且进行主从切换与扩容操作,还有分析 哈希分区 等知识点!
Union文件系统(UnionFS)是一种**分层、轻量级并且高性能的文件系统**,它支持对文件系统的修改作为一次提交来一层层的叠加,同时可以将不同目录挂载到同一个虚拟文件系统下(unite several directories into a single virtual filesystem) Union 文件系统是 Docker 镜像的基础。 镜像可以通过分层来进行继承,基于基础镜像(没有父镜像),可以制作各种具体的应用镜像。
331 5
|
2月前
|
缓存 监控 关系型数据库
使用MYSQL Report分析数据库性能(上)
最终建议:当前系统是完美的读密集型负载模型,优化重点应放在减少行读取量和提高数据定位效率。通过索引优化、分区策略和内存缓存,预期可降低30%的CPU负载,同时保持100%的缓冲池命中率。建议每百万次查询后刷新统计信息以持续优化
211 6
|
2月前
|
缓存 监控 关系型数据库
使用MYSQL Report分析数据库性能(中)
使用MYSQL Report分析数据库性能
141 1
|
3月前
|
存储 关系型数据库 MySQL
深入理解MySQL索引类型及其应用场景分析。
通过以上介绍可以看出各类MySQL指标各自拥有明显利弊与最佳实践情墁,在实际业务处理过程中选择正确型号极其重要以确保系统运作流畅而稳健。
188 12
|
8月前
|
自然语言处理 搜索推荐 关系型数据库
MySQL实现文档全文搜索,分词匹配多段落重排展示,知识库搜索原理分享
本文介绍了在文档管理系统中实现高效全文搜索的方案。为解决原有ES搜索引擎私有化部署复杂、运维成本高的问题,我们转而使用MySQL实现搜索功能。通过对用户输入预处理、数据库模糊匹配、结果分段与关键字标红等步骤,实现了精准且高效的搜索效果。目前方案适用于中小企业,未来将根据需求优化并可能重新引入专业搜索引擎以提升性能。
396 5
|
4月前
|
存储 SQL 关系型数据库
MySQL的Redo Log与Binlog机制对照分析
通过合理的配置和细致的管理,这两种日志机制相互配合,能够有效地提升MySQL数据库的可靠性和稳定性。
176 10

推荐镜像

更多
下一篇
oss云网关配置