InnoDB & index页-mysql详解(二)

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
云数据库 RDS MySQL,高可用系列 2核4GB
简介: InnoDB & index页-mysql详解(二)

上篇文章说了,mysqlcharacter_Set_client,character_set_collection,character_Set_result来编码解码字符集。字符集有asciiiso8859gb2312gbkutf-8等。字符集和比较级的介绍。

Mysql字符集-Mysql进阶(一)


innoDB


Mysql关闭之后,重启数据还是会存在的,不是所有的存储引擎都会存在,innoDB可以,memory不可以,因为后者是存在缓存中。我们都知道内存处理速度比缓存慢,如果每次修改和查询都从内存中缓存,那么性能必定会受影响,于是mysql以页为单位(16kb),每次修改或者查询最少都处理16kb的数据。

我们可以通过row_format来指定行格式(记录格式),可以指定compactredundantdynamiccompressed

Compact分为两大类:记录额外信息和记录真实数据。

记录格外信息:

变长字段长度列表:varchartextblob等,存放的是长度,不是真实的值。

Null值列表:存放null值。

记录头部信息:有delete_mask标记是否被删除,record_type0表示普通记录,1表示B+非叶子节点记录,2表示最小记录,3表示最大记录)等。

记录真实数据:

1,列2......

除了我们存储的数据外,还有三个重要的隐藏列

row_id:当没有主键和唯一建的时候会存在。

Roll_Pointer:每条都有。

Transaction_id:每条都有。

另外需要额外注意一下char,前面说过ascii是固定长度,gbk1~2utf-8(1~3)是变长字符集,当使用固定长度他是不会记录列长度到变长字段长度列表,当使用变长字符集的时候则会存入变长字段长度列表。


行溢出:

行溢出首先要知道他的阈值是多少,varchar最大能存储65535,但其中需要一个字节存储是否有null,两个字节存储真实数据长度,所以实际创建ascii字符集表时,应该是65532个字节,如果指定not null,则可以创建65533个字节。当创建表的字符集是gbk或者utf呢,因为他们是可变长字符集,这时候需要看他的最长字符集是多少,所以gbk65532/2个字节,utf-8mb365532/3个字节。

我们都知道mysql按页存储,一个页16kb16384),而一个表可以存储65532个字节,这时候一个页就不够存储。Compact在真实数据的地方会有一部分存储真实数据,剩余部分存储指定页的页码,超出存储真实数据(756kb)的数据就属于溢出数据。

Mysql5.0之前用的是redundant行格式,现在MYSQL5.7版本默认的是dynamic,他与compact基本相同,但是存储真实数据不太一样,他没有一部分存储真实数据,而是全部指向数据页页码,而compresseddynamic不同的是,会采用压缩算法对页面进行压缩。


Index页(数据页)


他是16kb结构如下:file headerpage headerinfimum+supremumuser recordsfree spacepage directoryfile trailer

其中user recoreds部分有我们存放的数据,结构如下:

Delete_mask:0代表未删除,1代表删除。为什么删除的不从磁盘移除的,因为考虑到重新排序等问题,所以会吧未删除的数据一起组成垃圾链表,又称为可重用空间,新的数据,有几率会覆盖这个垃圾链表。

Heap_no:这里只会从2开始,01infimumsupremum,也就是他们在位置最靠前的地方。

Record_type:0代表普通数据,1代表b+数非叶子节点,2代表最小,3代表最大记录。

Next_Records:这个就是组成 数据查询的地址偏移量,从最小的慢慢指到最大的。

Page directory是什么呢,顾名思义,页的目录,mysql查询数据的时候总不能一条一条遍历查找,他会把数据分成很多组,每个组都有一个槽点,再根据每个组的槽点来进行二分查找。

Pege header:记录了有多个槽点,最后插入数据位置,已删除数据占用字节等。主要记录数据页里面的信息。

File header:页的效验和,页号,上一页,下一页,log sequence number

File trailer:会与头部页的效验和相对应,当数据同步到内存成功后,会同步到尾部,如果二者不一致,则表示同步中间出错,可能系统断电宕机原因。


相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
5天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
本文介绍了MySQL InnoDB存储引擎中的数据文件和重做日志文件。数据文件包括`.ibd`和`ibdata`文件,用于存放InnoDB数据和索引。重做日志文件(redo log)确保数据的可靠性和事务的持久性,其大小和路径可由相关参数配置。文章还提供了视频讲解和示例代码。
106 11
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
|
5天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL InnoDB的表空间
InnoDB是MySQL默认的存储引擎,主要由存储结构、内存结构和线程结构组成。其存储结构分为逻辑和物理两部分,逻辑存储结构包括表空间、段、区和页。表空间是InnoDB逻辑结构的最高层,所有数据都存放在其中。默认情况下,InnoDB有一个共享表空间ibdata1,用于存放撤销信息、系统事务信息等。启用参数`innodb_file_per_table`后,每张表的数据可以单独存放在一个表空间内,但撤销信息等仍存放在共享表空间中。
|
5天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL InnoDB的段、区和页
MySQL的InnoDB存储引擎逻辑存储结构与Oracle相似,包括表空间、段、区和页。表空间由段和页组成,段包括数据段、索引段等。区是1MB的连续空间,页是16KB的最小物理存储单位。InnoDB是面向行的存储引擎,每个页最多可存放7992行记录。
|
5天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL的InnoDB存储引擎
InnoDB是MySQL的默认存储引擎,广泛应用于互联网公司。它支持事务、行级锁、外键和高效处理大量数据。InnoDB的主要特性包括解决不可重复读和幻读问题、高并发度、B+树索引等。其存储结构分为逻辑和物理两部分,内存结构类似Oracle的SGA和PGA,线程结构包括主线程、I/O线程和其他辅助线程。
【赵渝强老师】MySQL的InnoDB存储引擎
|
2月前
|
存储 关系型数据库 MySQL
InnoDB and MyISAM Index Statistics Collection
存储引擎收集表统计信息,供优化器使用,关键数据为平均值组大小,反映相同键前缀值的行数均值。该值影响索引效率,值越大,索引查找行数越多,效用越低。MySQL通过调整`innodb_stats_method`和`myisam_status`系统变量控制统计方法,涉及NULL值处理,如nulls_equal将所有NULL视为同一值组,可能影响索引使用决策。通过设置变量可优化统计信息收集,提升查询性能。
|
1月前
|
存储 缓存 关系型数据库
详细解析MySQL中的innodb和myisam
总之,InnoDB和MyISAM各有千秋,选择合适的存储引擎应基于对应用程序特性的深入理解,以及对性能、数据完整性和可扩展性的综合考量。随着技术发展,InnoDB因其全面的功能和日益优化的性能,逐渐成为更广泛场景下的首选。然而,在特定条件下,MyISAM依然保留其独特的价值。
110 0
|
3月前
|
监控 关系型数据库 MySQL
在Linux中,mysql的innodb如何定位锁问题?
在Linux中,mysql的innodb如何定位锁问题?
|
3月前
|
SQL 存储 关系型数据库
"MySQL增列必锁表?揭秘InnoDB在线DDL,让你的数据库操作飞一般,性能无忧!"
【8月更文挑战第11天】在数据库领域,MySQL凭借其稳定高效的表现深受开发者喜爱。对于是否会在给数据表添加列时锁表的问题,MySQL的行为受版本、存储引擎等因素影响。从5.6版起,InnoDB支持在线DDL,可在改动表结构时保持表的可访问性,避免长时间锁表。而MyISAM等则需锁表完成操作。例如,在使用InnoDB的表上运行`ALTER TABLE users ADD COLUMN email VARCHAR(255);`时,通常不会完全锁表。虽然在线DDL提高了灵活性,但复杂操作或大表变更仍可能暂时影响性能。因此,进行结构变更前应评估其影响并择机执行。
70 6
|
5月前
|
存储 关系型数据库 MySQL
MySQL数据库进阶第六篇(InnoDB引擎架构,事务原理,MVCC)
MySQL数据库进阶第六篇(InnoDB引擎架构,事务原理,MVCC)
|
5月前
|
存储 SQL 关系型数据库
【MySQL技术内幕】6.3-InnoDB中的锁
【MySQL技术内幕】6.3-InnoDB中的锁
198 57