MySQL 5.7.6: wl#5757 InnoDB支持大page

本文涉及的产品
云数据库 RDS MySQL Serverless,0.5-2RCU 50GB
简介:
worklog:
官方mysql 在git上代码比较零散,具体的实现我们可以参考webscalesql上的代码:https://reviews.facebook.net/D31107
或者在webscalesql的git上: git show ebd27a35db6ef2267efd69da392e5efdc77611a6

我们知道Innodb的默认page size为16KB。在MySQL5.6版本里我们可以将page size调整到16kb以下,例如4kb或者8kb(参考wl#5756)。从5.7.6开始支持更大的page size设置。
为什么需要大page:
对于写入型负载:
1. 如果写入列包含大的字符串或者大字段,就可以有更多的机会将长字段留在页面内,而不是外部存储。
2. 由于page变大,容纳的记录变多,因此可以减少索引分裂的次数。
3. 更大的page意味着可以获得更好的压缩性,因此未来可以基于大页来做Page compress
缺点:
1.对于IO-BOUND场景下的读为主的负载,大page size并不是合适的选择,例如我们将innodb_page_size设置为64Kb, 如果读取是随机读,意味着最差情况下,如果想获取一条只有几十字节的数据,都要读取一整块64kb的数据。
2.由于buffer pool是以page size来划分块的,因此更大的page size也意味着更少的buffer pool block,可能更容易产生page flush /evict
3.另外,当page size设为32kb时,一个extend size为2MB,为64kb时,extend size为4KB. 而小于等于16kb时,为1M,这意味着当ibd文件扩展时,一次可能扩展更多的size。另外innodb对extend会做一定比例的page保留,因此当extend size越大,可能浪费更多的空间
关于extend的介绍,可以参考官方博客的这篇文章:http://mysqlserverteam.com/extent-descriptor-page-of-innodb/
4.当产生外部存储页时,显然会浪费更多的存储空间
当前的限制:
1.只有在初始安装时设置innodb_page_size,一旦实例安装完成,就不可以改变了,换句话说,innodb_page_size要和ibdata的page size相同。
2.目前不支持大页面压缩 (硬伤,估计未来会支持)
当前压缩表的page内,对于dense directory,会预留14字节来标示记录业内位置,因此解压页被限制到16kb,要实现大页面压缩,需要解除这个限制。

相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
1月前
|
存储 关系型数据库 MySQL
MySQL InnoDB数据存储结构
MySQL InnoDB数据存储结构
|
1月前
|
存储 缓存 关系型数据库
MySQL的varchar水真的太深了——InnoDB记录存储结构
varchar(M) 能存多少个字符,为什么提示最大16383?innodb怎么知道varchar真正有多长?记录为NULL,innodb如何处理?某个列数据占用的字节数非常多怎么办?影响每行实际可用空间的因素有哪些?本篇围绕innodb默认行格式dynamic来说说原理。
835 6
MySQL的varchar水真的太深了——InnoDB记录存储结构
|
2月前
|
存储 缓存 关系型数据库
MySQL - 存储引擎MyISAM和Innodb
MySQL - 存储引擎MyISAM和Innodb
|
15天前
|
存储 关系型数据库 MySQL
MySQL引擎对决:深入解析MyISAM和InnoDB的区别
MySQL引擎对决:深入解析MyISAM和InnoDB的区别
31 0
|
3月前
|
存储 SQL 关系型数据库
系统设计场景题—MySQL使用InnoDB,通过二级索引查第K大的数,时间复杂度是多少?
系统设计场景题—MySQL使用InnoDB,通过二级索引查第K大的数,时间复杂度是多少?
47 1
系统设计场景题—MySQL使用InnoDB,通过二级索引查第K大的数,时间复杂度是多少?
|
4月前
|
存储 缓存 关系型数据库
⑩⑧【MySQL】InnoDB架构、事务原理、MVCC多版本并发控制
⑩⑧【MySQL】InnoDB架构、事务原理、MVCC多版本并发控制
110 0
|
3月前
|
存储 SQL 关系型数据库
Mysql系列-4.Mysql存储引擎-InnoDB(下)
Mysql系列-4.Mysql存储引擎-InnoDB
49 0
|
4月前
|
存储 SQL 关系型数据库
MySQL存储引擎之MyISAM和InnoDB
MySQL存储引擎之MyISAM和InnoDB
47 0
|
2月前
|
存储 SQL 关系型数据库
Mysql专栏 - mysql、innodb存储引擎、binlog的工作流程
Mysql专栏 - mysql、innodb存储引擎、binlog的工作流程
80 0
|
3月前
|
存储 算法 关系型数据库
MySQL相关(八)- innodb行级锁深入剖析
MySQL相关(八)- innodb行级锁深入剖析
45 0