MySQL 8 新参数innodb_dedicated_server的作用,多了64个日志文件ib_logfile

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介: MySQL 8 中可以设置参数 innodb_dedicated_server=ON来让MySQL自动探测服务器的内存大小,根据内存大小设置innodb_buffer_pool_size, innodb_log_file_size 和 innodb_flush_method 三个参数。

参数 innodb_dedicated_server的说明


MySQL 8 中可以设置参数 innodb_dedicated_server=ON来让MySQL自动探测服务器的内存大小,根据内存大小设置innodb_buffer_pool_size, innodb_log_file_size 和 innodb_flush_method 三个参数。具体策略如下:


innodb_buffer_pool_size: <1G: 128M(innodb_dedicated_server=为OFF时的默认取值)

<=4G: 探测到的物理内存 * 0.5

大于4G: 探测到的物理内存 * 0.75


innodb_log_file_size:

<1G: 48M(innodb_dedicated_server=为OFF时的默认取值)

<=4G: 128M

<=8G: 512M

<=16G: 1024M

大于16G: 2G


innodb_flush_method:

如果系统允许设置为O_DIRECT_NO_FSYNC。如果系统不允许,则设置为InnoDB默认的Flush method。


上述这些参数在MySQL每次启动时自动探测服务器(包括虚拟机和容器的内存)配置并自动生效。


设置效果

innodb_dedicated_server=为OFF时


scutech@scutech:~$ mysqladmin variables|grep -E 'innodb_buffer_pool_size|innodb_flush_method|innodb_log_file_size'
| innodb_buffer_pool_size                                  | 134217728                                                                                                                                                                                                                                                                                                                                                                                                                                                            |
| innodb_flush_method                                      | fsync                                                                                                                                                                                                                                                                                                                                                                                                                                                                |
| innodb_log_file_size                                     | 2073034752
innodb_dedicated_server=ON


mysqladmin variables|grep -E 'innodb_buffer_pool_size|innodb_flush_method|innodb_log_file_size'
| innodb_buffer_pool_size                                  | 1073741824                                                                                                                                                                                                                                                                                                                                                                                                                                                           |
| innodb_flush_method                                      | O_DIRECT_NO_FSYNC                                                                                                                                                                                                                                                                                                                                                                                                                                                    |
| innodb_log_file_size                                     | 2073034752


对参数innodb_log_files_in_group的作用

MySQL文档中有这样的说明:


The number of log files is configured according to the automatically configured buffer pool size (in gigabytes). Automatic configuration of the innodb_log_files_in_group variable was added in MySQL 8.0.14.


从 MySQL 8.0.14后这个参数还影响日志文件的个数。

Table Automatically Configured Number of Log Files


Buffer Pool Size Number of Log Files

Less than 8GB ROUND(buffer pool size)

8GB to 128GB ROUND(buffer pool size * 0.75)

Greater than 128GB 64

配置了innodb_dedicated_server后,系统一启动多了64个日志文件ib_logfile,吓了我一跳!看看!


[root@localhost data]# ls
auto.cnf       client-cert.pem    ib_logfile10  ib_logfile18  ib_logfile25  ib_logfile32  ib_logfile4   ib_logfile47  ib_logfile54  ib_logfile61  mysql               server-key.pem
binlog.000001  client-key.pem     ib_logfile11  ib_logfile19  ib_logfile26  ib_logfile33  ib_logfile40  ib_logfile48  ib_logfile55  ib_logfile62  mysqld-auto.cnf     sys
binlog.000002  #ib_16384_0.dblwr  ib_logfile12  ib_logfile2   ib_logfile27  ib_logfile34  ib_logfile41  ib_logfile49  ib_logfile56  ib_logfile63  mysql.ibd           undo_001
binlog.000003  #ib_16384_1.dblwr  ib_logfile13  ib_logfile20  ib_logfile28  ib_logfile35  ib_logfile42  ib_logfile5   ib_logfile57  ib_logfile7   performance_schema  undo_002
binlog.000004  ib_buffer_pool     ib_logfile14  ib_logfile21  ib_logfile29  ib_logfile36  ib_logfile43  ib_logfile50  ib_logfile58  ib_logfile8   private_key.pem
binlog.index   ibdata1            ib_logfile15  ib_logfile22  ib_logfile3   ib_logfile37  ib_logfile44  ib_logfile51  ib_logfile59  ib_logfile9   public_key.pem
ca-key.pem     ib_logfile0        ib_logfile16  ib_logfile23  ib_logfile30  ib_logfile38  ib_logfile45  ib_logfile52  ib_logfile6   ibtmp1        sbtest
ca.pem         ib_logfile1        ib_logfile17  ib_logfile24  ib_logfile31  ib_logfile39  ib_logfile46  ib_logfile53  ib_logfile60  #innodb_temp  server-cert.pem


这个机器内存256G,看看innodb_buffer_pool_size:

mysql> show variables like 'innodb_buffer_pool_size';
+-------------------------+--------------+
| Variable_name           | Value        |
+-------------------------+--------------+
| innodb_buffer_pool_size | 202937204736 |
+-------------------------+--------------+
1 row in set (0.00 sec)


注意事项

innodb_dedicated_server=ON的情况下,如果还显式设置了 innodb_buffer_pool_size / innodb_log_file_size / innodb_flush_method 参数,显式设置的这些参数会优先生效,并且在MySQL的错误日志中会打印如下内容:

2020-03-14T03:24:27.437740Z 0 [Warning] [MY-012360] [InnoDB]  Option innodb_dedicated_server is ignored for innodb_log_file_size because innodb_log_file_size=2073034752 is specified explicitly.


显式指定某一个值,并不会影响其他变量的自适应参数值设置。

在innodb_dedicated_server=ON的情况下,mysqld服务进程每次重启后都会自动调整上述几个参数值。在任何时候MySQL都不会将自适应值保存在持久配置中,利用这个参数就可以保证服务器(虚拟机或者容器)扩展以后,MySQL能“自适应”,以尽量消耗更多的服务器资源。


相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助 &nbsp; &nbsp; 相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
8天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
本文介绍了MySQL InnoDB存储引擎中的数据文件和重做日志文件。数据文件包括`.ibd`和`ibdata`文件,用于存放InnoDB数据和索引。重做日志文件(redo log)确保数据的可靠性和事务的持久性,其大小和路径可由相关参数配置。文章还提供了视频讲解和示例代码。
114 11
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
|
15天前
|
缓存 监控 关系型数据库
如何根据监控结果调整 MySQL 数据库的参数以提高性能?
【10月更文挑战第28天】根据MySQL数据库的监控结果来调整参数以提高性能,需要综合考虑多个方面的因素
54 1
|
1月前
|
存储 缓存 关系型数据库
MySQL事务日志-Redo Log工作原理分析
事务的隔离性和原子性分别通过锁和事务日志实现,而持久性则依赖于事务日志中的`Redo Log`。在MySQL中,`Redo Log`确保已提交事务的数据能持久保存,即使系统崩溃也能通过重做日志恢复数据。其工作原理是记录数据在内存中的更改,待事务提交时写入磁盘。此外,`Redo Log`采用简单的物理日志格式和高效的顺序IO,确保快速提交。通过不同的落盘策略,可在性能和安全性之间做出权衡。
1630 14
|
5天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL的撤销日志文件和错误日志文件
本文介绍了MySQL的物理存储结构,重点讲解了InnoDB存储引擎中的撤销日志文件(undo log)和错误日志文件。从MySQL 8.0开始,默认生成两个10MB的undo表空间文件,并支持动态扩容和收缩。错误日志文件记录了MySQL启动、运行、关闭过程中的问题,通过示例展示了如何查看和使用这些日志。
|
1月前
|
SQL 存储 关系型数据库
Mysql主从同步 清理二进制日志的技巧
Mysql主从同步 清理二进制日志的技巧
27 1
|
1月前
|
关系型数据库 MySQL 数据库
DZ社区 mysql日志清理 Discuz! X3.5数据库可以做定期常规清理的表
很多站长在网站日常维护中忽略了比较重要的一个环节,就是对于数据库的清理工作,造成数据库使用量增加必须多的原因一般有2个:后台站点功能开启了家园,此功能现在很少有论坛会用到,但是灌水机会灌入大量垃圾信息致使站长长时间未能发觉;再有就是程序默认的一些通知类表单会存放大量的、对于网站日常运行并无意义的通知信息。
71 2
|
1月前
|
SQL 关系型数据库 MySQL
数据库:MYSQL参数max_allowed_packet 介绍
数据库:MYSQL参数max_allowed_packet 介绍
63 2
|
27天前
|
存储 关系型数据库 MySQL
MySQL中的Redo Log、Undo Log和Binlog:深入解析
【10月更文挑战第21天】在数据库管理系统中,日志是保障数据一致性和完整性的关键机制。MySQL作为一种广泛使用的关系型数据库管理系统,提供了多种日志类型来满足不同的需求。本文将详细介绍MySQL中的Redo Log、Undo Log和Binlog,从背景、业务场景、功能、底层实现原理、使用措施等方面进行详细分析,并通过Java代码示例展示如何与这些日志进行交互。
57 0
|
2月前
|
存储 SQL 缓存
InnoDB 存储引擎以及三种日志
InnoDB 存储引擎以及三种日志
27 0
|
13天前
|
XML 安全 Java
【日志框架整合】Slf4j、Log4j、Log4j2、Logback配置模板
本文介绍了Java日志框架的基本概念和使用方法,重点讨论了SLF4J、Log4j、Logback和Log4j2之间的关系及其性能对比。SLF4J作为一个日志抽象层,允许开发者使用统一的日志接口,而Log4j、Logback和Log4j2则是具体的日志实现框架。Log4j2在性能上优于Logback,推荐在新项目中使用。文章还详细说明了如何在Spring Boot项目中配置Log4j2和Logback,以及如何使用Lombok简化日志记录。最后,提供了一些日志配置的最佳实践,包括滚动日志、统一日志格式和提高日志性能的方法。
121 30
【日志框架整合】Slf4j、Log4j、Log4j2、Logback配置模板