MySQL 8 新参数innodb_dedicated_server的作用,多了64个日志文件ib_logfile

简介: MySQL 8 中可以设置参数 innodb_dedicated_server=ON来让MySQL自动探测服务器的内存大小,根据内存大小设置innodb_buffer_pool_size, innodb_log_file_size 和 innodb_flush_method 三个参数。

参数 innodb_dedicated_server的说明


MySQL 8 中可以设置参数 innodb_dedicated_server=ON来让MySQL自动探测服务器的内存大小,根据内存大小设置innodb_buffer_pool_size, innodb_log_file_size 和 innodb_flush_method 三个参数。具体策略如下:


innodb_buffer_pool_size: <1G: 128M(innodb_dedicated_server=为OFF时的默认取值)

<=4G: 探测到的物理内存 * 0.5

大于4G: 探测到的物理内存 * 0.75


innodb_log_file_size:

<1G: 48M(innodb_dedicated_server=为OFF时的默认取值)

<=4G: 128M

<=8G: 512M

<=16G: 1024M

大于16G: 2G


innodb_flush_method:

如果系统允许设置为O_DIRECT_NO_FSYNC。如果系统不允许,则设置为InnoDB默认的Flush method。


上述这些参数在MySQL每次启动时自动探测服务器(包括虚拟机和容器的内存)配置并自动生效。


设置效果

innodb_dedicated_server=为OFF时


scutech@scutech:~$ mysqladmin variables|grep -E 'innodb_buffer_pool_size|innodb_flush_method|innodb_log_file_size'
| innodb_buffer_pool_size                                  | 134217728                                                                                                                                                                                                                                                                                                                                                                                                                                                            |
| innodb_flush_method                                      | fsync                                                                                                                                                                                                                                                                                                                                                                                                                                                                |
| innodb_log_file_size                                     | 2073034752
innodb_dedicated_server=ON


mysqladmin variables|grep -E 'innodb_buffer_pool_size|innodb_flush_method|innodb_log_file_size'
| innodb_buffer_pool_size                                  | 1073741824                                                                                                                                                                                                                                                                                                                                                                                                                                                           |
| innodb_flush_method                                      | O_DIRECT_NO_FSYNC                                                                                                                                                                                                                                                                                                                                                                                                                                                    |
| innodb_log_file_size                                     | 2073034752


对参数innodb_log_files_in_group的作用

MySQL文档中有这样的说明:


The number of log files is configured according to the automatically configured buffer pool size (in gigabytes). Automatic configuration of the innodb_log_files_in_group variable was added in MySQL 8.0.14.


从 MySQL 8.0.14后这个参数还影响日志文件的个数。

Table Automatically Configured Number of Log Files


Buffer Pool Size Number of Log Files

Less than 8GB ROUND(buffer pool size)

8GB to 128GB ROUND(buffer pool size * 0.75)

Greater than 128GB 64

配置了innodb_dedicated_server后,系统一启动多了64个日志文件ib_logfile,吓了我一跳!看看!


[root@localhost data]# ls
auto.cnf       client-cert.pem    ib_logfile10  ib_logfile18  ib_logfile25  ib_logfile32  ib_logfile4   ib_logfile47  ib_logfile54  ib_logfile61  mysql               server-key.pem
binlog.000001  client-key.pem     ib_logfile11  ib_logfile19  ib_logfile26  ib_logfile33  ib_logfile40  ib_logfile48  ib_logfile55  ib_logfile62  mysqld-auto.cnf     sys
binlog.000002  #ib_16384_0.dblwr  ib_logfile12  ib_logfile2   ib_logfile27  ib_logfile34  ib_logfile41  ib_logfile49  ib_logfile56  ib_logfile63  mysql.ibd           undo_001
binlog.000003  #ib_16384_1.dblwr  ib_logfile13  ib_logfile20  ib_logfile28  ib_logfile35  ib_logfile42  ib_logfile5   ib_logfile57  ib_logfile7   performance_schema  undo_002
binlog.000004  ib_buffer_pool     ib_logfile14  ib_logfile21  ib_logfile29  ib_logfile36  ib_logfile43  ib_logfile50  ib_logfile58  ib_logfile8   private_key.pem
binlog.index   ibdata1            ib_logfile15  ib_logfile22  ib_logfile3   ib_logfile37  ib_logfile44  ib_logfile51  ib_logfile59  ib_logfile9   public_key.pem
ca-key.pem     ib_logfile0        ib_logfile16  ib_logfile23  ib_logfile30  ib_logfile38  ib_logfile45  ib_logfile52  ib_logfile6   ibtmp1        sbtest
ca.pem         ib_logfile1        ib_logfile17  ib_logfile24  ib_logfile31  ib_logfile39  ib_logfile46  ib_logfile53  ib_logfile60  #innodb_temp  server-cert.pem


这个机器内存256G,看看innodb_buffer_pool_size:

mysql> show variables like 'innodb_buffer_pool_size';
+-------------------------+--------------+
| Variable_name           | Value        |
+-------------------------+--------------+
| innodb_buffer_pool_size | 202937204736 |
+-------------------------+--------------+
1 row in set (0.00 sec)


注意事项

innodb_dedicated_server=ON的情况下,如果还显式设置了 innodb_buffer_pool_size / innodb_log_file_size / innodb_flush_method 参数,显式设置的这些参数会优先生效,并且在MySQL的错误日志中会打印如下内容:

2020-03-14T03:24:27.437740Z 0 [Warning] [MY-012360] [InnoDB]  Option innodb_dedicated_server is ignored for innodb_log_file_size because innodb_log_file_size=2073034752 is specified explicitly.


显式指定某一个值,并不会影响其他变量的自适应参数值设置。

在innodb_dedicated_server=ON的情况下,mysqld服务进程每次重启后都会自动调整上述几个参数值。在任何时候MySQL都不会将自适应值保存在持久配置中,利用这个参数就可以保证服务器(虚拟机或者容器)扩展以后,MySQL能“自适应”,以尽量消耗更多的服务器资源。


相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。 &nbsp; 相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情:&nbsp;https://www.aliyun.com/product/rds/mysql&nbsp;
相关文章
|
11月前
|
SQL 运维 关系型数据库
深入探讨MySQL的二进制日志(binlog)选项
总结而言,对MySQL binlogs深度理解并妥善配置对数据库运维管理至关重要;它不仅关系到系统性能优化也是实现高可靠性架构设计必须考虑因素之一。通过精心规划与周密部署可以使得该机能充分发挥作用而避免潜在风险带来影响。
369 6
|
数据可视化 关系型数据库 MySQL
ELK实现nginx、mysql、http的日志可视化实验
通过本文的步骤,你可以成功配置ELK(Elasticsearch, Logstash, Kibana)来实现nginx、mysql和http日志的可视化。通过Kibana,你可以直观地查看和分析日志数据,从而更好地监控和管理系统。希望这些步骤能帮助你在实际项目中有效地利用ELK来处理日志数据。
1026 90
|
SQL 监控 关系型数据库
MySQL日志分析:binlog、redolog、undolog三大日志的深度探讨。
数据库管理其实和写小说一样,需要规划,需要修订,也需要有能力回滚。理解这些日志的作用与优化,就像把握写作工具的使用与运用,为我们的数据库保驾护航。
998 23
|
SQL 关系型数据库 MySQL
MySQL 5.6/5.7 DDL 失败残留文件清理指南
通过本文的指南,您可以更安全地处理 MySQL 5.6 和 5.7 版本中 DDL 失败后的残留文件,有效避免数据丢失和数据库不一致的问题。
|
SQL 运维 关系型数据库
MySQL Binlog 日志查看方法及查看内容解析
本文介绍了 MySQL 的 Binlog(二进制日志)功能及其使用方法。Binlog 记录了数据库的所有数据变更操作,如 INSERT、UPDATE 和 DELETE,对数据恢复、主从复制和审计至关重要。文章详细说明了如何开启 Binlog 功能、查看当前日志文件及内容,并解析了常见的事件类型,包括 Format_desc、Query、Table_map、Write_rows、Update_rows 和 Delete_rows 等,帮助用户掌握数据库变化历史,提升维护和排障能力。
|
存储 SQL 关系型数据库
mysql的undo log、redo log、bin log、buffer pool
MySQL的undo log、redo log、bin log和buffer pool是确保数据库高效、安全和可靠运行的关键组件。理解这些组件的工作原理和作用,对于优化数据库性能和保障数据安全具有重要意义。通过适当的配置和优化,可以显著提升MySQL的运行效率和数据可靠性。
425 16
|
存储 SQL 关系型数据库
mysql的undo log、redo log、bin log、buffer pool
MySQL的undo log、redo log、bin log和buffer pool是确保数据库高效、安全和可靠运行的关键组件。理解这些组件的工作原理和作用,对于优化数据库性能和保障数据安全具有重要意义。通过适当的配置和优化,可以显著提升MySQL的运行效率和数据可靠性。
306 4
|
关系型数据库 MySQL
图解MySQL【日志】——磁盘 I/O 次数过高时优化的办法
当 MySQL 磁盘 I/O 次数过高时,可通过调整参数优化。控制刷盘时机以降低频率:组提交参数 `binlog_group_commit_sync_delay` 和 `binlog_group_commit_sync_no_delay_count` 调整等待时间和事务数量;`sync_binlog=N` 设置 write 和 fsync 频率,`innodb_flush_log_at_trx_commit=2` 使提交时只写入 Redo Log 文件,由 OS 择机持久化,但两者在 OS 崩溃时有丢失数据风险。
438 3
|
关系型数据库 MySQL 数据库
MySQL日志
本文介绍了MySQL中三个重要的日志:binlog、redolog和undolog。binlog记录数据库更改操作,支持数据恢复、复制和审计;redolog保证事务的原子性和持久性,实现crash-safe;undolog用于事务回滚及MVCC的实现。每个日志都有其独特的作用和应用场景,确保数据库的稳定性和数据一致性。
361 1
|
安全 关系型数据库 MySQL
MySQL8使用物理文件恢复MyISAM表测试
MySQL8使用物理文件恢复MyISAM表测试
338 0

推荐镜像

更多