MySQL InnoDB中的锁-自增锁(AUTO-INC Locks)

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介: MySQL InnoDB 锁 自增锁AUTO-INC Locks

锁列表

  • 共享与列排他锁
  • 意向锁
  • 记录锁
  • 间隙锁
  • Next-Key锁
  • 插入意向锁
  • AUTO-INC锁

这次我们只来讨论和实验AUTO-INC锁。

AUTO-INC锁

概述

AUTO-INC锁是表级锁,如果一张表中有自增的列(例如: id int NOT NULL AUTO_INCREMENT,)那么当向这张表插入数据时,InnoDB会先获取这张表的AUTO-INC锁。

如果一个事务正在插入数据到有自增列的表时,其他事务会阻塞等待正在持有AUTO-INC锁的事务释放AUTO-INC锁。

自增分类

“INSERT-like”语句

INSERT-LIKE:指所有的插入语句,包括: INSERT、REPLACE、INSERT…SELECT、REPLACE…SELECT,LOAD DATA等。

“Simple inserts”

指在插入前就能确定插入行数的语句,包括:INSERT、REPLACE,不包含INSERT…ON DUPLICATE KEY UPDATE这类语句。

“Bulk inserts”

指在插入钱不能确定行数的语句,包括:INSERT ... SELECT/REPLACE ... SELECT/LOAD DATA。

“Mixed-mode inserts”

混合模式分为两种:

  1. 插入的语句有一些自增列时确定的值,一些是不确定的。

例如:MySQL官网给的例子,表t1有两个列(c1和c2),其中c1列时自增列,那么构造如下SQL语句就是混合模式:

INSERT INTO t1 (c1,c2) VALUES (1,'a'), (NULL,'b'), (5,'c'), (NULL,'d');
  1. INSERT ... ON DUPLICATE KEY UPDATE

这种语句会使用锁来为AUTO_INCREMENT列分配自增值,但是在更新阶段可能不会用这些分配的自增值。

锁模式(三种)

AUTO-INC锁可以使用innodb_autoinc_lock_mode变量来配置自增锁的算法。innodb_autoinc_lock_mode变量可以选择三种值如下表:

innodb_autoinc_lock_mode 变量含义
0 传统锁模式
1 连续锁模式
2 交错锁模式(MySQL8默认)

传统锁模式

在传统锁模式下,所有的"INSERT-LIKE"语句为AUTO_INCREMENT列使用表级AUTO_INC锁。一个事务的"INSERT-LIKE"语句在语句执行结束后释放AUTO_INC表级锁,而不是在事务结束后释放。这样做的目的是为了保证这个"INSERT-LIKE"语句的自增列的值是连续的。

连续锁模式

连续锁模式对于“Simple inserts”不会使用表级锁,而是使用一个轻量级锁来生成自增值,因为InnoDB可以提前直到插入多少行数据。自增值生成阶段使用轻量级互斥锁来生成所有的值,而不是一直加锁直到插入完成。但是如果其他事务持有AUTO_INC锁,那么“Simple Inserts”类语句也需要等待其他事务完成才能使用轻量级锁来生成所有的自增值。

连续锁模式对于“bulk inserts”类语句使用AUTO_INC表级锁直到语句完成。使用表级AUTO_INC锁的语句:INSERT ... SELECT、REPLACE ... SELECT、LOAD DATA 。

当innodb_autoinc_lock_mode=1时,在语句复制格式下(BINLOG_FORMAT=STATEMENT),BINLOG中没有记录主库执行过程中获取到的所有自增值及其对应行的信息,要保证"Bulk insert"操作主从复制数据一致就必须保证语句在主库和从库执行时获取到相同自增值,而因此只能通过控制“获取连续自增值”的方式来实现,同时为避免受其他事务插入操作影响,就必须在表级别加锁且保证持有锁至语句结束。

在行复制格式下(BINLOG_FORMAT=ROW),主库BINLOG中保存有记录的所有列信息包括自增列值,因此无需通过AUTO-INC锁来保证主从数据一致。在MySQL 8.0版本前,参数BINLOG_FORMAT的默认值为STATEMENT,参数innodb_autoinc_lock_mode的默认值为1。在MySQL 8.0版本后,参数BINLOG_FORMAT的默认值被调整为ROW格式,参数innodb_autoinc_lock_mode的默认值为2。

交错锁模式

所有的“INSERT-LIKE”语句都不使用表级锁,而是使用轻量级互斥锁。

交错锁模式速度快、可扩展性高,但是对于基于语句复制会有问题,只能使用基于ROW复制。

之所以称为交错模式是因为并发插入场景下自增值的分配大概率是交替这来的,时刻1事务1获得自增值,时刻2事务2获得自增值,以此类推。

自增值“丢失”与间隙

如果一个插入数据的事务回滚,那么为这个事务生成的自增值就会丢失,因为自增值不会被回滚。

回滚造成的自增值丢失InnoDB是不会被重用,所以不能依赖InnoDB自增列是连续值。

实验

这里实验几个简单场景。

表结构

建表语句:

CREATE TABLE `sys_user` ( `id` int NOT NULL AUTO_INCREMENT,
`name` varchar(10) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci NOT NULL COMMENT '姓名', 
`name_pinyin` varchar(255) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci NOT NULL COMMENT '姓名拼音',
`id_card` varchar(255) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci NOT NULL COMMENT '身份证号',
`phone` varchar(20) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci DEFAULT NULL COMMENT '手机号', 
`age` int(11) NOT NULL DEFAULT 1 COMMENT '年龄',
PRIMARY KEY (`id`), 
UNIQUE KEY `uni_idx_id_card` (`id_card`) USING BTREE COMMENT '唯一索引-身份证号', 
KEY `idx_phone_name` (`phone`,`name`) USING BTREE COMMENT '普通索引-手机号' ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci COMMENT='用户';

插入记录

insert into sys_user (id, name, name_pinyin, id_card, phone, age)values (1, '小六', 'xiaoliu', 300000000, 13000008000, 10);

insert into sys_user (id, name, name_pinyin, id_card, phone, age)values (2, '小六', 'xiaoliu', 300000001, 13000008000, 11);

insert into sys_user (id, name, name_pinyin, id_card, phone, age)values (3, '小六', 'xiaoliu', 300000002, 13000008000, 13);

insert into sys_user (id, name, name_pinyin, id_card, phone, age)values (4, '小六', 'xiaoliu', 300000003, 13000008000, 20);

自增锁模式查询

show variables like '%innodb_autoinc_lock_mode%';

MySQL 8.0.x版本输出:

MySQL [employees]> show variables like '%innodb_autoinc_lock_mode%';
+--------------------------+-------+
| Variable_name            | Value |
+--------------------------+-------+
| innodb_autoinc_lock_mode | 2     |
+--------------------------+-------+
1 row in set (0.95 sec)

自增锁丢失与间隙

数据库有一张sys_user表,表中有四条记录,id为自增列,id最大值为4:

MySQL [employees]> select * from sys_user;
+----+--------+-------------+-----------+-------------+-----+
| id | name   | name_pinyin | id_card   | phone       | age |
+----+--------+-------------+-----------+-------------+-----+
|  1 | 小六   | xiaoliu     | 300000000 | 13000008000 |  10 |
|  2 | 小六   | xiaoliu     | 300000001 | 13000008000 |  11 |
|  3 | 小六   | xiaoliu     | 300000002 | 13000008000 |  13 |
|  4 | 小六   | xiaoliu     | 300000003 | 13000008000 |  20 |
+----+--------+-------------+-----------+-------------+-----+
4 rows in set (0.01 sec)

启动事务A,执行插入语句后回滚事务A:

begin;
insert into sys_user (name, name_pinyin, id_card, phone, age)values ('小六', 'xiaoliu', 3000000010, 13000008000, 10);
rollback;

事务A执行结果:

MySQL [employees]> begin;
Query OK, 0 rows affected (0.00 sec)

MySQL [employees]> insert into sys_user (name, name_pinyin, id_card, phone, age)values ('小六', 'xiaoliu', 3000000010, 13000008000, 10);
Query OK, 1 row affected (0.00 sec)

MySQL [employees]> rollback;
Query OK, 0 rows affected (0.97 sec)

启动事务B,执行插入语句后提交事务B:

begin;
insert into sys_user (name, name_pinyin, id_card, phone, age)values ('小六', 'xiaoliu', 3000000010, 13000008000, 10);
commit;
select * from sys_user;

事务B执行完成后,查询输出如下(事务A使用的id=5值丢失出现自增间隙):

MySQL [employees]> select * from sys_user;
+----+--------+-------------+------------+-------------+-----+
| id | name   | name_pinyin | id_card    | phone       | age |
+----+--------+-------------+------------+-------------+-----+
|  1 | 小六   | xiaoliu     | 300000000  | 13000008000 |  10 |
|  2 | 小六   | xiaoliu     | 300000001  | 13000008000 |  11 |
|  3 | 小六   | xiaoliu     | 300000002  | 13000008000 |  13 |
|  4 | 小六   | xiaoliu     | 300000003  | 13000008000 |  20 |
|  6 | 小六   | xiaoliu     | 3000000010 | 13000008000 |  10 |
+----+--------+-------------+------------+-------------+-----+
5 rows in set (0.00 sec)

参考

  1. https://dev.mysql.com/doc/refman/8.0/en/innodb-locking.html#innodb-record-locks
  2. https://www.infoq.cn/article/zau0ewzsdtx9zofr6c8w
  3. https://dev.mysql.com/doc/refman/8.0/en/innodb-auto-increment-handling.html
  4. https://www.cnblogs.com/gaogao67/p/11123772.html
相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
7天前
|
存储 关系型数据库 MySQL
MySQL 8.0特性-自增变量的持久化
【11月更文挑战第8天】在 MySQL 8.0 之前,自增变量(`AUTO_INCREMENT`)的行为在服务器重启后可能会发生变化,导致意外结果。MySQL 8.0 引入了自增变量的持久化特性,将其信息存储在数据字典中,确保重启后的一致性。这提高了开发和管理的稳定性,减少了主键冲突和数据不一致的风险。默认情况下,MySQL 8.0 启用了这一特性,但在升级时需注意行为变化。
|
8天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
本文介绍了MySQL InnoDB存储引擎中的数据文件和重做日志文件。数据文件包括`.ibd`和`ibdata`文件,用于存放InnoDB数据和索引。重做日志文件(redo log)确保数据的可靠性和事务的持久性,其大小和路径可由相关参数配置。文章还提供了视频讲解和示例代码。
113 11
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
|
8天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL InnoDB的表空间
InnoDB是MySQL默认的存储引擎,主要由存储结构、内存结构和线程结构组成。其存储结构分为逻辑和物理两部分,逻辑存储结构包括表空间、段、区和页。表空间是InnoDB逻辑结构的最高层,所有数据都存放在其中。默认情况下,InnoDB有一个共享表空间ibdata1,用于存放撤销信息、系统事务信息等。启用参数`innodb_file_per_table`后,每张表的数据可以单独存放在一个表空间内,但撤销信息等仍存放在共享表空间中。
|
8天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL InnoDB的段、区和页
MySQL的InnoDB存储引擎逻辑存储结构与Oracle相似,包括表空间、段、区和页。表空间由段和页组成,段包括数据段、索引段等。区是1MB的连续空间,页是16KB的最小物理存储单位。InnoDB是面向行的存储引擎,每个页最多可存放7992行记录。
|
7天前
|
监控 关系型数据库 MySQL
MySQL自增ID耗尽应对策略:技术解决方案全解析
在数据库管理中,MySQL的自增ID(AUTO_INCREMENT)属性为表中的每一行提供了一个唯一的标识符。然而,当自增ID达到其最大值时,如何处理这一情况成为了数据库管理员和开发者必须面对的问题。本文将探讨MySQL自增ID耗尽的原因、影响以及有效的应对策略。
27 3
|
7天前
|
存储 监控 关系型数据库
MySQL自增ID耗尽解决方案:应对策略与实践技巧
在MySQL数据库中,自增ID(AUTO_INCREMENT)是一种特殊的属性,用于自动为新插入的行生成唯一的标识符。然而,当自增ID达到其最大值时,会发生什么?又该如何解决?本文将探讨MySQL自增ID耗尽的问题,并提供一些实用的解决方案。
14 1
|
8天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL的InnoDB存储引擎
InnoDB是MySQL的默认存储引擎,广泛应用于互联网公司。它支持事务、行级锁、外键和高效处理大量数据。InnoDB的主要特性包括解决不可重复读和幻读问题、高并发度、B+树索引等。其存储结构分为逻辑和物理两部分,内存结构类似Oracle的SGA和PGA,线程结构包括主线程、I/O线程和其他辅助线程。
【赵渝强老师】MySQL的InnoDB存储引擎
|
5月前
|
存储 关系型数据库 MySQL
MySQL数据库进阶第六篇(InnoDB引擎架构,事务原理,MVCC)
MySQL数据库进阶第六篇(InnoDB引擎架构,事务原理,MVCC)
|
1月前
|
存储 缓存 关系型数据库
详细解析MySQL中的innodb和myisam
总之,InnoDB和MyISAM各有千秋,选择合适的存储引擎应基于对应用程序特性的深入理解,以及对性能、数据完整性和可扩展性的综合考量。随着技术发展,InnoDB因其全面的功能和日益优化的性能,逐渐成为更广泛场景下的首选。然而,在特定条件下,MyISAM依然保留其独特的价值。
116 0
|
3月前
|
监控 关系型数据库 MySQL
在Linux中,mysql的innodb如何定位锁问题?
在Linux中,mysql的innodb如何定位锁问题?