MySQL日志——undolog

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
日志服务 SLS,月写入数据量 50GB 1个月
简介: MySQL日志——undolog

MySQL为什么需要日志

了解redis的朋友都知道redis的日志是为了实现数据的持久化,而mysql将数据存储在磁盘文件,没有持久化的问题,为什么还需要日志呢?

答案:

1.mysql的事务支持回滚操作,但数据库的状态为当前状态,需要记录事务开始前的数据库状态,以便进行回滚恢复

2.如果在执行事务时数据库故障,需要记录事务的执行状态,以便重启mysql时恢复之前的事务状态

3.用来支持主从复制,避免直接的数据库拷贝,而是通过从数据库重放日志来达到备份的目的,实质是将大部分工作转移到从数据库进行,避免对主数据库造成性能影响

MySQL有哪些日志?有什么作用?

一、undo log(回滚日志):是 Innodb 存储引擎层生成的日志,实现了事务中的原子性,主要用于事务回滚和 MVCC

作用

  • undo log 用于支持事务的回滚和多版本并发控制(MVCC)。在事务修改数据之前,undo log 记录了数据的旧版本,以便在事务回滚时可以恢复到之前的状态。

特性

  • 逻辑日志:记录的是逻辑操作,如插入、更新、删除等。
  • 多版本控制undo log 支持 MVCC,通过保存数据的旧版本,提供一致性读(Consistent Read),实现快照读。

记录内容

  • 修改前的值或逻辑操作(如行删除、更新前的旧值等)。

二、redo log(重做日志):是 Innodb 存储引擎层生成的日志,实现了事务中的持久性,主要用于掉电等故障恢复

作用

  • redo log 主要用于保证事务的持久性和数据恢复。在事务提交时,redo log 记录了所有修改操作,这些日志可以在数据库崩溃后用来重做(恢复)事务,以保证已提交事务的持久性。

特性

  • 物理日志:记录的是页级别的物理修改操作。
  • 循环写redo log 的大小固定,采用循环写的方式。
  • 持久性保证:事务在提交时会先写入 redo log 并刷盘,确保即使数据库崩溃也能通过 redo log 恢复已提交的事务。

记录内容

  • 页号、偏移量、修改前后的数据等。

三、binlog (归档日志):是 Server 层生成的日志,主要用于数据备份和主从复制

作用

  • bin log 主要用于复制和数据恢复。bin log 记录了所有的DML(Data Manipulation Language)和DDL(Data Definition Language)操作,这些操作日志可以用于主从复制(Master-Slave Replication)和基于时间点的恢复(PITR)。

特性

  • 逻辑日志:记录的是逻辑操作,如SQL语句。
  • 复制机制:主库的 bin log 可以传输到从库,从库通过重放 bin log 实现数据同步。
  • 数据恢复:可以通过 bin log 重放操作来恢复数据库到某一时间点。

记录内容

  • SQL语句(INSERT、UPDATE、DELETE等)、事务的开始和结束标记、表结构变化等。

三种日志的区别和联系

  • 用途
  • redo log:用于崩溃恢复,保证事务的持久性。
  • undo log:用于事务回滚和MVCC,提供一致性读。
  • bin log:用于主从复制和数据恢复。
  • 内容
  • redo log:物理级别的页修改操作。
  • undo log:逻辑级别的操作和数据的旧版本。
  • bin log:逻辑级别的SQL操作。
  • 写入时机
  • redo log:在事务提交时写入。
  • undo log:在数据修改前写入。
  • bin log:在事务提交时写入。

undo log(回滚日志)

为什么需要undo log?

mysql事务支持回滚,也就是在事务提交之前,可以恢复到事务开始前的数据库状态,相当于已经执行的事务操作没有发生过一样,这是怎么做到的?mysql数据库的状态一定是当前状态,它是如何恢复到事务开始前的状态的呢?

这就是undo log的作用了:记录对数据库的修改操作(增删改)或修改前的值,达到记录数据库历史状态的目的

听起来很复杂的样子,让我们一探究竟!

undo log记录哪些内容?

每当 InnoDB 引擎对一条记录进行操作(修改、删除、新增)时,要把回滚时需要的信息都记录到 undo log 里,比如:

  • 插入一条记录时,要把这条记录的主键值记下来,这样之后回滚时只需要把这个主键值对应的记录删掉就好了;
  • 删除一条记录时,要把这条记录中的内容都记下来,这样之后回滚时再把由这些内容组成的记录插入到表中就好了;
  • 更新一条记录时,要把被更新的列的旧值记下来,这样之后回滚时再把这些列更新为旧值就好了。

在发生回滚时,就读取 undo log 里的数据,然后做原先相反操作。比如当 delete 一条记录时,undo log 中会把记录中的内容都记下来,然后执行回滚操作的时候,就读取 undo log 里的数据,然后进行 insert 操作。

undo log 支持 MVCC,通过保存数据的旧版本,提供一致性读(Consistent Read),实现快照读

不了解MVCC的朋友可以先简单学习一下

undo log的特性(保存数据的旧版本)决定了它能够支持多版本并发控制,当一个事务需要读取数据时,根据隔离级别,可以控制它能读到哪个版本的数据(最新、事务开始前),而这些不同历史版本的数据来源就是undo log

Undo Log 在 MVCC 中的作用

MVCC(多版本并发控制)依赖于数据的多个版本来实现并发控制和一致性读。具体来说:

  1. 多版本数据存储
  • 当事务对数据进行修改时,InnoDB 不会立即覆盖原始数据,而是通过 undo log 保存一份修改前的旧数据副本。
  • 这些旧数据副本实际上构成了数据的多个版本。每个版本都有一个对应的事务ID和版本号。
  1. 快照读(Snapshot Read)
  • 事务在启动时会创建一个一致性视图(Consistent View),该视图定义了事务可以看到的所有数据版本。
  • 一致性视图使用 undo log 中的旧数据版本来提供数据的快照读。例如,如果一个事务在其开始后有其他事务对数据进行了修改,该事务仍然可以通过读取 undo log 中的旧版本数据,看到事务开始时的数据库状态。
  1. 读取旧版本数据
  • 当事务执行 SELECT 语句时,InnoDB 会根据当前事务的时间戳和一致性视图,决定读取数据的哪个版本。
  • 如果最新版本的数据对当前事务不可见(因为它是由其他更晚启动的事务修改的),InnoDB 会沿着 undo log 查找并读取一个对当前事务可见的旧版本数据。

具体实现过程

  1. 事务开始
  • 事务A开始,创建一致性视图。此时,视图中记录了事务A能看到的其他已提交事务的快照。
  1. 数据修改
  • 事务B开始,对某行数据进行更新。在更新前,InnoDB 会将该行数据的旧版本记录到 undo log 中。
  1. 事务读取
  • 事务A在读取相同的数据行时,InnoDB 检查该行的最新版本发现它是由事务B修改的(事务B可能还没有提交,或在事务A启动后才提交)。
  • 根据一致性视图,事务A不能看到事务B的修改,因此InnoDB会通过 undo log 找到修改前的旧版本数据,返回给事务A。
  1. 事务提交和回滚
  • 事务B提交后,其修改的最新版本数据成为持久化数据,而旧版本数据仍然保留在 undo log 中,直到没有事务需要这些旧版本数据为止。
  • 如果事务B需要回滚,InnoDB会使用 undo log 中的旧版本数据将数据恢复到事务B开始前的状态。

推荐学习 https://xxetb.xetslk.com/s/p5Ibb

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
11天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
本文介绍了MySQL InnoDB存储引擎中的数据文件和重做日志文件。数据文件包括`.ibd`和`ibdata`文件,用于存放InnoDB数据和索引。重做日志文件(redo log)确保数据的可靠性和事务的持久性,其大小和路径可由相关参数配置。文章还提供了视频讲解和示例代码。
118 11
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
|
1月前
|
存储 缓存 关系型数据库
MySQL事务日志-Redo Log工作原理分析
事务的隔离性和原子性分别通过锁和事务日志实现,而持久性则依赖于事务日志中的`Redo Log`。在MySQL中,`Redo Log`确保已提交事务的数据能持久保存,即使系统崩溃也能通过重做日志恢复数据。其工作原理是记录数据在内存中的更改,待事务提交时写入磁盘。此外,`Redo Log`采用简单的物理日志格式和高效的顺序IO,确保快速提交。通过不同的落盘策略,可在性能和安全性之间做出权衡。
1636 14
|
7天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL的撤销日志文件和错误日志文件
本文介绍了MySQL的物理存储结构,重点讲解了InnoDB存储引擎中的撤销日志文件(undo log)和错误日志文件。从MySQL 8.0开始,默认生成两个10MB的undo表空间文件,并支持动态扩容和收缩。错误日志文件记录了MySQL启动、运行、关闭过程中的问题,通过示例展示了如何查看和使用这些日志。
|
1月前
|
SQL 存储 关系型数据库
Mysql主从同步 清理二进制日志的技巧
Mysql主从同步 清理二进制日志的技巧
28 1
|
1月前
|
关系型数据库 MySQL 数据库
DZ社区 mysql日志清理 Discuz! X3.5数据库可以做定期常规清理的表
很多站长在网站日常维护中忽略了比较重要的一个环节,就是对于数据库的清理工作,造成数据库使用量增加必须多的原因一般有2个:后台站点功能开启了家园,此功能现在很少有论坛会用到,但是灌水机会灌入大量垃圾信息致使站长长时间未能发觉;再有就是程序默认的一些通知类表单会存放大量的、对于网站日常运行并无意义的通知信息。
80 2
|
29天前
|
存储 关系型数据库 MySQL
MySQL中的Redo Log、Undo Log和Binlog:深入解析
【10月更文挑战第21天】在数据库管理系统中,日志是保障数据一致性和完整性的关键机制。MySQL作为一种广泛使用的关系型数据库管理系统,提供了多种日志类型来满足不同的需求。本文将详细介绍MySQL中的Redo Log、Undo Log和Binlog,从背景、业务场景、功能、底层实现原理、使用措施等方面进行详细分析,并通过Java代码示例展示如何与这些日志进行交互。
69 0
|
3月前
|
API C# 开发框架
WPF与Web服务集成大揭秘:手把手教你调用RESTful API,客户端与服务器端优劣对比全解析!
【8月更文挑战第31天】在现代软件开发中,WPF 和 Web 服务各具特色。WPF 以其出色的界面展示能力受到欢迎,而 Web 服务则凭借跨平台和易维护性在互联网应用中占有一席之地。本文探讨了 WPF 如何通过 HttpClient 类调用 RESTful API,并展示了基于 ASP.NET Core 的 Web 服务如何实现同样的功能。通过对比分析,揭示了两者各自的优缺点:WPF 客户端直接处理数据,减轻服务器负担,但需处理网络异常;Web 服务则能利用服务器端功能如缓存和权限验证,但可能增加服务器负载。希望本文能帮助开发者根据具体需求选择合适的技术方案。
163 0
|
15天前
|
XML 安全 Java
【日志框架整合】Slf4j、Log4j、Log4j2、Logback配置模板
本文介绍了Java日志框架的基本概念和使用方法,重点讨论了SLF4J、Log4j、Logback和Log4j2之间的关系及其性能对比。SLF4J作为一个日志抽象层,允许开发者使用统一的日志接口,而Log4j、Logback和Log4j2则是具体的日志实现框架。Log4j2在性能上优于Logback,推荐在新项目中使用。文章还详细说明了如何在Spring Boot项目中配置Log4j2和Logback,以及如何使用Lombok简化日志记录。最后,提供了一些日志配置的最佳实践,包括滚动日志、统一日志格式和提高日志性能的方法。
128 30
【日志框架整合】Slf4j、Log4j、Log4j2、Logback配置模板
|
1月前
|
XML JSON Java
Logback 与 log4j2 性能对比:谁才是日志框架的性能王者?
【10月更文挑战第5天】在Java开发中,日志框架是不可或缺的工具,它们帮助我们记录系统运行时的信息、警告和错误,对于开发人员来说至关重要。在众多日志框架中,Logback和log4j2以其卓越的性能和丰富的功能脱颖而出,成为开发者们的首选。本文将深入探讨Logback与log4j2在性能方面的对比,通过详细的分析和实例,帮助大家理解两者之间的性能差异,以便在实际项目中做出更明智的选择。
231 3
|
3月前
|
Kubernetes Ubuntu Windows
【Azure K8S | AKS】分享从AKS集群的Node中查看日志的方法(/var/log)
【Azure K8S | AKS】分享从AKS集群的Node中查看日志的方法(/var/log)
131 3