MySQL备份利器-xtrabackup的介绍和原理(附脑图)

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,高可用系列 2核4GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介: 标签(linux): mysql-xtrabackup笔者Q:972581034 交流群:605799367。有任何疑问可与笔者或加群交流xtrabackup是Percona公司针对mysql数据库开发的一款开源免费的物理备份(热备)工具可针对InnoDB和XtraDB等事务引擎的数据库实现...

标签(linux): mysql-xtrabackup

笔者Q:972581034 交流群:605799367。有任何疑问可与笔者或加群交流
  • xtrabackup是Percona公司针对mysql数据库开发的一款开源免费的物理备份(热备)工具

  • 可针对InnoDB和XtraDB等事务引擎的数据库实现不锁表方式的备份

  • 可针对MyISAM等非事务引擎的数据库实现不锁表方式的备份


一、xtrabackup的七大特点

1.直接拷贝物理文件,备份和恢复数据的速度非常快、安全可靠

2.在备份期间执行的事务不会间断,备份InnoDB数据不影响业务

3.备份期间不增加太多数据库的性能压力

4.支持对备份的数据自动校验

5.支持全量、增量、压缩备份及流备份

6.技持在线迁移表以及快速创建新的从库

7.支持几乎所有版本的MySQL和MariaDB


二、xtrabackup的备份原理及过程


第一步:
        记录当前redo日志位置(即对应的LSN号)

第二步:
        在后台启动一个进程持续监视redo日志文件的变化

第三步:
        同时将变化的信息记录到xtrabackup_logfile中

第四步:
        针对所有的innodb数据文件进行备份(复制)

第五步:
        备份完成后执行“flush tables with read lock”,对数据库锁表

第六步:
        备份(复制)MyISAM等非事务引擎的数据文件

第七步:
        待InnoDB、MyISAM数据文件、redo日志备份完毕后,获取binlog二进制日志位置点信息

第八步:
        执行unlock tables解锁命令,回复数据库可读写状态

三、innobackupex增量备份(仅对InnoDB引擎有效)

原理

拷贝备份之后的InnoDB中变更的“页”数据

拷贝时以全备中xtrabackup_checkpoints文件对应的LSN号为依据

将大于给定的LSN号的页数据(即增量数据)进行备份

因要比对全备LSN号,第一次增量是基于全备的,后每次增量基于上次增备


备份时发生了什么

第一步:
        在全备的xtrabackup_checkpoints logfile中找到并记录最后一个checkoint(last checkpint LSN)

第二步:
        从该LSN的位置拷贝InnoDB的redo日志到xtrabackup_logfile

第三步:
        开始备份全部的数据文件:ibd

第四步:
        待全部数据拷贝结束后,停止拷贝logfile

四、InnoDB日志

1.Redo日志

        也称事务日志,是Innodb引擎重要组成部分
        记录Innodb引擎中每个数据发生的变化信息
        用于保证innodb数据的完整性,及丢数据后的恢复
        可有效提升数据库的IO性能
        配置参数为
            innodb_log_file_size
            innodb_log_files_in_group

2.Undo日志

        记录事务的逆向逻辑操作或者逆向物理操作对应的数据变化的内容
        默认存放在共享表空间里面的(ibdata*文件)
        和Redo日志功能不同Undo日志主要用于回滚数据库崩溃前未完整提交的事务数据
        确保数据恢复前后一致

3.LSN

        全拼log Sequence Number
        意为日志序列号
        64位的整型数字
        用于记录Redo日志时,使用LSN唯一标识一条变化的数据

4.Checkpoint

        用来标识数据库崩溃后,应恢复的redo log的起始点

五、xtrabackup脑图

注:纯装X用。。
img_5d7965c34e6bc632d3e91a4b4e68a78f.png

相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
目录
相关文章
|
2月前
|
存储 SQL 关系型数据库
mysql底层原理:索引、慢查询、 sql优化、事务、隔离级别、MVCC、redolog、undolog(图解+秒懂+史上最全)
mysql底层原理:索引、慢查询、 sql优化、事务、隔离级别、MVCC、redolog、undolog(图解+秒懂+史上最全)
mysql底层原理:索引、慢查询、 sql优化、事务、隔离级别、MVCC、redolog、undolog(图解+秒懂+史上最全)
|
1月前
|
存储 关系型数据库 MySQL
在CentOS 8.x上安装Percona Xtrabackup工具备份MySQL数据步骤。
以上就是在CentOS8.x上通过Perconaxtabbackup工具对Mysql进行高效率、高可靠性、无锁定影响地实现在线快速全量及增加式数据库资料保存与恢复流程。通过以上流程可以有效地将Mysql相关资料按需求完成定期或不定期地保存与灾难恢复需求。
139 10
|
3月前
|
存储 关系型数据库 MySQL
【赵渝强老师】使用select...into outfile语句备份MySQL
本文介绍了MySQL中使用`SELECT...INTO OUTFILE`语句将表数据导出为文本文件的方法。通过示例演示了如何备份员工表(emp)的数据,包括创建存储目录、设置权限、配置参数`secure_file_priv`以及解决相关错误的过程。字段分隔符和行终止符可自定义,确保数据格式符合需求。最后展示了备份文件的内容,验证操作成功。
258 36
|
2月前
|
SQL 关系型数据库 MySQL
MySQL group by 底层原理详解。group by 执行 慢 原因深度分析。(图解+秒懂+史上最全)
MySQL group by 底层原理详解。group by 执行 慢 原因深度分析。(图解+秒懂+史上最全)
MySQL group by 底层原理详解。group by 执行 慢 原因深度分析。(图解+秒懂+史上最全)
|
3月前
|
存储 SQL 关系型数据库
【赵渝强老师】使用mysqldump备份MySQL
本文介绍了 MySQL 自带的逻辑备份工具 mysqldump 的使用方法。通过 mysqldump,可以将数据库中的数据转换为对应的 SQL 插入语句,便于备份和还原。文章详细说明了如何备份所有数据库、指定数据库及特定表,排除某些表不备份的操作,以及删除数据库后如何通过备份文件恢复数据。同时提供了视频讲解和具体命令示例,帮助用户更好地理解和应用该工具。
175 5
|
3月前
|
存储 SQL 关系型数据库
【赵渝强老师】使用mydumper备份MySQL
本文介绍了使用mydumper工具进行MySQL数据库备份与恢复的操作方法。相比单线程工作的mysqldump,mydumper支持多线程,速度提升可达10倍。其功能包括事务性表快照、快速压缩、导出binlog等,并提供详细的参数说明和操作步骤。文章通过实例演示了安装mydumper、创建存储目录、全库备份、指定数据库及表备份、删除数据库以及使用myloader恢复数据的完整流程,并附带视频讲解,帮助用户更好地理解和应用该工具。
109 0
|
5月前
|
关系型数据库 MySQL Linux
在Linux环境下备份Docker中的MySQL数据并传输到其他服务器以实现数据级别的容灾
以上就是在Linux环境下备份Docker中的MySQL数据并传输到其他服务器以实现数据级别的容灾的步骤。这个过程就像是一场接力赛,数据从MySQL数据库中接力棒一样传递到备份文件,再从备份文件传递到其他服务器,最后再传递回MySQL数据库。这样,即使在灾难发生时,我们也可以快速恢复数据,保证业务的正常运行。
273 28
|
5月前
|
存储 关系型数据库 MySQL
利用Cron表达式实现MySQL数据库的定时备份
以上就是如何使用Cron表达式和mysqldump命令实现MySQL数据库的定时备份。这种方法的优点是简单易用,而且可以根据需要定制备份的时间和频率。但是,它也有一些限制,例如,它不能备份MySQL服务器的配置文件和用户账户信息,也不能实现增量备份。如果需要更复杂的备份策略,可能需要使用专门的备份工具或服务。
131 15
|
23天前
|
安全 关系型数据库 MySQL
MySQL安全最佳实践:保护你的数据库
本文深入探讨了MySQL数据库的安全防护体系,涵盖认证安全、访问控制、网络安全、数据加密、审计监控、备份恢复、操作系统安全、应急响应等多个方面。通过具体配置示例,为企业提供了一套全面的安全实践方案,帮助强化数据库安全,防止数据泄露和未授权访问,保障企业数据资产安全。
|
8天前
|
缓存 关系型数据库 BI
使用MYSQL Report分析数据库性能(下)
使用MYSQL Report分析数据库性能
40 3

推荐镜像

更多