使用XtraBackup完成对mysql全量、增量备份与恢复

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介: 使用XtraBackup完成对mysql全量、增量备份与恢复

1.下载地址:
https://www.percona.com/downloads/XtraBackup/LATEST/ 选择对应版本
2.解压软件包:
tar -zxvf percona-xtrabackup-2.4.13-Linux-x86_64.libgcrypt145.tar.gz
3.进入bin目录:
1
这里innobackupex是xtrabackup的一个软链接,所以使用这两个都可以进行备份、恢复数据。
可以使用./xtrabackup --help查看各种参数含义
4.使用xtrabackup完成全备过程:
xtrabackup是一款对mysql数据裸文件备份工具,使用xtrabackup比mysqldump快速很多。
全备过程:
innobackupex -uroot -p123456 -H10.xx.xx.xx /data/backup/
2
使用命令innobackupex,-u 指定有备份权限的mysql用户,-p密码,-H mysql主机ip,后面目录为想要将备份存放的路径。
命令执行完成后,会有completed ok! 表示备份成功。
执行完成后会生成一个根据系统时间的备份目录,里面存放的就是备份文件与xtrabackup备份过程中的信息。
5.备份文件信息:
可以看到在当前文件下,有对应mysql数据中的各级数据库命名的目录,这些目录就是mysql数据目录。
3
xtrabackup_checkpoints文件记录备份完成时检查点的日志序列号和该备份文件类型,此次是一次全量备份,标识为full-backuped
4
xtrabackup_info文件记录备份的详细信息,如 备份命令、备份开始时间、备份结束时间,mysql版本等信息。5
6.全备数据的恢复:
先模拟故障,将test库删掉。
6
然后进行数据恢复操作,恢复数据时innobackupex要加参数--apply-log,该参数的作用就是回滚所有未提交的事物,并同步已经提交的事物至数据文件中,已完成数据恢复过程。
命令如下:
innobackupex -uroot -p123456 -H10.xx.xx.xx --apply-log 2019-02-02_19-18-44
命令后跟的目录为备份文件目录名7
出现'completed ok'证明数据校验成功,可以进行下一步。
需要先停掉mysql实例,systemctl stop mysqld
将mysql数据目录改名为datadir_bak:
mv datadir datadir_bak
mysql数据目录可以通过show variables like 'datadir'命令查看:
8
最后一步,将备份文件拷贝至原mysql数据目录下,并重命名为datadir:
cp -r 2019-02-02_19-18-44 /data/mysqld/
cd /data/mysqld/
mv 2019-02-02_19-18-44 datadir
修改对应权限 chown -R mysql:mysql datadir
重启mysql,systemctl start mysqld即可
进入数据库查看test库已被恢复
7.xtrabackup 增备
xtrabackup增备是基于xtrabackup_checkpoints中的日志序列号,进而进行的增量备份.增量备份是基于全备而言的,第一次增备必须基于上一次的全量备份,之后的每次增备都是基于上一次的最终增备。
在此就以上步进行的全备实验,首先先在数据库中随意插入某条数据,使用命令进行备份.
先创建一个增备目录,mkdir increment
增备要使用--incremental 参数指定增备路径,--incremental-basedir=后面紧跟基于的上一次备份路径,如
innobackupex -uroot -p123456 -H10.xx.xx.xx --incremental /data/backup/increment --incremental-basedir=/data/backup/2019-02-02_19-18-44
备份完成后查看增备文件大小
10
此时再进入数据库随便再插入一条数据进行第二次增备:
innobackupex -uroot -p123456 -H10.xx.xx.xx --incremental /data/backup/increment --incremental-basedir=/data/backup/increment/2019-02-02_20-07-51
此时的incremental-basedir=就是上一次增备的路径
8.增备的恢复:
首先要进行第一次的全备恢复,再把增备文件恢复到全备中,这2个过程都要加--redo-only参数,意味着只前滚xtrabackup日志中已经提交的事务,并不回滚未提交的事务。最后一个过程就是对整体的全备进行恢复,这时就可以去掉--redo-only参数,意味着回滚那些没提交的事务。
首先进行全备恢复:
innobackupex -uroot -p123456 -H10.xx.xx.xx --apply-log --redo-only /data/backup/2019-02-02_19-18-44
接下来进行第一次增备恢复,需要加上--incremental-dir=第一次增备文件路径:
innobackupex -uroot -p123456 -H10.xx.xx.xx --apply-log -redo-only /data/backup/2019-02-02_19-18-44 --incremental-dir=/data/backup/increment/2019-02-02_20-07-51
进行第二次增备恢复:
innobackupex -uroot -p123456 -H10.xx.xx.xx --apply-log --redo-only /data/backup/2019-02-02_19-18-44 --inmental-dir=2019-02-02_20-15-33
最后,就能进行一次恢复操作。具体跟之前的全备恢复一样。
11
把mysqld停掉,将完整的全备目录复制到对应mysql数据目录下并改名授予权限完成增备恢复。
在生产环境中,基于增备可以有效的避免暂用过多磁盘空间,每次的备份是基于上一次的增备进行的。但是恢复的时候比较繁琐,这里建议每周进行一次完整的全备,在这基础上再进行增备,就不用那么繁琐了。

相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
8天前
|
关系型数据库 MySQL OLAP
实时计算 Flink版产品使用合集之可以支持 MySQL 数据源的增量同步到 Hudi 吗
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStream API、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
32 4
|
10天前
|
运维 DataWorks 关系型数据库
DataWorks产品使用合集之DataWorks还有就是对于mysql中的表已经存在数据了,第一次全量后面增量同步的步骤如何解决
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
38 2
|
10天前
|
DataWorks 关系型数据库 MySQL
DataWorks产品使用合集之在DataWorks中,要实现MySQL数据源的增量同步如何解决
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
51 2
|
2天前
|
SQL 关系型数据库 MySQL
实时计算 Flink版产品使用合集之从MySQL同步数据到Doris时,历史数据时间字段显示为null,而增量数据部分的时间类型字段正常显示的原因是什么
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStreamAPI、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
|
2天前
|
SQL 关系型数据库 MySQL
实时计算 Flink版产品使用合集之mysql cdc支持全量的时候并发读取,该如何配置
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStream API、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
|
8天前
|
消息中间件 关系型数据库 MySQL
实时计算 Flink版产品使用合集之2.2.1版本同步mysql数据写入doris2.0 ,同步完了之后增量的数据延迟能达到20分钟甚至一直不写入如何解决
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStream API、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
19 1
|
8天前
|
Prometheus Cloud Native 关系型数据库
实时计算 Flink版产品使用合集之binlog被清理掉的问题,并且binlog有备份,有什么方法来恢复到RDS
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStream API、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
24 2
|
10天前
|
存储 关系型数据库 MySQL
XtraBackup支持哪些MySQL数据库版本?
【5月更文挑战第13天】XtraBackup支持哪些MySQL数据库版本?
33 0
|
10天前
|
关系型数据库 MySQL Linux
服务器Linux系统配置mysql数据库主从自动备份
这是一个基本的配置主从复制和设置自动备份的指南。具体的配置细节和命令可能因您的环境和需求而有所不同,因此建议在操作前详细阅读MySQL文档和相关资源,并谨慎操作以避免数据丢失或不一致。
28 3
|
10天前
|
关系型数据库 MySQL 数据库连接
用Navicat备份Mysql演示系统数据库的时候出:Too Many Connections
用Navicat备份Mysql演示系统数据库的时候出:Too Many Connections
47 0