RDS FOR MYSQL 各版本利用物理备份进行本地恢复的方法

本文涉及的产品
对象存储 OSS,20GB 3个月
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
简介: RDS for mysql利用物理备份文件进行本地恢复笔记,包含5.5,5.6,5.7,8.0版本


下面文档讲述RDS FOR MYSQL 各版本利用物理备份进行本地恢复的方法(5.5(文档末尾才有5.5恢复方法),5.6,5.7 ,8.0):

说明:

1. 本地自建Mysql数据必须和云rds for mysql版本大版本保持一致 2. 64位的Linux系统 3. MySQL 5.6及之前(含5.5)的版本需要安装 Percona XtraBackup 2.3 ; MySQL 5.7版本需要安装 Percona XtraBackup 2.4;MySQL 8.0版本需要安装 Percona XtraBackup 8.0

4. 为了快速恢复,本地mysql安装都采用centos的yum安装方式



5.7/5.6恢复示例:

安装mysql:
1.下载yum源
centos6系统执行下面下载安装: wget 
https://repo.mysql.com//mysql80-community-release-el6-1.noarch.rpm

yum localinstall mysql80-community-release-el6-1.noarch.rpm
centos7系统执行下面下载安装: wget  https://repo.mysql.com//mysql80-community-release-el7-1.noarch.rpm yum localinstall mysql80-community-release-el7-1.noarch.rpm 2.配置yum源
yum -y install yum-utils

#根据选择安装需要的版本 mysql5.7版本:
yum-config-manager --disable   mysql80-community yum-config-manager --enable   mysql57-community mysql5.6版本: yum-config-manager --disable   mysql80-community  yum-config-manager --enable   mysql56-community
3.安装mysql server (yum安装完成后不慌启动mysql)
yum install mysql-community-server
4.替换/etc/my.cnf文件,其中包括跳过权限表启动的配置项:

[mysqld]
innodb_checksum_algorithm=crc32
innodb_data_file_path=ibdata1:200M:autoextend
innodb_log_files_in_group=2
innodb_log_file_size=524288000
innodb_undo_directory=/var/lib/mysql/
basedir=/usr
datadir=/var/lib/mysql
innodb_undo_tablespaces=0
server_id=999098802
skip-grant-tables=1
sql_mode=''
1).配置yum源
yum install yum update percona-release


2). 查看yum源,选择要安装的percona xtrabackup软件
yum list | grep percona
yum -y install percona-xtrabackup.x86_64           5.6版本需要安装这个 yum -y install percona-xtrabackup-24.x86_64 5.7版本需要安装这个 yum -y install percona-xtrabackup-80.x86_64 8.0版本安装这个

6.下载备份文件并恢复:

目前物理备份集文件有3种格式:

  • tar 压缩包 (.tar.gz 后缀)
  • xbstream 压缩包 (.xb.gz 后缀)
  • xbstream 文件包 (_qp.xb 后缀)

根据RDS获取的下载地址下载相应物理备份文件,注意下载文件名可能有不同: wget -c 'rds备份文件下载地址 -O bak.tar.gz 这个到RDS控制台备份恢复里面去获取备份集下载地址,注意下载地址这里用wget下载需要用单引号引起来,否则会报403错误

例如: wget -c 'https://rdsbak-bj-v4.oss-cn-beijing.aliyuncs.com/custins15680923/hins8532551_data_20190812213747_qp.xb?OSSAccessKeyId=LTAIyKzxtSYNknVO&Expires=1565792827&Signature=kz%2F842LvRYwLuU6q9%2BVyZF70pZY%3D'   -O bak_qp.xb wget -c 'https://rdsbak-bj-v4.oss-cn-beijing.aliyuncs.com/custins15680923/hins8532551_data_20190812213747.tar.gz?OSSAccessKeyId=LTAIyKzxtSYNknVO&Expires=1565792827&Signature=kz%2F842LvRYwLuU6q9%2BVyZF70pZY%3D'     -O bak.tar.gz 备注: 获取的下载地址链接里面就包含了rds备份文件的名字,例如上面两个就分别是:hins8532551_data_20190812213747_qp.xb  hins8532551_data_20190812213747.tar.gz
解压备份文件:

对于tar 压缩包 (.tar.gz 后缀),使用命令:

tar -izxvf <数据备份文件名>.tar.gz -C  /var/lib/mysql

对于xbstream 压缩包 (.xb.gz 后缀),使用命令:

gzip -d -c <数据备份文件名>.xb.gz | xbstream -x -v -C /var/lib/mysql

对于xbstream 文件包 (_qp.xb 后缀),使用命令:

## 解包
cat <数据备份文件名>_qp.xb | xbstream -x -v -C /var/lib/mysql
## 解压
innobackupex --decompress --remove-original /var/lib/mysql

说明: 你下载的备份文件在哪个目录下,就在下载的备份文件目录执行解压,-C指定解压到/var/lib/mysql目录,因为yum安装的datadir是这个
cd  /var/lib/mysql
innobackupex --defaults-file=backup-my.cnf --apply-log /var/lib/mysql
chown -R mysql:mysql /var/lib/mysql
/etc/init.d/mysqld start
更新aliyun_root@127.0.0.1密码:
mysql     #shell里面执行mysql连接mysql并修改密码 mysql>select user,host from mysql.user; 查看是否有aliyun_root@127.0.0.1这个用户,可根据需要来设置根据这个sql查看到有的账号密码
mysql>flush privileges;
mysql>SET PASSWORD FOR 'aliyun_root'@'127.0.0.1' = PASSWORD('MyNewPass');
mysql>exit
删除/etc/my.cnf里面的skip-grant-tables=1​​​​​​
/etc/init.d/mysqld restart
账号也迁移过来了的,可以用账号云mysql的账号登陆了:

登陆:
mysql -ualiyun_root -h127.0.0.1 -pMyNewPass 这里注意登陆需要用到-h127.0.0.1,因为RDS里面没有localhost主机的链接地址,不指定会报错
mysql>use mysql;
mysql>alter table proc engine=myisam;
mysql>alter table event engine=myisam;
mysql>alter table  func engine=myisam;

==================================================================== mysql 8.0恢复:

1.下载yum源

centos6系统执行下面下载安装:
wget 
https://repo.mysql.com//mysql80-community-release-el6-1.noarch.rpm

yum localinstall mysql80-community-release-el6-1.noarch.rpm

centos7系统执行下面下载安装:
wget  https://repo.mysql.com//mysql80-community-release-el7-1.noarch.rpm
yum localinstall mysql80-community-release-el7-1.noarch.rpm



2.配置yum源

yum -y install yum-utils

3.安装mysql server (yum安装完成后不慌启动mysql)

yum install mysql-community-server


4.替换/etc/my.cnf文件,其中包括跳过权限表启动的配置项:
[mysqld]
lower_case_table_names = 1
innodb_checksum_algorithm=crc32
innodb_data_file_path=ibdata1:200M:autoextend
innodb_log_files_in_group=2
innodb_log_file_size=524288000
innodb_undo_directory=/var/lib/mysql/
basedir=/usr
datadir=/var/lib/mysql
#innodb_undo_tablespaces=0
server_id=999098802
skip-grant-tables=1
sql_mode=''
log_error=/var/lib/mysql/mysqld.err





1).配置percona yum源

yum update percona-release





2). 查看yum源,选择要安装的percona xtrabackup软件

yum list | grep percona

yum -y install percona-xtrabackup-80.x86_64       8.0版本安装这个
yum -y install qpress



6.下载备份文件并恢复:


目前物理备份集文件有3种格式:



  • tar 压缩包 (.tar.gz 后缀)
  • xbstream 压缩包 (.xb.gz 后缀)
  • xbstream 文件包 (_qp.xb 后缀)



根据RDS获取的下载地址下载相应物理备份文件,注意下载文件名可能有不同:
wget -c '
rds备份文件下载地址' -O bak.tar.gz     这个到RDS控制台备份恢复里面去获取备份集下载地址,注意下载地址这里用wget下载需要用单引号引起来,否则会报403错误

例如:
wget -c 'https://rdsbak-bj-v4.oss-cn-beijing.aliyuncs.com/custins15680923/hins8532551_data_20190812213747_qp.xb?OSSAccessKeyId=LTAIyKzxtSYNknVO&Expires=1565792827&Signature=kz%2F842LvRYwLuU6q9%2BVyZF70pZY%3D'     -O bak_qp.xb

wget -c 'https://rdsbak-bj-v4.oss-cn-beijing.aliyuncs.com/custins15680923/hins8532551_data_20190812213747.tar.gz?OSSAccessKeyId=LTAIyKzxtSYNknVO&Expires=1565792827&Signature=kz%2F842LvRYwLuU6q9%2BVyZF70pZY%3D'     -O bak.tar.gz

备注: 获取的下载地址链接里面就包含了rds备份文件的名字,例如上面两个就分别是:hins8532551_data_20190812213747_qp.xb   hins8532551_data_20190812213747.tar.gz



解压备份文件:



对于tar 压缩包 (.tar.gz 后缀),使用命令:



tar -izxvf <数据备份文件名>.tar.gz -C  /var/lib/mysql



对于xbstream 压缩包 (.xb.gz 后缀),使用命令:



gzip -d -c <数据备份文件名>.xb.gz | xbstream -x -v -C /var/lib/mysql



对于xbstream 文件包 (_qp.xb 后缀),使用命令:



## 解包
cat <数据备份文件名>_qp.xb | xbstream -x -v -C /var/lib/mysql
## 解压
cd /var/lib/mysql
xtrabackup  --decompress --remove-original --target-dir=/var/lib/mysql
   


说明: 你下载的备份文件在哪个目录下,就在下载的备份文件目录执行解压,-C指定解压到/var/lib/mysql目录,因为yum安装的datadir是这个

cd  /var/lib/mysql

xtrabackup --prepare --apply-log-only --target-dir=/var/lib/mysql

说明,如果用到分区表这步可能会有下面类似报错,这个报错直接忽略

2019-08-19T12:33:14.761704Z 0 [ERROR] [MY-010520] [Server] Invalid (old?) table or database name 'zzlogger_sale_order#p#p40'
2019-08-19T12:33:14.772460Z 0 [ERROR] [MY-010520] [Server] Invalid (old?) table or database name 'zzlogger_sale_order#p#p42'
2019-08-19T12:33:14.772736Z 0 [ERROR] [MY-010520] [Server] Invalid (old?) table or database name 'zzlogger_sale_order#p#p43'
2019-08-19T12:33:14.772900Z 0 [ERROR] [MY-010520] [Server] Invalid (old?) table or database name 'zzlogger_sale_order#p#p44'
2019-08-19T12:33:14.773254Z 0 [ERROR] [MY-010520] [Server] Invalid (old?) table or database name 'zzlogger_sale_order#p#p60'
2019-08-19T12:33:14.773650Z 0 [ERROR] [MY-010520] [Server] Invalid (old?) table or database name 'zzlogger_sale_order#p#p45'



chown -R mysql:mysql /var/lib/mysql

mysqld --datadir=/var/lib/mysql --upgrade=force --user=mysql


更新aliyun_root@127.0.0.1密码:

mysql     #shell里面执行mysql连接mysql并修改密码
mysql>select user,host from mysql.user;   查看是否有aliyun_root@127.0.0.1这个用户,可根据需要来设置根据这个sql查看到有的账号密码

mysql>flush privileges;

mysql>alter user'aliyun_root'@'127.0.0.1' identified by 'some34QA';

mysql>exit


删除/etc/my.cnf里面的skip-grant-tables=1​​​​​​ ps -ef |grep mysql 查看先前启动的mysql进程,然后Kill下 kill -9 线程id

/etc/init.d/mysqld start (centos6执行这个) systemctl start mysqld (centos7执行这个)

账号也迁移过来了的,可以用账号云mysql的账号登陆了:



登陆:

mysql -ualiyun_root -h127.0.0.1 -pMyNewPass       这里注意登陆需要用到-h127.0.0.1,因为RDS里面没有localhost主机的链接地址,不指定会报错

==================================================================== 5.5版本的恢复: 2)   yum localinstall mysql80-community-release-el6-1.noarch.rpm
3)   yum -y install yum-utils
4)   yum-config-manager --disable mysql80-community
5)   yum-config-manager --enable mysql55-community
6)   yum install mysql-community-server -y
7)   vi /etc/my.cnf   添加下面内容,注意区别于5.6,5.7版本的内容
[mysqld]
innodb_data_file_path=ibdata1:200M:autoextend
innodb_log_files_in_group=2
innodb_log_file_size=524288000
basedir=/usr
datadir=/var/lib/mysql
server_id=999098802
skip-grant-tables=1
sql_mode=''


步骤3:
安装percona2.3

1)yum install 2)yum install percona-xtrabackup.x86_64


步骤4:
准备好mysql5.5的物理备份安装包,省略
假设这里获取的物理备份文件名字叫:a.tar.gz


步骤5:
开始恢复


1)tar -izxvf a.tar.gz  -C /var/lib/mysql
2)  cd /var/lib/mysql
3)  innobackupex --defaults-file=backup-my.cnf --apply-log /var/lib/mysql
4)  chown -R mysql:mysql /var/lib/mysql
5)  /etc/init.d/mysqld start
6)  mysql    直接进入mysql命令会话,进入后依次执行下面命令
mysql> flush privileges;
Query OK, 0 rows affected (0.00 sec)

mysql> select user,host from mysql.user;
+---------------+--------------+
| user          | host         |
+---------------+--------------+
| aurora        | %            |
| replicator    | 10.151.82.81 |
| root          | 127.0.0.1    |
| root          | ::1          |
| rdsflashback  | localhost    |
+---------------+--------------+
8 rows in set (0.00 sec)

mysql> SET PASSWORD FOR 'root'@'127.0.0.1' = PASSWORD('MyNewPass');
Query OK, 0 rows affected (0.00 sec)

mysql> exit

可以再登陆mysql查看数据库信息:
mysql -uroot -pMyNewPass -h127.0.0.1
mysql>use mysql;
mysql>alter table proc engine=myisam;
mysql>alter table event engine=myisam;
mysql>alter table  func engine=myisam;
mysql>show databases;


相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助 &nbsp; &nbsp; 相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
2月前
|
存储 关系型数据库 MySQL
深入解析MySQL数据存储机制:从表结构到物理存储
深入解析MySQL数据存储机制:从表结构到物理存储
190 1
|
3月前
|
安全 关系型数据库 MySQL
揭秘MySQL海量数据迁移终极秘籍:从逻辑备份到物理复制,解锁大数据迁移的高效与安全之道
【8月更文挑战第2天】MySQL数据量很大的数据库迁移最优方案
686 17
|
4月前
|
关系型数据库 MySQL Serverless
函数计算产品使用问题之调用RDS MySQL的步骤是怎样的
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。
|
3月前
|
SQL 关系型数据库 MySQL
【MySQL核心】MySQL无法启动?批量恢复MySQL 物理文件-拯救即将跑路的你
【MySQL核心】MySQL无法启动?批量恢复MySQL 物理文件-拯救即将跑路的你
|
4月前
|
关系型数据库 数据库 RDS
利用DTS将自建mysql5.7版本数据库迁移至对应rds报错
利用DTS将自建mysql5.7版本数据库迁移至对应rds报错
151 0
|
5月前
|
关系型数据库 MySQL 测试技术
《阿里云产品四月刊》—瑶池数据库微课堂|RDS MySQL 经济版 vs 自建 MySQL 性能压测与性价比分析
阿里云瑶池数据库云原生化和一体化产品能力升级,多款产品更新迭代
|
3月前
|
关系型数据库 MySQL 数据库
RDS MySQL灾备服务协同解决方案构建问题之数据库备份数据的云上云下迁移如何解决
RDS MySQL灾备服务协同解决方案构建问题之数据库备份数据的云上云下迁移如何解决
|
6月前
|
SQL 算法 数据库
【SQL server】玩转SQL server数据库:第三章 关系数据库标准语言SQL(二)数据查询
【SQL server】玩转SQL server数据库:第三章 关系数据库标准语言SQL(二)数据查询
396 6
|
3月前
|
SQL 关系型数据库 数据库
数据库空间之谜:彻底解决RDS for SQL Server的空间难题
【8月更文挑战第16天】在管理阿里云RDS for SQL Server时,合理排查与解决空间问题是确保数据库性能稳定的关键。常见问题包括数据文件增长、日志文件膨胀及索引碎片累积。利用SQL Server的动态管理视图(DMV)可有效监测文件使用情况、日志空间及索引碎片化程度。例如,使用`sp_spaceused`检查文件使用量,`sys.dm_db_log_space_usage`监控日志空间,`sys.dm_db_index_physical_stats`识别索引碎片。同时,合理的备份策略和文件组设置也有助于优化空间使用,确保数据库高效运行。
86 2
|
3月前
|
关系型数据库 数据库 数据安全/隐私保护
"告别繁琐!Python大神揭秘:如何一键定制阿里云RDS备份策略,让数据安全与效率并肩飞,轻松玩转云端数据库!"
【8月更文挑战第14天】在云计算时代,数据库安全至关重要。阿里云RDS提供自动备份,但标准策略难以适应所有场景。传统手动备份灵活性差、管理成本高且恢复效率低。本文对比手动备份,介绍使用Python自定义阿里云RDS备份策略的方法,实现动态调整备份频率、集中管理和智能决策,提升备份效率与数据安全性。示例代码演示如何创建自动备份任务。通过自动化与智能化备份管理,支持企业数字化转型。
103 2
下一篇
无影云桌面