MySQL:binlog的开启和数据恢复

本文涉及的产品
RDS MySQL DuckDB 分析主实例,基础系列 4核8GB
RDS MySQL DuckDB 分析主实例,集群系列 4核8GB
RDS AI 助手,专业版
简介: MySQL:binlog的开启和数据恢复

测试环境

Mac OS 10.11.6

mysql 5.7.21

python 3.6.5


开启binlog

1、检查是否开启binlog


mysql>show variables like '%log_bin%';

2、开启binlog

mysql的配置文件路径查找优先级为

/etc/my.cnf

/etc/mysql/my.cnf

/usr/local/etc/my.cnf


通过Homebrew安装的my.cnf放在/usr/local/etc/中


$ vim my.cnf


[mysqld]
server_id = 1
log_bin = /var/log/mysql/mysql-bin.log
max_binlog_size = 1G
binlog_format = row
binlog_row_image = full

3、重启服务

$ mysql.server restart


4、再次检查是否开启binlog


5、查看日志文件:


$ cd /usr/local/var/mysql
$ ls

数据恢复

0、几个术语

数据查询语言DQL

数据操纵语言DML

数据定义语言DDL

数据控制语言DCL


1、MySQL闪回原理

delete操作,delete -> insert

insert操作,insert -> delete

update操作,交换SET和WHERE


恢复实战

1、确认binlog已开启

2、数据准备

(1) 建表


mysql> use demo
mysql> CREATE TABLE `user` (
  `id` int(11) NOT NULL PRIMARY KEY AUTO_INCREMENT,
  `name` varchar(20) DEFAULT '',
  `age` tinyint(3) DEFAULT '0',
  `create_time` datetime DEFAULT CURRENT_TIMESTAMP
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT='用户表测试';

(2) 插入数据


mysql> INSERT INTO `user` (`name`, `age`)
VALUES 
    ('小王', 21), 
    ('小张', 22), 
    ('小红', 22), 
    ('小楠', 23), 
    ('小柱', 25);

(3) 查看数据


mysql> select * from user;
+----+--------+------+---------------------+
| id | name   | age  | create_time         |
+----+--------+------+---------------------+
|  1 | 小王   |   21 | 2019-01-21 18:18:41 |
|  2 | 小张   |   22 | 2019-01-21 18:18:41 |
|  3 | 小红   |   22 | 2019-01-21 18:18:41 |
|  4 | 小楠   |   23 | 2019-01-21 18:18:41 |
|  5 | 小柱   |   25 | 2019-01-21 18:18:41 |
+----+--------+------+---------------------+

(4) 删除数据


mysql> delete from user;

(5)确认数据被删除


mysql> select * from user;
Empty set (0.00 sec)

3、数据恢复

(1)下载所需工具


> git clone https://github.com/danfengcao/binlog2sql.git
> cd binlog2sql
> pip install -r requirements.txt

(2)查看目前的binlog


mysql> show master logs;
+------------------+-----------+
| Log_name         | File_size |
+------------------+-----------+
| mysql-bin.000001 |       467 |
| mysql-bin.000002 |       732 |
| mysql-bin.000003 |      4574 |
+------------------+-----------+

最新的biglog是 mysql-bin.000003


(3)查找删除语句



$ python binlog2sql/binlog2sql.py -h127.0.0.1 -P3306 -uroot -p'123456' -ddemo -tuser --start-file='mysql-bin.000003' --start-datetime='2019-01-21 18:10:00' --stop-datetime='2019-01-21 18:25:00' > raw.sql
$ more raw.sql

字段说明

-h127.0.0.1  # 数据库地址
-P3306  # 端口号
-uroot # 用户名
-p'123456'  # 密码
-ddemo  # 数据库名称
-tuser  # 表名称
--start-file='mysql-bin.000003'  # binlog日志文件
--start-datetime='2019-01-21 18:10:00' # 开始时间
--stop-datetime='2019-01-21 18:25:00'  # 结束时间

找到DELETE语句中类似如下字段,回忆一下时间是否差不多


#start 4228 end 4543 time 2019-01-21 18:20:15

(4)生成回滚语句


$ python binlog2sql/binlog2sql.py -h127.0.0.1 -P3306 -uroot -p'123456' -ddemo -tuser --start-file='mysql-bin.000003' --start-position=4228 --stop-position=4543 -B > rollback.sql
$ more rollback.sql

(5) 执行回滚操作

其实就是重新插入数据


$ mysql -h127.0.0.1 -P3306 -uroot -p'123456' < rollback.sql

(6) 检查数据恢复情况

mysql> select * from user;
+----+--------+------+---------------------+
| id | name   | age  | create_time         |
+----+--------+------+---------------------+
|  1 | 小王   |   21 | 2019-01-21 18:18:41 |
|  2 | 小张   |   22 | 2019-01-21 18:18:41 |
|  3 | 小红   |   22 | 2019-01-21 18:18:41 |
|  4 | 小楠   |   23 | 2019-01-21 18:18:41 |
|  5 | 小柱   |   25 | 2019-01-21 18:18:41 |
+----+--------+------+---------------------+

相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。 &nbsp; 相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情:&nbsp;https://www.aliyun.com/product/rds/mysql&nbsp;
相关文章
|
6月前
|
SQL 监控 关系型数据库
MySQL数据恢复:当灾难发生时如何应对
本文全面解析MySQL数据恢复方案,涵盖误操作、硬件故障、崩溃及灾难场景下的恢复技巧,助你构建可靠的数据安全保障体系。
|
6月前
|
SQL 关系型数据库 MySQL
Mysql数据恢复—Mysql数据库delete删除后数据恢复案例
本地服务器,操作系统为windows server。服务器上部署mysql单实例,innodb引擎,独立表空间。未进行数据库备份,未开启binlog。 人为误操作使用Delete命令删除数据时未添加where子句,导致全表数据被删除。删除后未对该表进行任何操作。需要恢复误删除的数据。 在本案例中的mysql数据库未进行备份,也未开启binlog日志,无法直接还原数据库。
|
6月前
|
SQL 运维 关系型数据库
深入探讨MySQL的二进制日志(binlog)选项
总结而言,对MySQL binlogs深度理解并妥善配置对数据库运维管理至关重要;它不仅关系到系统性能优化也是实现高可靠性架构设计必须考虑因素之一。通过精心规划与周密部署可以使得该机能充分发挥作用而避免潜在风险带来影响。
201 6
|
7月前
|
存储 SQL 关系型数据库
MySQL中binlog、redolog与undolog的不同之处解析
每个都扮演回答回溯与错误修正机构角色: BinLog像历史记载员详细记载每件大大小小事件; RedoLog则像紧急救援队伍遇见突發情況追踪最后活动轨迹尽力补救; UndoLog就类似时间机器可倒带历史让一切归位原始样貌同时兼具平行宇宙观察能让多人同时看见各自期望看见历程而互不干扰.
399 9
|
8月前
|
存储 SQL 关系型数据库
MySQL的Redo Log与Binlog机制对照分析
通过合理的配置和细致的管理,这两种日志机制相互配合,能够有效地提升MySQL数据库的可靠性和稳定性。
265 10
|
10月前
|
SQL 监控 关系型数据库
MySQL日志分析:binlog、redolog、undolog三大日志的深度探讨。
数据库管理其实和写小说一样,需要规划,需要修订,也需要有能力回滚。理解这些日志的作用与优化,就像把握写作工具的使用与运用,为我们的数据库保驾护航。
559 23
|
6月前
|
缓存 关系型数据库 BI
使用MYSQL Report分析数据库性能(下)
使用MYSQL Report分析数据库性能
465 158
|
6月前
|
关系型数据库 MySQL 数据库
自建数据库如何迁移至RDS MySQL实例
数据库迁移是一项复杂且耗时的工程,需考虑数据安全、完整性及业务中断影响。使用阿里云数据传输服务DTS,可快速、平滑完成迁移任务,将应用停机时间降至分钟级。您还可通过全量备份自建数据库并恢复至RDS MySQL实例,实现间接迁移上云。
|
6月前
|
关系型数据库 MySQL 数据库
阿里云数据库RDS费用价格:MySQL、SQL Server、PostgreSQL和MariaDB引擎收费标准
阿里云RDS数据库支持MySQL、SQL Server、PostgreSQL、MariaDB,多种引擎优惠上线!MySQL倚天版88元/年,SQL Server 2核4G仅299元/年,PostgreSQL 227元/年起。高可用、可弹性伸缩,安全稳定。详情见官网活动页。
1112 152
|
6月前
|
关系型数据库 MySQL 数据库
阿里云数据库RDS支持MySQL、SQL Server、PostgreSQL和MariaDB引擎
阿里云数据库RDS支持MySQL、SQL Server、PostgreSQL和MariaDB引擎,提供高性价比、稳定安全的云数据库服务,适用于多种行业与业务场景。
857 156

推荐镜像

更多