MySQL:binlog的开启和数据恢复

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
云数据库 RDS MySQL,高可用系列 2核4GB
简介: MySQL:binlog的开启和数据恢复

测试环境

Mac OS 10.11.6

mysql 5.7.21

python 3.6.5

开启binlog

1、检查是否开启binlog

mysql>show variables like '%log_bin%';

2、开启binlog

mysql的配置文件路径查找优先级为

/etc/my.cnf

/etc/mysql/my.cnf

/usr/local/etc/my.cnf

通过Homebrew安装的my.cnf放在/usr/local/etc/中

$ vim my.cnf

[mysqld]
server_id = 1
log_bin = /var/log/mysql/mysql-bin.log
max_binlog_size = 1G
binlog_format = row
binlog_row_image = full

3、重启服务

$ mysql.server restart

4、再次检查是否开启binlog

5、查看日志文件:

$ cd /usr/local/var/mysql
$ ls

数据恢复

0、几个术语

数据查询语言DQL

数据操纵语言DML

数据定义语言DDL

数据控制语言DCL

1、MySQL闪回原理

delete操作,delete -> insert

insert操作,insert -> delete

update操作,交换SET和WHERE

恢复实战

1、确认binlog已开启

2、数据准备

(1) 建表

mysql> use demo
mysql> CREATE TABLE `user` (
  `id` int(11) NOT NULL PRIMARY KEY AUTO_INCREMENT,
  `name` varchar(20) DEFAULT '',
  `age` tinyint(3) DEFAULT '0',
  `create_time` datetime DEFAULT CURRENT_TIMESTAMP
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT='用户表测试';

(2) 插入数据

mysql> INSERT INTO `user` (`name`, `age`)
VALUES 
    ('小王', 21), 
    ('小张', 22), 
    ('小红', 22), 
    ('小楠', 23), 
    ('小柱', 25);

(3) 查看数据

mysql> select * from user;
+----+--------+------+---------------------+
| id | name   | age  | create_time         |
+----+--------+------+---------------------+
|  1 | 小王   |   21 | 2019-01-21 18:18:41 |
|  2 | 小张   |   22 | 2019-01-21 18:18:41 |
|  3 | 小红   |   22 | 2019-01-21 18:18:41 |
|  4 | 小楠   |   23 | 2019-01-21 18:18:41 |
|  5 | 小柱   |   25 | 2019-01-21 18:18:41 |
+----+--------+------+---------------------+

(4) 删除数据

mysql> delete from user;

(5)确认数据被删除

mysql> select * from user;
Empty set (0.00 sec)

3、数据恢复

(1)下载所需工具

> git clone https://github.com/danfengcao/binlog2sql.git 
> cd binlog2sql
> pip install -r requirements.txt

(2)查看目前的binlog

mysql> show master logs;
+------------------+-----------+
| Log_name         | File_size |
+------------------+-----------+
| mysql-bin.000001 |       467 |
| mysql-bin.000002 |       732 |
| mysql-bin.000003 |      4574 |
+------------------+-----------+

最新的biglog是mysql-bin.000003

(3)查找删除语句

$ python binlog2sql/binlog2sql.py -h127.0.0.1 -P3306 -uroot -p'123456' -ddemo -tuser --start-file='mysql-bin.000003' --start-datetime='2019-01-21 18:10:00' --stop-datetime='2019-01-21 18:25:00' > raw.sql
$ more raw.sql

字段说明

-h127.0.0.1  # 数据库地址
-P3306  # 端口号
-uroot # 用户名
-p'123456'  # 密码
-ddemo  # 数据库名称
-tuser  # 表名称
--start-file='mysql-bin.000003'  # binlog日志文件
--start-datetime='2019-01-21 18:10:00' # 开始时间
--stop-datetime='2019-01-21 18:25:00'  # 结束时间

找到DELETE语句中类似如下字段,回忆一下时间是否差不多

#start 4228 end 4543 time 2019-01-21 18:20:15

(4)生成回滚语句

$ python binlog2sql/binlog2sql.py -h127.0.0.1 -P3306 -uroot -p'123456' -ddemo -tuser --start-file='mysql-bin.000003' --start-position=4228 --stop-position=4543 -B > rollback.sql
$ more rollback.sql

(5) 执行回滚操作

其实就是重新插入数据

$ mysql -h127.0.0.1 -P3306 -uroot -p'123456' < rollback.sql

(6) 检查数据恢复情况

mysql> select * from user;
+----+--------+------+---------------------+
| id | name   | age  | create_time         |
+----+--------+------+---------------------+
|  1 | 小王   |   21 | 2019-01-21 18:18:41 |
|  2 | 小张   |   22 | 2019-01-21 18:18:41 |
|  3 | 小红   |   22 | 2019-01-21 18:18:41 |
|  4 | 小楠   |   23 | 2019-01-21 18:18:41 |
|  5 | 小柱   |   25 | 2019-01-21 18:18:41 |
+----+--------+------+---------------------+

参考

  1. Mac OS下安装配置mysql8.0
  2. MySQL闪回原理与实战
  3. mysql误删数据快速恢复
相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。 &nbsp; 相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情:&nbsp;https://www.aliyun.com/product/rds/mysql&nbsp;
相关文章
|
SQL 存储 缓存
MySQL Binlog(主从同步/数据恢复) 及 mysqldump:
MySQL Binlog(主从同步/数据恢复) 及 mysqldump:
1328 0
MySQL Binlog(主从同步/数据恢复) 及 mysqldump:
|
1月前
|
SQL 运维 关系型数据库
深入探讨MySQL的二进制日志(binlog)选项
总结而言,对MySQL binlogs深度理解并妥善配置对数据库运维管理至关重要;它不仅关系到系统性能优化也是实现高可靠性架构设计必须考虑因素之一。通过精心规划与周密部署可以使得该机能充分发挥作用而避免潜在风险带来影响。
80 6
|
2月前
|
存储 SQL 关系型数据库
MySQL中binlog、redolog与undolog的不同之处解析
每个都扮演回答回溯与错误修正机构角色: BinLog像历史记载员详细记载每件大大小小事件; RedoLog则像紧急救援队伍遇见突發情況追踪最后活动轨迹尽力补救; UndoLog就类似时间机器可倒带历史让一切归位原始样貌同时兼具平行宇宙观察能让多人同时看见各自期望看见历程而互不干扰.
172 9
|
3月前
|
存储 SQL 关系型数据库
MySQL的Redo Log与Binlog机制对照分析
通过合理的配置和细致的管理,这两种日志机制相互配合,能够有效地提升MySQL数据库的可靠性和稳定性。
152 10
|
5月前
|
SQL 监控 关系型数据库
MySQL日志分析:binlog、redolog、undolog三大日志的深度探讨。
数据库管理其实和写小说一样,需要规划,需要修订,也需要有能力回滚。理解这些日志的作用与优化,就像把握写作工具的使用与运用,为我们的数据库保驾护航。
236 23
|
10月前
|
存储 SQL 关系型数据库
mysql 的ReLog和BinLog区别
MySQL中的重做日志和二进制日志是确保数据库稳定性和可靠性的关键组件。重做日志主要用于事务的持久性和原子性,通过记录数据页的物理修改信息来恢复未提交的事务;而二进制日志记录SQL语句的逻辑变化,支持数据复制、恢复和审计。两者在写入时机、存储方式及配置参数等方面存在显著差异。
210 6
|
8月前
|
存储 SQL 关系型数据库
MySQL日志详解——日志分类、二进制日志bin log、回滚日志undo log、重做日志redo log
MySQL日志详解——日志分类、二进制日志bin log、回滚日志undo log、重做日志redo log、原理、写入过程;binlog与redolog区别、update语句的执行流程、两阶段提交、主从复制、三种日志的使用场景;查询日志、慢查询日志、错误日志等其他几类日志
674 35
MySQL日志详解——日志分类、二进制日志bin log、回滚日志undo log、重做日志redo log
|
6月前
|
SQL 运维 关系型数据库
MySQL Binlog 日志查看方法及查看内容解析
本文介绍了 MySQL 的 Binlog(二进制日志)功能及其使用方法。Binlog 记录了数据库的所有数据变更操作,如 INSERT、UPDATE 和 DELETE,对数据恢复、主从复制和审计至关重要。文章详细说明了如何开启 Binlog 功能、查看当前日志文件及内容,并解析了常见的事件类型,包括 Format_desc、Query、Table_map、Write_rows、Update_rows 和 Delete_rows 等,帮助用户掌握数据库变化历史,提升维护和排障能力。