mysqlbinlog flashback 5.6使用案例

简介: 转自:https://www.cnblogs.com/youge-OneSQL/p/5249736.html 简介 DBA或者开发人员,有时会误删除或者误更新数据。传统的数据库恢复方法是利用之前的备份再加上误操作之前的binlog,来恢复数据。

转自:https://www.cnblogs.com/youge-OneSQL/p/5249736.html

简介

DBA或者开发人员,有时会误删除或者误更新数据。传统的数据库恢复方法是利用之前的备份再加上误操作之前的binlog,来恢复数据。该方法需要耗费较长时间来恢复备份,甚至需要停机维护,严重降低系统的可用性。

MySQL的flashback功能是由淘宝的彭立勋,在MySQL-5.5.18的基础上开发的。随着binlog格式的变动和类型的增加,基于5.5.18的版本,无法用于目前主流的5.6版本的。因此平民软件将该功能移植到5.6版本上,让相关人员对数据库有更强的掌控能力。

 

binlog格式选择

MySQL的binlog格式分为三类:statement、mixed、row。其中,

    statement格式,记录了所有客户端的执行语句。比如 update tb1 set name='aaa' where id=1;

    row格式,记录了数据库的变更前和变更后数据。比如 update tb1 set name='aaa' ,id=1 where name='bbb' , id=1;

    mixed格式,是二者的混合。在使用statement格式不会造成主从不一致时,使用statement格式,否则使用row模式。

因此想要把数据回退到上一个时间点,必须保证binlog_format=row

闪回原理

单个event闪回

举例说明

  • 在数据库中创建如下表

mysql> show create table tb1\G
*************************** 1. row ***************************
Table: tb1
Create Table: CREATE TABLE `tb1` (
`id` int(11) DEFAULT NULL,
`name` varchar(20) DEFAULT NULL
) ENGINE=InnoDB DEFAULT CHARSET=latin1

  • 执行增、删、改动作

insert into tb1 values(1,'aaa'),(2,'aaa');

delete from tb1 where id=2;

update tb1 set name='bbb' where id=1;

  • 查看binlog文件

mysqlbinlog -v 128.000129

########################################

SET TIMESTAMP=1459999601/*!*/;
BEGIN
/*!*/;
# at 301
#160407 11:26:41 server id 10 end_log_pos 346 Table_map: `test`.`tb1` mapped to number 224
# at 346
#160407 11:26:41 server id 10 end_log_pos 395 Write_rows: table id 224 flags: STMT_END_F

BINLOG '
cdMFVxMKAAAALQAAAFoBAAAAAOAAAAAAAAEABHRlc3QAA3RiMQACAw8CFAAD
cdMFVx4KAAAAMQAAAIsBAAAAAOAAAAAAAAEAAgAC//wBAAAAA2FhYfwCAAAAA2FhYQ==
'/*!*/;
### INSERT INTO `test`.`tb1`
### SET
### @1=1
### @2='aaa'
### INSERT INTO `test`.`tb1`
### SET
### @1=2
### @2='aaa'
# at 395
#160407 11:26:41 server id 10 end_log_pos 422 Xid = 271
COMMIT/*!*/;
# at 422
#160407 11:27:04 server id 10 end_log_pos 490 Query thread_id=5 exec_time=0 error_code=0
SET TIMESTAMP=1459999624/*!*/;
BEGIN
/*!*/;
# at 490
#160407 11:27:04 server id 10 end_log_pos 535 Table_map: `test`.`tb1` mapped to number 224
# at 535
#160407 11:27:04 server id 10 end_log_pos 575 Delete_rows: table id 224 flags: STMT_END_F

BINLOG '
iNMFVxMKAAAALQAAABcCAAAAAOAAAAAAAAEABHRlc3QAA3RiMQACAw8CFAAD
iNMFVyAKAAAAKAAAAD8CAAAAAOAAAAAAAAEAAgAC//wCAAAAA2FhYQ==
'/*!*/;
### DELETE FROM `test`.`tb1`
### WHERE
### @1=2
### @2='aaa'
# at 575
#160407 11:27:04 server id 10 end_log_pos 602 Xid = 272
COMMIT/*!*/;
# at 602
#160407 11:27:22 server id 10 end_log_pos 670 Query thread_id=5 exec_time=0 error_code=0
SET TIMESTAMP=1459999642/*!*/;
BEGIN
/*!*/;
# at 670
#160407 11:27:22 server id 10 end_log_pos 715 Table_map: `test`.`tb1` mapped to number 224
# at 715
#160407 11:27:22 server id 10 end_log_pos 765 Update_rows: table id 224 flags: STMT_END_F

BINLOG '
mtMFVxMKAAAALQAAAMsCAAAAAOAAAAAAAAEABHRlc3QAA3RiMQACAw8CFAAD
mtMFVx8KAAAAMgAAAP0CAAAAAOAAAAAAAAEAAgAC///8AQAAAANhYWH8AQAAAANiYmI=
'/*!*/;
### UPDATE `test`.`tb1`
### WHERE
### @1=1
### @2='aaa'
### SET
### @1=1
### @2='bbb'
# at 765
#160407 11:27:22 server id 10 end_log_pos 792 Xid = 273
COMMIT/*!*/;
# at 792
#160407 11:28:04 server id 10 end_log_pos 829 Rotate to 128.000130 pos: 4
DELIMITER ;

###################################################

  • 反转

insert:event中包含该行数据的每个字段值,删除即可
delete:event中包含了删除前,该行数据的所有字段值。将删除的数据,重新插入即可
update:只需将set和where部分调换,即可完成反转。

多个event闪回

如果误操作的事务是由多个event组成的,那么必须将整个事务倒序恢复,即从最后一个event恢复到第一个event。

 

使用方法

举例说明

  • insert into tb1 values(1,'aaa'),(2,'aaa');
  • delete from tb1 where id=2;
  • update tb1 set name='bbb' where id=1;
  • select * from tb1;

+------+------+
| id     | name |
+------+------+
| 1      | bbb |
+------+------+

  • mysqlbinlog -v --start-pos=557 128.000132

#####################

# at 557
#160407 12:04:15 server id 10 end_log_pos 602 Table_map: `test`.`tb1` mapped to number 224
# at 602
#160407 12:04:15 server id 10 end_log_pos 652 Update_rows: table id 224 flags: STMT_END_F

BINLOG '
P9wFVxMKAAAALQAAAFoCAAAAAOAAAAAAAAEABHRlc3QAA3RiMQACAw8CFAAD
P9wFVx8KAAAAMgAAAIwCAAAAAOAAAAAAAAEAAgAC///8AQAAAANhYWH8AQAAAANiYmI=
'/*!*/;
### UPDATE `test`.`tb1`
### WHERE
### @1=1
### @2='aaa'
### SET
### @1=1
### @2='bbb'
# at 652
#160407 12:04:15 server id 10 end_log_pos 679 Xid = 540
COMMIT/*!*/;

#####################

  • mysqlbinlog -v -B --start-pos=557 128.000132

############################

BINLOG '
P9wFVxMKAAAALQAAAFoCAAAAAOAAAAAAAAEABHRlc3QAA3RiMQACAw8CFAAD
P9wFVx8KAAAAMgAAAIwCAAAAAOAAAAAAAAEAAgAC///8AQAAAANiYmL8AQAAAANhYWE=
'/*!*/;
### UPDATE `test`.`tb1`
### WHERE
### @1=1
### @2='bbb'
### SET
### @1=1
### @2='aaa'

############################

可以看出update已经被反转

执行反转

  • mysqlbinlog -B -v --start-pos=557 128.000132 | mysql -utest -ptest test

mysql> select * from tb1;
+------+------+
| id     | name |
+------+------+
| 1      | aaa |
+------+------+

有兴趣的,可以继续往下恢复。

       注意:恢复之前先在不使用的从机上做测试,测试成功后,再在主库上做。

限制

       该软件利用binlog中记录了操作前的数据镜像和操作后的数据镜像。有如下限制

1)        binlog_format=row

2)        只支持insert、update、delete

3)        不支持drop 、truncate、alter等ddl语句

结论

       flashback功能,可以在紧急情况下,避免用户漫长的数据库恢复过程。让高可用提升一个级别。

 

下载地址

  http://pan.baidu.com/s/1nutwWg5

 

相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
相关文章
|
关系型数据库 MySQL
mysqlbinlog: File ‘mysql-bin.000001;‘ not found (Errcode: 2 - No such file or directory)
mysqlbinlog: File ‘mysql-bin.000001;‘ not found (Errcode: 2 - No such file or directory)
997 0
|
3月前
|
机器学习/深度学习 存储 TensorFlow
TensorFlow Lite Micro:嵌入式TinyML系统上的机器学习推理框架——论文深度解析
TensorFlow Lite Micro(TFLM)是专为嵌入式系统设计的轻量级机器学习推理框架,适用于仅有几十KB内存的微控制器。它通过极简架构、模块化设计和内存优化策略,在资源受限设备上高效运行TinyML模型,广泛应用于关键词检测、传感器分析、预测性维护等领域。TFLM支持跨平台部署,并允许硬件厂商提供定制优化,兼顾灵活性与性能。
916 6
|
SQL 安全 数据库
如何构建一个安全的Web应用:技术与策略的全面指南
【6月更文挑战第12天】构建安全Web应用的全面指南:了解SQL注入、XSS等威胁,采用输入验证、安全编程语言,配置安全服务器和数据库,使用HTTPS,实施会话管理、访问控制,正确处理错误和日志,定期进行安全审计和漏洞扫描。确保用户数据和应用安全。
|
运维 监控 安全
运维之道:构建高效稳定的系统运维实践
在数字化时代的浪潮中,系统运维的角色愈发重要。本文旨在探讨如何通过一系列创新的运维策略和工具,构建一个既高效又稳定的运维体系。从监控预警到自动化部署,从性能优化到安全防护,我们将深入分析各个关键领域的最佳实践,并结合实际案例,揭示这些策略和工具如何在现实环境中发挥作用,帮助企业提升系统的可用性和可靠性,最终实现业务连续性和增长的目标。
333 5
|
机器学习/深度学习 人工智能 程序员
利用 AI 进行代码审查:提升软件质量的新途径
【10月更文挑战第18天】本文探讨了利用 AI 进行代码审查的优势和方法,包括提高审查效率、减少人为错误、确保一致性和标准化以及提供实时反馈。介绍了 SonarQube、DeepCode 和 GitHub Copilot 等工具,并分享了实施 AI 代码审查的最佳实践。通过结合 AI 和人工审查,可以显著提升软件质量。
|
SQL 开发框架 安全
Web安全-IIS短文件名泄露
Web安全-IIS短文件名泄露
618 2
|
机器学习/深度学习 PyTorch API
ONNX 与实时应用:延迟敏感场景下的部署策略
【8月更文第27天】在实时应用中,如自动驾驶汽车、视频分析系统等,快速响应和高吞吐量是至关重要的。Open Neural Network Exchange (ONNX) 提供了一种标准化的方法来部署机器学习模型,使其能够在不同的硬件和平台上高效运行。本文将探讨如何利用 ONNX 在延迟敏感的应用场景中部署模型,并提供一些策略和示例代码来确保低延迟和高吞吐量。
1493 4
|
机器学习/深度学习 人工智能 大数据
AI大模型企业应用实战(24)-什么是zero-shot, one-shot和few-shot Learning?
零样本学习(Zero-Shot Learning)是机器学习中的一种方法,模型在未见过的类别上进行分类,依赖于类别描述来建立训练与测试集间的联系。例如,通过已知的马、老虎和熊猫特征推断斑马。单样本学习(One-Shot Learning)则是在极少量样本(如一个)的情况下进行学习,目标是减少训练数据需求,适用于新类别出现时无需重新训练的情况。小样本学习(Few-Shot Learning)是处理仅有少量类内样本的学习任务。这三者常用于图像分类、语义分割等场景,One-Shot是Few-Shot的特殊情况。
732 0
|
SQL 运维 数据管理
sql管理工具archery简介
Archery是一个多公司采用的SQL管理工具,提供权限管理、工作流配置、实例管理、SQL审核、查询、优化及通知功能。它支持多级审批和不同云环境的数据管理。尝试Archery的SaaS版本可访问[ArcheryDMS.com](https://archerydms.com/home/)。此外,NineData是一个综合平台,包含SQL开发、数据复制等功能,适应混合云和多云环境,由叶正盛创建,详情见[Ninedata.cloud](https://www.ninedata.cloud/aboutus)。
918 0
|
Java 数据库连接 mybatis
mybatis 返回List<String>
mybatis 返回List<String>
714 0