mysqldump备份结合binlog日志恢复

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
日志服务 SLS,月写入数据量 50GB 1个月
简介:

 mysqldump备份一般采取全库备份加日志备份的方式,如每天执行一次全备份,每小时执行一次二进制日志备份。在mysql故障后可以使用全备份和日志备份将数据恢复到最后一个二进制日志备份前的任意位置或时间。

    binlog简介:

         mysql二进制日志记录着数据库的所有增删改的操作日志,在这前提上必须开启binlog,里面包括这些操作的执行时间。显示二进制内容可以使用mysqlbinlog命令查看。

         binlog的作用:1,主从复制    2,恢复数据库

             开启binary log功能

             编辑my.cnf中的log-bin选项开启二进制日志:log-bin[=DIR/[filename]]DIR参数指定二进制文件的存储路径,filename参数指定二进制文件的文件名,形式为filename.numbernumber的形式为000001000002等。每次重启mysql服务或运行mysql > flush logs;都会生成一个新的二进制日志文件,这些二进制文件的number会不断地递增。其实还会生成一个名为filename.index的文件,这个文件中存储所有二进制日志文件的清单又称为二进制文件的索引。

                   mysql> show variables like 'log_bin':查看bing-log日志是否开启。

wKiom1jLgVXi2i2DAAAcNT-H31M428.png-wh_50

    bin-log因为是二进制文件,不能通过文件内容查看命令直接打开查看,mysql提供两种方式查看方式。

    show binary logs; 查看mysql server上二进制日志

    查看二进制信息的命令格式:show binlog events [in 'log_name'] [ffrom pos] [limit [offset,] row_count]

    默认显示可找到的第一个二进制日志文件中的时间,包含了日志文件名,事件的开始位置,时间类型,结束位置,信息等内容。

    show binary logs等价于show master logs

    purge binary logs用于删除二进制日志。

    purge binary logs before '2016-08-28 22:46:26':把指定时间之前的二进制文件删除

    peset master与reset slave

        前者清空index文件中列出的所有二进制日志,重置index文件为空,并创建一个新的二进制日志文件,一般用于master首次启动时。后者使slave忘记其在master二进制日志文件中的复制位置,它会删除master.info,relay-log.info和所有中继日志文件并开始一个新的中继日志文件,以便于开始一个干净的复制。使用reset slave前需要先关闭slave赋值线程。

        想要查看到文件中剧吐内容并应于恢复场景还得借助mysqlbinlog这个工具格式:mysqlbinlog [options] log_file ...输出的内容会因日志文件的格式以及mysqlbinlog工具使用的选项不同而略不同。

        二进制日志文件的格式包含行模式,语句模式,混合模式,基于语句的日志中事件信息包含执行的语句等,基于行的日志中事件谢谢包含的是行的变化信息。

        mysqlbinlog和可以通过--read-from-remote-server选项从远程服务器读取二进制日志文件,需要一些而外的连接参数,如-h,-p,-P,-u等,这些侧脑室近在指定了--read-from-remote-server后有效。

        无论是本地二进制日志文件还是远程服务器上的二进制日志文件,无论是行模式,语句模式还是混合模式的二进制日志文件,被mysqlbinlog工具解析后都可直接应用与mysql server进行基于时间点,位置或数据库的恢复。    

        mysqldump是mysql用于备份好数据转移的一个工具,主要产生一系列的sql语句,可以封装到文件,该文件包含所有重建你的数据库所需要sql命令如create database,create table,insert等等。可以用来实现轻量级的快速迁移或恢复数据库。

        mysqldump是将数据表导成sql脚本文件,在不同的mysql版本之间升级时相对比较合适,也是最常用的备份方法。mysqldump一般在数据量很少的时候可以用于备份,当数据量比较大的情况下,就不建议用mysqldump工具进行备份。

        数据库的导出,导出对象说明:mysqldump可以针对单个表,多个表,单个数据库,多个数据库,所有数据库进行导出的操作。

        mysqldump [options] db_name [tbl_name ...] 导出指定数据库或单个表

        mysqldump [options] --databases db_name...    导出多个数据库

        mysqldump [optoins] --all-databases    导出所有

        mysqldump -u用户名 -p --flush-logs test > /opt/test.sql  --flush-logs这个选项就会完整备份的时候重新开启一个新binlog。

        数据库的导入

        mysql -u用户名 -p test / /opt/test.sql   

        全库备份+binlog的数据恢复

        环境准备与备份还原:

        线程开启binlog

本文转自   宏强   51CTO博客,原文链接:
http://blog.51cto.com/tanhong/1907702
相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
16天前
|
SQL 存储 缓存
MySQL进阶突击系列(02)一条更新SQL执行过程 | 讲透undoLog、redoLog、binLog日志三宝
本文详细介绍了MySQL中update SQL执行过程涉及的undoLog、redoLog和binLog三种日志的作用及其工作原理,包括它们如何确保数据的一致性和完整性,以及在事务提交过程中各自的角色。同时,文章还探讨了这些日志在故障恢复中的重要性,强调了合理配置相关参数对于提高系统稳定性的必要性。
|
1月前
|
关系型数据库 MySQL 数据库
【赵渝强老师】MySQL的binlog日志文件
MySQL的binlog日志记录了所有对数据库的更改操作(不包括SELECT和SHOW),主要用于主从复制和数据恢复。binlog有三种模式,可通过设置binlog_format参数选择。示例展示了如何启用binlog、设置格式、查看日志文件及记录的信息。
|
2月前
|
SQL 存储 关系型数据库
美团面试:binlog、redo log、undo log的底层原理是什么?它们分别实现ACID的哪个特性?
老架构师尼恩在其读者交流群中分享了关于 MySQL 中 redo log、undo log 和 binlog 的面试题及其答案。这些问题涵盖了事务的 ACID 特性、日志的一致性问题、SQL 语句的执行流程等。尼恩详细解释了这些日志的作用、所在架构层级、日志形式、缓存机制以及写文件方式等内容。他还提供了多个面试题的详细解答,帮助读者系统化地掌握这些知识点,提升面试表现。此外,尼恩还推荐了《尼恩Java面试宝典PDF》和其他技术圣经系列PDF,帮助读者进一步巩固知识,实现“offer自由”。
美团面试:binlog、redo log、undo log的底层原理是什么?它们分别实现ACID的哪个特性?
|
2月前
|
存储 SQL 关系型数据库
面试官:你能聊聊 binlog、undo log、redo log 吗?
本文详细解析了MySQL数据库中的三种日志:binlog、undo log和redo log。binlog用于记录数据库的所有表结构变更及数据修改,支持归档、主从复制和数据恢复;undo log用于事务回滚,确保事务的原子性和实现多版本控制;redo log则用于crash-safe,确保数据库异常重启后已提交记录不丢失。文章通过实例和图表,深入浅出地介绍了每种日志的特点、应用场景及其实现机制。适合数据库开发者和运维人员阅读。
178 2
|
2月前
|
存储 关系型数据库 MySQL
MySQL中的Redo Log、Undo Log和Binlog:深入解析
【10月更文挑战第21天】在数据库管理系统中,日志是保障数据一致性和完整性的关键机制。MySQL作为一种广泛使用的关系型数据库管理系统,提供了多种日志类型来满足不同的需求。本文将详细介绍MySQL中的Redo Log、Undo Log和Binlog,从背景、业务场景、功能、底层实现原理、使用措施等方面进行详细分析,并通过Java代码示例展示如何与这些日志进行交互。
221 0
|
3月前
|
存储 关系型数据库 MySQL
binlog、redolog、undo log底层原理及ACID特性实现分享
在数据库管理系统中,日志机制是确保数据一致性、完整性和可靠性的关键组件。MySQL数据库中的binlog、redolog和undolog作为其核心日志系统,各自扮演着不同但同样重要的角色。本文将深入探讨这三种日志的底层原理以及它们如何分别实现ACID(原子性、一致性、隔离性、持久性)特性的不同方面。
76 0
|
17天前
|
存储 SQL 关系型数据库
mysql 的ReLog和BinLog区别
MySQL中的重做日志和二进制日志是确保数据库稳定性和可靠性的关键组件。重做日志主要用于事务的持久性和原子性,通过记录数据页的物理修改信息来恢复未提交的事务;而二进制日志记录SQL语句的逻辑变化,支持数据复制、恢复和审计。两者在写入时机、存储方式及配置参数等方面存在显著差异。
|
3月前
|
canal 消息中间件 关系型数据库
Canal作为一款高效、可靠的数据同步工具,凭借其基于MySQL binlog的增量同步机制,在数据同步领域展现了强大的应用价值
【9月更文挑战第1天】Canal作为一款高效、可靠的数据同步工具,凭借其基于MySQL binlog的增量同步机制,在数据同步领域展现了强大的应用价值
812 4
|
4月前
|
SQL 关系型数据库 MySQL
【揭秘】MySQL binlog日志与GTID:如何让数据库备份恢复变得轻松简单?
【8月更文挑战第22天】MySQL的binlog日志记录数据变更,用于恢复、复制和点恢复;GTID为每笔事务分配唯一ID,简化复制和恢复流程。开启binlog和GTID后,可通过`mysqldump`进行逻辑备份,包含binlog位置信息,或用`xtrabackup`做物理备份。恢复时,使用`mysql`命令执行备份文件,或通过`innobackupex`恢复物理备份。GTID模式下的主从复制配置更简便。
527 2
|
4月前
|
SQL 关系型数据库 MySQL
【MySQL】根据binlog日志获取回滚sql的一个开发思路
【MySQL】根据binlog日志获取回滚sql的一个开发思路