AI 助理
备案控制台
开发者社区 数据库 文章 正文

Mysql的二进制日志---binlog

2017-11-08 995
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
RDS MySQL Serverless 基础系列，0.5-2RCU 50GB
推荐场景：
学生管理系统数据库设计 搭建个人博客
云数据库 RDS MySQL，集群系列 2核4GB
推荐场景：
搭建个人博客
RDS MySQL Serverless 高可用系列，价值2615元额度，1个月
简介：

  二进制日志（BINLOG）记录了所有的DDL（数据定义语言）语句和DML（数据操纵语言）语句，但是不包括数据查询语句。语句以“事件”的形式保存，它描述了数据的更改过程。此日志对于灾难时的数据恢复起着极其重要的作用。

1、日志的位置和格式

  当用--log-bin[=file_name]选项启动时，mysqld将包含所有更新数据的SQL命令写入日志文件。如果没有给出file_name值，默认名为主机名后面跟“-bin”。如果给出了文件名，但没有包含路径，则文件默认被写入参数DATADIR（数据目录）指定的目录。

  MySQL5.6中二进制的格式分为3种，STATEMENT、ROW、MIXED，可以在启动时通过参数--binlog_format进行设置。

  STATEMENT

  MySQL5.1之前的版本都 采用这种方式，顾名思义，日志中记录的都是语句(statement)，每一条对数据造成修改的SQL语句都会记录在日志中，通过mysqlbin工具可以清晰地看到每条语句的文本。主从复制的时候，从库(slave)会将日志解析为原文本，并在从库重新执行一次。这种格式的优点是日志记录清晰易读、日志量少，对I/O影响较小。缺点是在某些情况下slave的日志复制会出错

  ROW

  MySQL5.1.11之后，出现了这种新的日志格式。它将每一行的变更记录到日志中，而不是记录SQL语句。比如一个简单的更新SQL:update emp set name='abc'，由于是对全表进行更新，也就是每一行记录都会发生变更，如果是一个100万行的大表，则日志中会记录100万条记录的变化情况。这种格式的优点是会记录每一行数据的变化细节，不会出现某些情况下无法复制的情况。缺点是日志量大，对I/O影响较大。

  MIXED

  这种日志格式，即混合了STATEMENT和ROW两种日志。默认情况下采用STATEMENT，但在一些特殊情况下采用ROW来进行记录，比如采用NDB存储引擎，此时对表的DML语句全部采用ROW；客户端使用了临时表；客户端使用了不确定函数，比如current_user()等，因为这种不确定函数在主从中得到的值可能不同，导致主从数据产生不一致。MIXED格式能尽量利用两种模式的优点，而避开它们的缺点。

2、启用binlog

  默认情况下，binlog是不启用的。可以通过查看变量 log_bin的值来查看是否启用。

1
2
3
4
5
6
7
8
9
mysql> show variables  like  'log_bin' ;
+ ---------------+-------+
| Variable_name | Value |
+ ---------------+-------+
| log_bin       |  OFF    |
+ ---------------+-------+
1 row  in  set  (0.01 sec)
mysql> show  binary  logs;
ERROR 1381 (HY000): You are  not  using  binary  logging

 启用binlong

  vi /etc/my.cnf

  [mysqld]下边添加

  log-bin=mysqlbin   #"="后边的名字为自己定义的前缀，如果没有自定义则为hostname-bin

  在5.7.3及以后的版本启用binlog必须要连server-id一同指定，否则mysql无法启动。

  重启mysql服务

  service mysql restart

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
mysql> show variables  like  'log_bin' ;
+ ---------------+-------+
| Variable_name | Value |
+ ---------------+-------+
| log_bin       |  ON     |
+ ---------------+-------+
1 row  in  set  (0.03 sec)
 
mysql> show  binary  logs;
+ -----------------+-----------+
| Log_name        | File_size |
+ -----------------+-----------+
| mysqlbin.000001 |       120 |
+ -----------------+-----------+
1 row  in  set  (0.00 sec)
 
mysql> show binlog events;
+ -----------------+-----+-------------+-----------+-------------+---------------------------------------+
| Log_name        | Pos | Event_type  | Server_id | End_log_pos | Info                                  |
+ -----------------+-----+-------------+-----------+-------------+---------------------------------------+
| mysqlbin.000001 |   4 | Format_desc |         1 |         120 | Server ver: 5.6.34-log, Binlog ver: 4 |
+ -----------------+-----+-------------+-----------+-------------+---------------------------------------+

3、读取binlog日志

  由于服务器生成的二进制日志文件以二进制格式保存，所以如果要想检查这些文件的文本格式，就会用到mysqlbinlog日志管理工具。

mysqlbinlog的具体用法如下：

shell> mysqlbinlog [options] log-files1 log-files2...

option有很多选项，常用的如下：

  -d, --database=name        指定数据库名称，只列出指定的数据库相关操作。

  -o, --offset=#   忽略掉日志中的前n行命令

  -r, --result-file=name       将输出的文本格式日志输出到指定文件

  -s, --short-form       显示简单格式，省略掉一些信息

  --set-charset=char-name：在输出为文本格式时，在文件第一行加上set names char-name，这个选项在某些情况下装载数据时，非常有用。

  --start-datetime=name –stop-datetime=name：指定日期间隔内的所有日志

  --start-position=#  --stop-position=#：指定位置间隔内的所有日志

option可放日志文件前也可放日志文件后

  （1）创建日志

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
mysql> use test
Reading  table  information  for  completion  of  table  and  column  names
You can turn  off  this feature  to  get a quicker startup  with  -A
 
Database  changed
 
mysql>  insert  into  emp (ename)  values ( 'bin_zx' );
Query OK, 1 row affected (0.05 sec)
 
mysql> use test1
Reading  table  information  for  completion  of  table  and  column  names
You can turn  off  this feature  to  get a quicker startup  with  -A
 
Database  changed
mysql>  insert  into  emp (ename)  values ( 'bin_zx1' );
Query OK, 1 row affected (0.05 sec)
 
mysql>  delete  from  emp  where  ename= 'bin_zx1' ;
Query OK, 1 row affected (0.00 sec)

（2）不加任何参数，显示所有日志(加粗为上一步执行的sql)

    [root@rhel6 mysql]# mysqlbinlog mysqlbin.000002 

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;

    /*!40019 SET @@session.max_insert_delayed_threads=0*/;

    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;

    DELIMITER /*!*/;

    # at 4

    #161121 10:36:44 server id 1  end_log_pos 120 CRC32 0x7067a31f Start: binlog v 4, server v 5.6.34-log created 161121 10:36:44 at startup

    # Warning: this binlog is either in use or was not closed properly.

    ROLLBACK/*!*/;

    BINLOG '

    vF0yWA8BAAAAdAAAAHgAAAABAAQANS42LjM0LWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA

    AAAAAAAAAAAAAAAAAAC8XTJYEzgNAAgAEgAEBAQEEgAAXAAEGggAAAAICAgCAAAACgoKGRkAAR+j

    Z3A=

    '/*!*/;

    # at 120

    #161121 12:48:15 server id 1  end_log_pos 218 CRC32 0xb953ea67 Querythread_id=1exec_time=0error_code=0

    use `test`/*!*/;

    SET TIMESTAMP=1479703695/*!*/;

    SET @@session.pseudo_thread_id=1/*!*/;

    SET @@session.foreign_key_checks=1, @@session.sql_auto_is_null=0, @@session.unique_checks=1, @@session.autocommit=1/*!*/;

    SET @@session.sql_mode=1075838976/*!*/;

    SET @@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/;

    /*!\C utf8 *//*!*/;

    SET @@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=8/*!*/;

    SET @@session.lc_time_names=0/*!*/;

    SET @@session.collation_database=DEFAULT/*!*/;

    DELETE FROM `test`.`tab_memory`

    /*!*/;

    # at 218

    #161121 12:49:03 server id 1  end_log_pos 297 CRC32 0x6d922200 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703743/*!*/;

    BEGIN

    /*!*/;

    # at 297

    #161121 12:49:03 server id 1  end_log_pos 411 CRC32 0xa78a9de5 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703743/*!*/;

    insert into emp (ename) values('bin_zx')

    /*!*/;

    # at 411

    #161121 12:49:03 server id 1  end_log_pos 442 CRC32 0x0af0231f Xid = 20

    COMMIT/*!*/;

    # at 442

    #161121 12:49:08 server id 1  end_log_pos 542 CRC32 0x4c7a37af Querythread_id=1exec_time=0error_code=0

    use `test1`/*!*/;

    SET TIMESTAMP=1479703748/*!*/;

    DELETE FROM `test1`.`tab_memory`

    /*!*/;

    # at 542

    #161121 12:49:16 server id 1  end_log_pos 623 CRC32 0x1b2f79ad Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703756/*!*/;

    BEGIN

    /*!*/;

    # at 623

    #161121 12:49:16 server id 1  end_log_pos 740 CRC32 0x4f52a0ca Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703756/*!*/;

    insert into emp (ename) values('bin_zx1')

    /*!*/;

    # at 740

    #161121 12:49:16 server id 1  end_log_pos 771 CRC32 0x5c57e391 Xid = 34

    COMMIT/*!*/;

    # at 771

    #161121 12:49:29 server id 1  end_log_pos 852 CRC32 0x02a2e65c Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703769/*!*/;

    BEGIN

    /*!*/;

    # at 852

    #161121 12:49:29 server id 1  end_log_pos 965 CRC32 0xa0d7e1f2 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703769/*!*/;

    delete from emp where ename='bin_zx1'

    /*!*/;

    # at 965

    #161121 12:49:29 server id 1  end_log_pos 996 CRC32 0xab27f255 Xid = 35

    COMMIT/*!*/;

    DELIMITER ;

    # End of log file

    ROLLBACK /* added by mysqlbinlog */;

    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

  （3）加-d选项，将只显示对test数据库的操作日志。

    [root@rhel6 mysql]# mysqlbinlog -d test mysqlbin.000002 

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;

    /*!40019 SET @@session.max_insert_delayed_threads=0*/;

    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;

    DELIMITER /*!*/;

    # at 4

    #161121 10:36:44 server id 1  end_log_pos 120 CRC32 0x7067a31f Start: binlog v 4, server v 5.6.34-log created 161121 10:36:44 at startup

    # Warning: this binlog is either in use or was not closed properly.

    ROLLBACK/*!*/;

    BINLOG '

    vF0yWA8BAAAAdAAAAHgAAAABAAQANS42LjM0LWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA

    AAAAAAAAAAAAAAAAAAC8XTJYEzgNAAgAEgAEBAQEEgAAXAAEGggAAAAICAgCAAAACgoKGRkAAR+j

    Z3A=

    '/*!*/;

    # at 120

    #161121 12:48:15 server id 1  end_log_pos 218 CRC32 0xb953ea67 Querythread_id=1exec_time=0error_code=0

    use `test`/*!*/;

    SET TIMESTAMP=1479703695/*!*/;

    SET @@session.pseudo_thread_id=1/*!*/;

    SET @@session.foreign_key_checks=1, @@session.sql_auto_is_null=0, @@session.unique_checks=1, @@session.autocommit=1/*!*/;

    SET @@session.sql_mode=1075838976/*!*/;

    SET @@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/;

    /*!\C utf8 *//*!*/;

    SET @@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=8/*!*/;

    SET @@session.lc_time_names=0/*!*/;

    SET @@session.collation_database=DEFAULT/*!*/;

    DELETE FROM `test`.`tab_memory`

    /*!*/;

    # at 218

    #161121 12:49:03 server id 1  end_log_pos 297 CRC32 0x6d922200 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703743/*!*/;

    BEGIN

    /*!*/;

    # at 297

    #161121 12:49:03 server id 1  end_log_pos 411 CRC32 0xa78a9de5 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703743/*!*/;

    insert into emp (ename) values('bin_zx')

    /*!*/;

    # at 411

    #161121 12:49:03 server id 1  end_log_pos 442 CRC32 0x0af0231f Xid = 20

    COMMIT/*!*/;

    # at 442

    # at 542

    #161121 12:49:16 server id 1  end_log_pos 623 CRC32 0x1b2f79ad Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703756/*!*/;

    BEGIN

    /*!*/;

    # at 623

    # at 740

    #161121 12:49:16 server id 1  end_log_pos 771 CRC32 0x5c57e391 Xid = 34

    COMMIT/*!*/;

    # at 771

    #161121 12:49:29 server id 1  end_log_pos 852 CRC32 0x02a2e65c Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703769/*!*/;

    BEGIN

    /*!*/;

    # at 852

    # at 965

    #161121 12:49:29 server id 1  end_log_pos 996 CRC32 0xab27f255 Xid = 35

    COMMIT/*!*/;

    DELIMITER ;

    # End of log file

    ROLLBACK /* added by mysqlbinlog */;

    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

  (4)加-r选项，将上面的结果输出到文件resultfile中

    [root@rhel6 mysql]# mysqlbinlog -r binlog mysqlbin.000002 

    [root@rhel6 mysql]# more binlog

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;

    /*!40019 SET @@session.max_insert_delayed_threads=0*/;

    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;

    DELIMITER /*!*/;

    # at 4

    #161121 10:36:44 server id 1  end_log_pos 120 CRC32 0x7067a31f Start: binlog v 4, server v 5.6.34-log created 161121 10:36:44 at startup

    # Warning: this binlog is either in use or was not closed properly.

    ROLLBACK/*!*/;

    BINLOG '

    vF0yWA8BAAAAdAAAAHgAAAABAAQANS42LjM0LWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA

    AAAAAAAAAAAAAAAAAAC8XTJYEzgNAAgAEgAEBAQEEgAAXAAEGggAAAAICAgCAAAACgoKGRkAAR+j

    Z3A=

    '/*!*/;

    # at 120

    #161121 12:48:15 server id 1  end_log_pos 218 CRC32 0xb953ea67 Querythread_id=1exec_time=0error_code=0

    use `test`/*!*/;

    SET TIMESTAMP=1479703695/*!*/;

    SET @@session.pseudo_thread_id=1/*!*/;

    SET @@session.foreign_key_checks=1, @@session.sql_auto_is_null=0, @@session.unique_checks=1, @@session.autocommit=1/*!*/;

    SET @@session.sql_mode=1075838976/*!*/;

    SET @@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/;

    /*!\C utf8 *//*!*/;

    SET @@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=8/*!*/;

    SET @@session.lc_time_names=0/*!*/;

    SET @@session.collation_database=DEFAULT/*!*/;

    DELETE FROM `test`.`tab_memory`

    /*!*/;

    # at 218

    #161121 12:49:03 server id 1  end_log_pos 297 CRC32 0x6d922200 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703743/*!*/;

    BEGIN

    /*!*/;

    # at 297

    #161121 12:49:03 server id 1  end_log_pos 411 CRC32 0xa78a9de5 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703743/*!*/;

    insert into emp (ename) values('bin_zx')

    /*!*/;

    # at 411

    #161121 12:49:03 server id 1  end_log_pos 442 CRC32 0x0af0231f Xid = 20

    COMMIT/*!*/;

    # at 442

    #161121 12:49:08 server id 1  end_log_pos 542 CRC32 0x4c7a37af Querythread_id=1exec_time=0error_code=0

    use `test1`/*!*/;

    SET TIMESTAMP=1479703748/*!*/;

    DELETE FROM `test1`.`tab_memory`

    /*!*/;

    # at 542

    #161121 12:49:16 server id 1  end_log_pos 623 CRC32 0x1b2f79ad Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703756/*!*/;

    BEGIN

    /*!*/;

    # at 623

    #161121 12:49:16 server id 1  end_log_pos 740 CRC32 0x4f52a0ca Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703756/*!*/;

    insert into emp (ename) values('bin_zx1')

    /*!*/;

    # at 740

    #161121 12:49:16 server id 1  end_log_pos 771 CRC32 0x5c57e391 Xid = 34

    COMMIT/*!*/;

    # at 771

    #161121 12:49:29 server id 1  end_log_pos 852 CRC32 0x02a2e65c Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703769/*!*/;

    BEGIN

    /*!*/;

    # at 852

    #161121 12:49:29 server id 1  end_log_pos 965 CRC32 0xa0d7e1f2 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703769/*!*/;

    delete from emp where ename='bin_zx1'

    /*!*/;

    # at 965

    #161121 12:49:29 server id 1  end_log_pos 996 CRC32 0xab27f255 Xid = 35

    COMMIT/*!*/;

    DELIMITER ;

    # End of log file

    ROLLBACK /* added by mysqlbinlog */;

    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

  （5）结果显示内容较多，显得比较乱，加-s选项将上面的内容进行简单显示。

    [root@rhel6 mysql]# mysqlbinlog -s mysqlbin.000002 

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;

    /*!40019 SET @@session.max_insert_delayed_threads=0*/;

    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;

    DELIMITER /*!*/;

    ROLLBACK/*!*/;

    use `test`/*!*/;

    SET TIMESTAMP=1479703695/*!*/;

    SET @@session.pseudo_thread_id=999999999/*!*/;

    SET @@session.foreign_key_checks=1, @@session.sql_auto_is_null=0, @@session.unique_checks=1, @@session.autocommit=1/*!*/;

    SET @@session.sql_mode=1075838976/*!*/;

    SET @@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/;

    /*!\C utf8 *//*!*/;

    SET @@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=8/*!*/;

    SET @@session.lc_time_names=0/*!*/;

    SET @@session.collation_database=DEFAULT/*!*/;

    DELETE FROM `test`.`tab_memory`

    /*!*/;

    SET TIMESTAMP=1479703743/*!*/;

    BEGIN

    /*!*/;

    SET TIMESTAMP=1479703743/*!*/;

    insert into emp (ename) values('bin_zx')

    /*!*/;

    COMMIT/*!*/;

    use `test1`/*!*/;

    SET TIMESTAMP=1479703748/*!*/;

    DELETE FROM `test1`.`tab_memory`

    /*!*/;

    SET TIMESTAMP=1479703756/*!*/;

    BEGIN

    /*!*/;

    SET TIMESTAMP=1479703756/*!*/;

    insert into emp (ename) values('bin_zx1')

    /*!*/;

    COMMIT/*!*/;

    SET TIMESTAMP=1479703769/*!*/;

    BEGIN

    /*!*/;

    SET TIMESTAMP=1479703769/*!*/;

    delete from emp where ename='bin_zx1'

    /*!*/;

    COMMIT/*!*/;

    DELIMITER ;

    # End of log file

    ROLLBACK /* added by mysqlbinlog */;

    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

 （6）加“--start-datetime --stop-datetime”显示指定时间内的日志

    [root@rhel6 mysql]# mysqlbinlog mysqlbin.000002  --start-datetime='2016/11/21 12:48:00' --stop-datetime='2016/11/21 12:49:00'

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;

    /*!40019 SET @@session.max_insert_delayed_threads=0*/;

    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;

    DELIMITER /*!*/;

    # at 4

    #161121 10:36:44 server id 1  end_log_pos 120 CRC32 0x7067a31f Start: binlog v 4, server v 5.6.34-log created 161121 10:36:44 at startup

    # Warning: this binlog is either in use or was not closed properly.

    ROLLBACK/*!*/;

    BINLOG '

    vF0yWA8BAAAAdAAAAHgAAAABAAQANS42LjM0LWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA

    AAAAAAAAAAAAAAAAAAC8XTJYEzgNAAgAEgAEBAQEEgAAXAAEGggAAAAICAgCAAAACgoKGRkAAR+j

    Z3A=

    '/*!*/;

    # at 120

    #161121 12:48:15 server id 1  end_log_pos 218 CRC32 0xb953ea67 Querythread_id=1exec_time=0error_code=0

    use `test`/*!*/;

    SET TIMESTAMP=1479703695/*!*/;

    SET @@session.pseudo_thread_id=1/*!*/;

    SET @@session.foreign_key_checks=1, @@session.sql_auto_is_null=0, @@session.unique_checks=1, @@session.autocommit=1/*!*/;

    SET @@session.sql_mode=1075838976/*!*/;

    SET @@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/;

    /*!\C utf8 *//*!*/;

    SET @@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=8/*!*/;

    SET @@session.lc_time_names=0/*!*/;

    SET @@session.collation_database=DEFAULT/*!*/;

    DELETE FROM `test`.`tab_memory`

    /*!*/;

    DELIMITER ;

    # End of log file

    ROLLBACK /* added by mysqlbinlog */;

    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

    开始日期和结束日期可以只写一个。如果只写开始日期，表示范围是开始日期到日志结束；如果只写结束日期，表示日志开始到指定的结束日期。

（7）--start-position=#和—stop-position=#和日期范围类似，不过可以更精确地表示范围

    [root@rhel6 mysql]# mysqlbinlog  mysqlbin.000001 mysqlbin.000002  --start-position=120 --stop-position=297

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;

    /*!40019 SET @@session.max_insert_delayed_threads=0*/;

    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;

    DELIMITER /*!*/;

    # at 4

    #161120 22:45:37 server id 1  end_log_pos 120 CRC32 0x1ce9680d Start: binlog v 4, server v 5.6.34-log created 161120 22:45:37 at startup

    ROLLBACK/*!*/;

    BINLOG '

    EbcxWA8BAAAAdAAAAHgAAAAAAAQANS42LjM0LWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA

    AAAAAAAAAAAAAAAAAAARtzFYEzgNAAgAEgAEBAQEEgAAXAAEGggAAAAICAgCAAAACgoKGRkAAQ1o

    6Rw=

    '/*!*/;

    # at 120

    #161120 23:28:57 server id 1  end_log_pos 143 CRC32 0x69c1b9d0 Stop

    # at 4

    #161121 10:36:44 server id 1  end_log_pos 120 CRC32 0x7067a31f Start: binlog v 4, server v 5.6.34-log created 161121 10:36:44 at startup

    # Warning: this binlog is either in use or was not closed properly.

    ROLLBACK/*!*/;

    BINLOG '

    vF0yWA8BAAAAdAAAAHgAAAABAAQANS42LjM0LWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA

    AAAAAAAAAAAAAAAAAAC8XTJYEzgNAAgAEgAEBAQEEgAAXAAEGggAAAAICAgCAAAACgoKGRkAAR+j

    Z3A=

    '/*!*/;

    # at 120

    #161121 12:48:15 server id 1  end_log_pos 218 CRC32 0xb953ea67 Querythread_id=1exec_time=0error_code=0

    use `test`/*!*/;

    SET TIMESTAMP=1479703695/*!*/;

    SET @@session.pseudo_thread_id=1/*!*/;

    SET @@session.foreign_key_checks=1, @@session.sql_auto_is_null=0, @@session.unique_checks=1, @@session.autocommit=1/*!*/;

    SET @@session.sql_mode=1075838976/*!*/;

    SET @@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/;

    /*!\C utf8 *//*!*/;

    SET @@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=8/*!*/;

    SET @@session.lc_time_names=0/*!*/;

    SET @@session.collation_database=DEFAULT/*!*/;

    DELETE FROM `test`.`tab_memory`

    /*!*/;

    # at 218

    #161121 12:49:03 server id 1  end_log_pos 297 CRC32 0x6d922200 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703743/*!*/;

    BEGIN

    /*!*/;

    DELIMITER ;

    # End of log file

    ROLLBACK /* added by mysqlbinlog */;

    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

4、删除binlog日志

  对于比较繁忙的OLTP（在线事务处理）系统，由于每天生成日志量大，这些日志如果长时间不清除，将会对磁盘空间带来很大的浪费。因此定期删除日志是DBA维护MySQL数据库的一个重要工作内容。下面介绍几种删除日志的常见方法。

  方法1：RESET MASTER;

    执行"RESET MASTER;"命令，该命令将删除所有BINLOG日志，新日志编号从"0000001"开始。

    [root@rhel6 mysql]# ls -l mysqlbin*

    -rw-rw---- 1 mysql mysql  143 Nov 20 23:28 mysqlbin.000001

    -rw-rw---- 1 mysql mysql 1019 Nov 21 15:12 mysqlbin.000002

    -rw-rw---- 1 mysql mysql  143 Nov 21 15:12 mysqlbin.000003

    -rw-rw---- 1 mysql mysql  143 Nov 21 15:46 mysqlbin.000004

    -rw-rw---- 1 mysql mysql  143 Nov 21 15:53 mysqlbin.000005

    -rw-rw---- 1 mysql mysql  143 Nov 21 16:08 mysqlbin.000006

    -rw-rw---- 1 mysql mysql  166 Nov 21 16:42 mysqlbin.000007

    -rw-rw---- 1 mysql mysql  368 Nov 21 18:11 mysqlbin.000008

    -rw-rw---- 1 mysql mysql  143 Nov 21 18:11 mysqlbin.000009

    -rw-rw---- 1 mysql mysql  120 Nov 21 21:11 mysqlbin.000010

    -rw-rw---- 1 mysql mysql  180 Nov 21 21:11 mysqlbin.index

    [root@rhel6 mysql]# mysql -uroot -p 

    Enter password: 

    Welcome to the MySQL monitor.  Commands end with ; or \g.

    Your MySQL connection id is 1

    Server version: 5.6.34-log MySQL Community Server (GPL)

    

    Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved.

    

    Oracle is a registered trademark of Oracle Corporation and/or its

    affiliates. Other names may be trademarks of their respective

    owners.

    

    Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

    

    mysql> reset master;

    Query OK, 0 rows affected (0.05 sec)

    

    mysql> exit

    Bye

    [root@rhel6 mysql]# ls -l mysqlbin*

    -rw-rw---- 1 mysql mysql 120 Nov 21 23:11 mysqlbin.000001

    -rw-rw---- 1 mysql mysql  18 Nov 21 23:11 mysqlbin.index

  方法二：PURGE MASTER LOGS TO 'mysql-bin.******'

    执行"PURGE MASTER LOGS TO 'mysql-bin.******'"命令，该命令将删除"******"编号之前的所的日志。

    [root@rhel6 mysql]# ls -l mysqlbin*

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:12 mysqlbin.000001

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:15 mysqlbin.000002

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:15 mysqlbin.000003

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:15 mysqlbin.000004

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:15 mysqlbin.000005

    -rw-rw---- 1 mysql mysql 120 Nov 21 23:15 mysqlbin.000006

    -rw-rw---- 1 mysql mysql 108 Nov 21 23:15 mysqlbin.index

    [root@rhel6 mysql]# mysql -uroot -p

    Enter password: 

    Welcome to the MySQL monitor.  Commands end with ; or \g.

    Your MySQL connection id is 5

    Server version: 5.6.34-log MySQL Community Server (GPL)

    

    Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved.

    

    Oracle is a registered trademark of Oracle Corporation and/or its

    affiliates. Other names may be trademarks of their respective

    owners.

    

    Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

    

    mysql> purge master logs to 'mysqlbin.000005';

    Query OK, 0 rows affected (0.03 sec)

    

    mysql> exit

    Bye

    [root@rhel6 mysql]# ls -l mysqlbin*

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:15 mysqlbin.000005

    -rw-rw---- 1 mysql mysql 120 Nov 21 23:15 mysqlbin.000006

    -rw-rw---- 1 mysql mysql  36 Nov 21 23:16 mysqlbin.index

  方法3：PURGE MASTER LOGS BEFORE 'yyyy-mm-dd hh24:mi:ss'

    执行"PURGE MASTER LOGS BEFORE 'yyyy-mm-dd hh24:mi:ss'"命令，该命令将删除日期为"yyyy-mm-dd hh24:mi:ss"之前产生的所有日志。

    [root@rhel6 mysql]# ls -l mysqlbin*

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:15 mysqlbin.000005

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:19 mysqlbin.000006

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:19 mysqlbin.000007

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:19 mysqlbin.000008

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:19 mysqlbin.000009

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:19 mysqlbin.000010

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:20 mysqlbin.000011

    -rw-rw---- 1 mysql mysql 120 Nov 21 23:20 mysqlbin.000012

    -rw-rw---- 1 mysql mysql 144 Nov 21 23:20 mysqlbin.index

    [root@rhel6 mysql]# mysql -uroot -p

    Enter password: 

    Welcome to the MySQL monitor.  Commands end with ; or \g.

    Your MySQL connection id is 8

    Server version: 5.6.34-log MySQL Community Server (GPL)

    

    Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved.

    

    Oracle is a registered trademark of Oracle Corporation and/or its

    affiliates. Other names may be trademarks of their respective

    owners.

    

    Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

    

    mysql> purge master logs before '2016-11-21 23:20:00';

    Query OK, 0 rows affected (0.04 sec)

    

    mysql> exit

    Bye

    [root@rhel6 mysql]# ls -l mysqlbin*

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:20 mysqlbin.000011

    -rw-rw---- 1 mysql mysql 120 Nov 21 23:20 mysqlbin.000012

    -rw-rw---- 1 mysql mysql  36 Nov 21 23:20 mysqlbin.index

  方法4：设置expire_logs_days

    设置--expire_logs_days=#，此参数的含义是设置日志的过期天数，过了指定的天数后日志将会被自动删除，这样将有利于减少DBA管理日志的工作量。

    [root@rhel6 mysql]# ls -l mysqlbin*

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:20 mysqlbin.000011

    -rw-rw---- 1 mysql mysql 143 Nov 21 23:30 mysqlbin.000012

    -rw-rw---- 1 mysql mysql 120 Nov 21 23:31 mysqlbin.000013

    -rw-rw---- 1 mysql mysql  54 Nov 21 23:31 mysqlbin.index

    在/etc/my.cnf的[mysqld]中添加expire_logs_day=2

    [root@rhel6 mysql]# grep expire_logs_day /etc/my.cnf

    expire_logs_day=2

    重启mysql

    [root@rhel6 mysql]# service mysql restart

    Shutting down MySQL..                                      [  OK  ]

    Starting MySQL.                                            [  OK  ]

    [root@rhel6 mysql]# date

    Mon Nov 21 23:32:13 CST 2016

    修改日期为1天后

    [root@rhel6 mysql]# date -s '20161122 23:00:00'

    Tue Nov 22 23:00:00 CST 2016

    [root@rhel6 mysql]# date

    Tue Nov 22 23:00:01 CST 2016

    使用flush logs触发日志文件更新，由于还不到2天，日志不会被删除

    [root@rhel6 mysql]# mysqladmin flush-log

    mysqladmin: connect to server at 'localhost' failed

    error: 'Access denied for user 'root'@'localhost' (using password: NO)'

    [root@rhel6 mysql]# mysqladmin -uroot -p flush-log

    Enter password: 

    [root@rhel6 mysql]# ls -lt mysqlbin*

    -rw-rw---- 1 mysql mysql  90 Nov 22 23:00 mysqlbin.index

    -rw-rw---- 1 mysql mysql 120 Nov 22 23:00 mysqlbin.000015

    -rw-rw---- 1 mysql mysql 166 Nov 22 23:00 mysqlbin.000014

    -rw-rw---- 1 mysql mysql 143 Nov 21 23:31 mysqlbin.000013

    -rw-rw---- 1 mysql mysql 143 Nov 21 23:30 mysqlbin.000012

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:20 mysqlbin.000011

    修改日期为3天后，并再次执行flush logs

    [root@rhel6 mysql]# date -s '20161124 23:00:00'

    Thu Nov 24 23:00:00 CST 2016

    [root@rhel6 mysql]# mysqladmin -uroot -p flush-log

    Enter password: 

    两天前的日志(11月21日)被删除了

    [root@rhel6 mysql]# ls -lt mysqlbin*

    -rw-rw---- 1 mysql mysql  72 Nov 24 23:00 mysqlbin.index

    -rw-rw---- 1 mysql mysql 120 Nov 24 23:00 mysqlbin.000017

    -rw-rw---- 1 mysql mysql 166 Nov 24 23:00 mysqlbin.000016

    -rw-rw---- 1 mysql mysql 166 Nov 23 23:00 mysqlbin.000015

    -rw-rw---- 1 mysql mysql 166 Nov 22 23:00 mysqlbin.000014


  参考：《深入浅出MySQL》

  参考文档：http://www.myexception.cn/mysql/1779525.html





     本文转自hbxztc 51CTO博客，原文链接：http://blog.51cto.com/hbxztc/1874987，如需转载请自行联系原作者




文章标签：
云数据库 RDS MySQL 版
日志服务
关系型数据库
MySQL
监控
SQL
数据库
关键词：
mysql日志服务
云数据库 RDS MySQL 版日志
云数据库 RDS MySQL 版binlog
二进制binlog
mysql二进制binlog
相关实践学习
如何快速连接云数据库RDS MySQL
本场景介绍如何通过阿里云数据管理服务DMS快速连接云数据库RDS MySQL，然后进行数据表的CRUD操作。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心，利用清洁计算为万物互联的新世界提供源源不断的能源动力，目前开服的区域包括中国（华北、华东、华南、香港）、新加坡、美国（美东、美西）、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程，来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品：云服务器ECS 云服务器 ECS（Elastic Compute Service）是一种弹性可伸缩的计算服务，助您降低 IT 成本，提升运维效率，使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
技术小胖子
目录
相关文章
qhhf_地道酬勤
|
1月前
|
存储 SQL 关系型数据库
MySQL日志详解——日志分类、二进制日志bin log、回滚日志undo log、重做日志redo log
MySQL日志详解——日志分类、二进制日志bin log、回滚日志undo log、重做日志redo log、原理、写入过程；binlog与redolog区别、update语句的执行流程、两阶段提交、主从复制、三种日志的使用场景；查询日志、慢查询日志、错误日志等其他几类日志
qhhf_地道酬勤
105 35
MySQL日志详解——日志分类、二进制日志bin log、回滚日志undo log、重做日志redo log
拉丁解牛说技术
|
3月前
|
SQL 存储 缓存
MySQL进阶突击系列(02)一条更新SQL执行过程 | 讲透undoLog、redoLog、binLog日志三宝
本文详细介绍了MySQL中update SQL执行过程涉及的undoLog、redoLog和binLog三种日志的作用及其工作原理，包括它们如何确保数据的一致性和完整性，以及在事务提交过程中各自的角色。同时，文章还探讨了这些日志在故障恢复中的重要性，强调了合理配置相关参数对于提高系统稳定性的必要性。
拉丁解牛说技术
154 6
赵渝强老师
|
4月前
|
关系型数据库 MySQL 数据库
【赵渝强老师】MySQL的binlog日志文件
MySQL的binlog日志记录了所有对数据库的更改操作（不包括SELECT和SHOW），主要用于主从复制和数据恢复。binlog有三种模式，可通过设置binlog_format参数选择。示例展示了如何启用binlog、设置格式、查看日志文件及记录的信息。
赵渝强老师
526 6
技术自由圈/原疯狂创客圈
|
5月前
|
SQL 存储 关系型数据库
美团面试：binlog、redo log、undo log的底层原理是什么？它们分别实现ACID的哪个特性？
老架构师尼恩在其读者交流群中分享了关于 MySQL 中 redo log、undo log 和 binlog 的面试题及其答案。这些问题涵盖了事务的 ACID 特性、日志的一致性问题、SQL 语句的执行流程等。尼恩详细解释了这些日志的作用、所在架构层级、日志形式、缓存机制以及写文件方式等内容。他还提供了多个面试题的详细解答，帮助读者系统化地掌握这些知识点，提升面试表现。此外，尼恩还推荐了《尼恩Java面试宝典PDF》和其他技术圣经系列PDF，帮助读者进一步巩固知识，实现“offer自由”。
技术自由圈/原疯狂创客圈
68 1
美团面试：binlog、redo log、undo log的底层原理是什么？它们分别实现ACID的哪个特性？
猿java
|
5月前
|
存储 SQL 关系型数据库
面试官：你能聊聊 binlog、undo log、redo log 吗？
本文详细解析了MySQL数据库中的三种日志：binlog、undo log和redo log。binlog用于记录数据库的所有表结构变更及数据修改，支持归档、主从复制和数据恢复；undo log用于事务回滚，确保事务的原子性和实现多版本控制；redo log则用于crash-safe，确保数据库异常重启后已提交记录不丢失。文章通过实例和图表，深入浅出地介绍了每种日志的特点、应用场景及其实现机制。适合数据库开发者和运维人员阅读。
猿java
446 2
jianz123
|
5月前
|
SQL 存储 关系型数据库
Mysql主从同步 清理二进制日志的技巧
Mysql主从同步 清理二进制日志的技巧
jianz123
56 1
喜欢猪猪
|
5月前
|
存储 关系型数据库 MySQL
MySQL中的Redo Log、Undo Log和Binlog：深入解析
【10月更文挑战第21天】在数据库管理系统中，日志是保障数据一致性和完整性的关键机制。MySQL作为一种广泛使用的关系型数据库管理系统，提供了多种日志类型来满足不同的需求。本文将详细介绍MySQL中的Redo Log、Undo Log和Binlog，从背景、业务场景、功能、底层实现原理、使用措施等方面进行详细分析，并通过Java代码示例展示如何与这些日志进行交互。
喜欢猪猪
681 0
智物科技库
|
3月前
|
存储 SQL 关系型数据库
mysql 的ReLog和BinLog区别
MySQL中的重做日志和二进制日志是确保数据库稳定性和可靠性的关键组件。重做日志主要用于事务的持久性和原子性，通过记录数据页的物理修改信息来恢复未提交的事务；而二进制日志记录SQL语句的逻辑变化，支持数据复制、恢复和审计。两者在写入时机、存储方式及配置参数等方面存在显著差异。
智物科技库
102 6
东方睿赢
|
6月前
|
canal 消息中间件 关系型数据库
Canal作为一款高效、可靠的数据同步工具，凭借其基于MySQL binlog的增量同步机制，在数据同步领域展现了强大的应用价值
【9月更文挑战第1天】Canal作为一款高效、可靠的数据同步工具，凭借其基于MySQL binlog的增量同步机制，在数据同步领域展现了强大的应用价值
东方睿赢
1110 4
土木林森
|
7月前
|
SQL 关系型数据库 MySQL
【揭秘】MySQL binlog日志与GTID：如何让数据库备份恢复变得轻松简单？
【8月更文挑战第22天】MySQL的binlog日志记录数据变更，用于恢复、复制和点恢复；GTID为每笔事务分配唯一ID，简化复制和恢复流程。开启binlog和GTID后，可通过`mysqldump`进行逻辑备份，包含binlog位置信息，或用`xtrabackup`做物理备份。恢复时，使用`mysql`命令执行备份文件，或通过`innobackupex`恢复物理备份。GTID模式下的主从复制配置更简便。
土木林森
818 2

热门文章

最新文章

  • 1
    MySQL日志详解——日志分类、二进制日志bin log、回滚日志undo log、重做日志redo log
  • 2
    基于 Flink CDC YAML 的 MySQL 到 Kafka 流式数据集成
  • 3
    MySQL底层概述—1.InnoDB内存结构
  • 4
    MySQL底层概述—2.InnoDB磁盘结构
  • 5
    如何实现 MySQL 的读写分离？
  • 6
    如何排查和解决PHP连接数据库MYSQL失败写锁的问题
  • 7
    MySQL底层概述—7.优化原则及慢查询
  • 8
    MySQL底层概述—10.InnoDB锁机制
  • 9
    MySQL 主从复制
  • 10
    如何解决 MySQL 数据库服务器 CPU 飙升的情况
  • 1
    ELK实现nginx、mysql、http的日志可视化实验
    142
  • 2
    Log/Trace/Metric 完成 APIServer 可观测覆盖
    40
  • 3
    除了实时性能监控，Hyper-V还支持日志记录和警报功能你知道吗？
    24
  • 4
    让跨 project 联查更轻松，SLS StoreView 查询和分析实践
    22
  • 5
    网络安全视角：从地域到账号的阿里云日志审计实践
    22
  • 6
    一招高效解析 Access Log，轻松应对泼天流量
    31
  • 7
    基于阿里云 EMR Serverless Spark 版快速搭建OSS日志分析应用
    22
  • 8
    Log/Trace/Metric 完成 APIServer 可观测覆盖
    24
  • 9
    MySQL日志
    45
  • 10
    图解MySQL【日志】——磁盘 I/O 次数过高时优化的办法
    29

    • 相关课程

    更多
  • MySQL企业常见架构与调优经验分享
  • 云数据库MySQL版快速上手教程
  • 阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
  • MySQL实战进阶
  • 数据库及SQL/MySQL基础
  • 云数据库MySQL快速入门

    • 相关电子书

    更多
  • 2019大数据技术公开课第五季—日志数据如何同步到MaxCompute之实践讲解
  • Python 系列直播——深入Python与日志服务，玩转大规模数据分析处理实战第二讲
  • Python第四讲——使用IPython/Jupyter Notebook与日志服务玩转超大规模数据分析与可视化

    • 相关实验场景

    更多
  • MySQL基础-学生管理系统数据库设计
  • 如何快速连接云数据库RDS MySQL
  • MySQL数据库快速部署实践
  • MySQL引擎及架构优化
  • 基于EBS部署高性能的MySQL服务
  • 使用CloudLens管理SLS日志采集

    • 推荐镜像

    更多
  • mysql
  • mariadb
  • postgresql
    • 下一篇
    通义万相2.1视频/图像模型新升级！可在阿里云百炼直接体验