AI 助理
备案控制台
开发者社区 数据库 文章 正文

Mysql的二进制日志---binlog

2017-11-08 979
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
云数据库 RDS MySQL，集群系列 2核4GB
推荐场景：
搭建个人博客
RDS MySQL Serverless 基础系列，0.5-2RCU 50GB
推荐场景：
学生管理系统数据库设计 搭建个人博客
日志服务 SLS，月写入数据量 50GB 1个月
简介：

  二进制日志（BINLOG）记录了所有的DDL（数据定义语言）语句和DML（数据操纵语言）语句，但是不包括数据查询语句。语句以“事件”的形式保存，它描述了数据的更改过程。此日志对于灾难时的数据恢复起着极其重要的作用。

1、日志的位置和格式

  当用--log-bin[=file_name]选项启动时，mysqld将包含所有更新数据的SQL命令写入日志文件。如果没有给出file_name值，默认名为主机名后面跟“-bin”。如果给出了文件名，但没有包含路径，则文件默认被写入参数DATADIR（数据目录）指定的目录。

  MySQL5.6中二进制的格式分为3种，STATEMENT、ROW、MIXED，可以在启动时通过参数--binlog_format进行设置。

  STATEMENT

  MySQL5.1之前的版本都 采用这种方式，顾名思义，日志中记录的都是语句(statement)，每一条对数据造成修改的SQL语句都会记录在日志中，通过mysqlbin工具可以清晰地看到每条语句的文本。主从复制的时候，从库(slave)会将日志解析为原文本，并在从库重新执行一次。这种格式的优点是日志记录清晰易读、日志量少，对I/O影响较小。缺点是在某些情况下slave的日志复制会出错

  ROW

  MySQL5.1.11之后，出现了这种新的日志格式。它将每一行的变更记录到日志中，而不是记录SQL语句。比如一个简单的更新SQL:update emp set name='abc'，由于是对全表进行更新，也就是每一行记录都会发生变更，如果是一个100万行的大表，则日志中会记录100万条记录的变化情况。这种格式的优点是会记录每一行数据的变化细节，不会出现某些情况下无法复制的情况。缺点是日志量大，对I/O影响较大。

  MIXED

  这种日志格式，即混合了STATEMENT和ROW两种日志。默认情况下采用STATEMENT，但在一些特殊情况下采用ROW来进行记录，比如采用NDB存储引擎，此时对表的DML语句全部采用ROW；客户端使用了临时表；客户端使用了不确定函数，比如current_user()等，因为这种不确定函数在主从中得到的值可能不同，导致主从数据产生不一致。MIXED格式能尽量利用两种模式的优点，而避开它们的缺点。

2、启用binlog

  默认情况下，binlog是不启用的。可以通过查看变量 log_bin的值来查看是否启用。

1
2
3
4
5
6
7
8
9
mysql> show variables  like  'log_bin' ;
+ ---------------+-------+
| Variable_name | Value |
+ ---------------+-------+
| log_bin       |  OFF    |
+ ---------------+-------+
1 row  in  set  (0.01 sec)
mysql> show  binary  logs;
ERROR 1381 (HY000): You are  not  using  binary  logging

 启用binlong

  vi /etc/my.cnf

  [mysqld]下边添加

  log-bin=mysqlbin   #"="后边的名字为自己定义的前缀，如果没有自定义则为hostname-bin

  在5.7.3及以后的版本启用binlog必须要连server-id一同指定，否则mysql无法启动。

  重启mysql服务

  service mysql restart

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
mysql> show variables  like  'log_bin' ;
+ ---------------+-------+
| Variable_name | Value |
+ ---------------+-------+
| log_bin       |  ON     |
+ ---------------+-------+
1 row  in  set  (0.03 sec)
 
mysql> show  binary  logs;
+ -----------------+-----------+
| Log_name        | File_size |
+ -----------------+-----------+
| mysqlbin.000001 |       120 |
+ -----------------+-----------+
1 row  in  set  (0.00 sec)
 
mysql> show binlog events;
+ -----------------+-----+-------------+-----------+-------------+---------------------------------------+
| Log_name        | Pos | Event_type  | Server_id | End_log_pos | Info                                  |
+ -----------------+-----+-------------+-----------+-------------+---------------------------------------+
| mysqlbin.000001 |   4 | Format_desc |         1 |         120 | Server ver: 5.6.34-log, Binlog ver: 4 |
+ -----------------+-----+-------------+-----------+-------------+---------------------------------------+

3、读取binlog日志

  由于服务器生成的二进制日志文件以二进制格式保存，所以如果要想检查这些文件的文本格式，就会用到mysqlbinlog日志管理工具。

mysqlbinlog的具体用法如下：

shell> mysqlbinlog [options] log-files1 log-files2...

option有很多选项，常用的如下：

  -d, --database=name        指定数据库名称，只列出指定的数据库相关操作。

  -o, --offset=#   忽略掉日志中的前n行命令

  -r, --result-file=name       将输出的文本格式日志输出到指定文件

  -s, --short-form       显示简单格式，省略掉一些信息

  --set-charset=char-name：在输出为文本格式时，在文件第一行加上set names char-name，这个选项在某些情况下装载数据时，非常有用。

  --start-datetime=name –stop-datetime=name：指定日期间隔内的所有日志

  --start-position=#  --stop-position=#：指定位置间隔内的所有日志

option可放日志文件前也可放日志文件后

  （1）创建日志

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
mysql> use test
Reading  table  information  for  completion  of  table  and  column  names
You can turn  off  this feature  to  get a quicker startup  with  -A
 
Database  changed
 
mysql>  insert  into  emp (ename)  values ( 'bin_zx' );
Query OK, 1 row affected (0.05 sec)
 
mysql> use test1
Reading  table  information  for  completion  of  table  and  column  names
You can turn  off  this feature  to  get a quicker startup  with  -A
 
Database  changed
mysql>  insert  into  emp (ename)  values ( 'bin_zx1' );
Query OK, 1 row affected (0.05 sec)
 
mysql>  delete  from  emp  where  ename= 'bin_zx1' ;
Query OK, 1 row affected (0.00 sec)

（2）不加任何参数，显示所有日志(加粗为上一步执行的sql)

    [root@rhel6 mysql]# mysqlbinlog mysqlbin.000002 

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;

    /*!40019 SET @@session.max_insert_delayed_threads=0*/;

    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;

    DELIMITER /*!*/;

    # at 4

    #161121 10:36:44 server id 1  end_log_pos 120 CRC32 0x7067a31f Start: binlog v 4, server v 5.6.34-log created 161121 10:36:44 at startup

    # Warning: this binlog is either in use or was not closed properly.

    ROLLBACK/*!*/;

    BINLOG '

    vF0yWA8BAAAAdAAAAHgAAAABAAQANS42LjM0LWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA

    AAAAAAAAAAAAAAAAAAC8XTJYEzgNAAgAEgAEBAQEEgAAXAAEGggAAAAICAgCAAAACgoKGRkAAR+j

    Z3A=

    '/*!*/;

    # at 120

    #161121 12:48:15 server id 1  end_log_pos 218 CRC32 0xb953ea67 Querythread_id=1exec_time=0error_code=0

    use `test`/*!*/;

    SET TIMESTAMP=1479703695/*!*/;

    SET @@session.pseudo_thread_id=1/*!*/;

    SET @@session.foreign_key_checks=1, @@session.sql_auto_is_null=0, @@session.unique_checks=1, @@session.autocommit=1/*!*/;

    SET @@session.sql_mode=1075838976/*!*/;

    SET @@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/;

    /*!\C utf8 *//*!*/;

    SET @@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=8/*!*/;

    SET @@session.lc_time_names=0/*!*/;

    SET @@session.collation_database=DEFAULT/*!*/;

    DELETE FROM `test`.`tab_memory`

    /*!*/;

    # at 218

    #161121 12:49:03 server id 1  end_log_pos 297 CRC32 0x6d922200 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703743/*!*/;

    BEGIN

    /*!*/;

    # at 297

    #161121 12:49:03 server id 1  end_log_pos 411 CRC32 0xa78a9de5 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703743/*!*/;

    insert into emp (ename) values('bin_zx')

    /*!*/;

    # at 411

    #161121 12:49:03 server id 1  end_log_pos 442 CRC32 0x0af0231f Xid = 20

    COMMIT/*!*/;

    # at 442

    #161121 12:49:08 server id 1  end_log_pos 542 CRC32 0x4c7a37af Querythread_id=1exec_time=0error_code=0

    use `test1`/*!*/;

    SET TIMESTAMP=1479703748/*!*/;

    DELETE FROM `test1`.`tab_memory`

    /*!*/;

    # at 542

    #161121 12:49:16 server id 1  end_log_pos 623 CRC32 0x1b2f79ad Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703756/*!*/;

    BEGIN

    /*!*/;

    # at 623

    #161121 12:49:16 server id 1  end_log_pos 740 CRC32 0x4f52a0ca Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703756/*!*/;

    insert into emp (ename) values('bin_zx1')

    /*!*/;

    # at 740

    #161121 12:49:16 server id 1  end_log_pos 771 CRC32 0x5c57e391 Xid = 34

    COMMIT/*!*/;

    # at 771

    #161121 12:49:29 server id 1  end_log_pos 852 CRC32 0x02a2e65c Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703769/*!*/;

    BEGIN

    /*!*/;

    # at 852

    #161121 12:49:29 server id 1  end_log_pos 965 CRC32 0xa0d7e1f2 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703769/*!*/;

    delete from emp where ename='bin_zx1'

    /*!*/;

    # at 965

    #161121 12:49:29 server id 1  end_log_pos 996 CRC32 0xab27f255 Xid = 35

    COMMIT/*!*/;

    DELIMITER ;

    # End of log file

    ROLLBACK /* added by mysqlbinlog */;

    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

  （3）加-d选项，将只显示对test数据库的操作日志。

    [root@rhel6 mysql]# mysqlbinlog -d test mysqlbin.000002 

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;

    /*!40019 SET @@session.max_insert_delayed_threads=0*/;

    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;

    DELIMITER /*!*/;

    # at 4

    #161121 10:36:44 server id 1  end_log_pos 120 CRC32 0x7067a31f Start: binlog v 4, server v 5.6.34-log created 161121 10:36:44 at startup

    # Warning: this binlog is either in use or was not closed properly.

    ROLLBACK/*!*/;

    BINLOG '

    vF0yWA8BAAAAdAAAAHgAAAABAAQANS42LjM0LWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA

    AAAAAAAAAAAAAAAAAAC8XTJYEzgNAAgAEgAEBAQEEgAAXAAEGggAAAAICAgCAAAACgoKGRkAAR+j

    Z3A=

    '/*!*/;

    # at 120

    #161121 12:48:15 server id 1  end_log_pos 218 CRC32 0xb953ea67 Querythread_id=1exec_time=0error_code=0

    use `test`/*!*/;

    SET TIMESTAMP=1479703695/*!*/;

    SET @@session.pseudo_thread_id=1/*!*/;

    SET @@session.foreign_key_checks=1, @@session.sql_auto_is_null=0, @@session.unique_checks=1, @@session.autocommit=1/*!*/;

    SET @@session.sql_mode=1075838976/*!*/;

    SET @@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/;

    /*!\C utf8 *//*!*/;

    SET @@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=8/*!*/;

    SET @@session.lc_time_names=0/*!*/;

    SET @@session.collation_database=DEFAULT/*!*/;

    DELETE FROM `test`.`tab_memory`

    /*!*/;

    # at 218

    #161121 12:49:03 server id 1  end_log_pos 297 CRC32 0x6d922200 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703743/*!*/;

    BEGIN

    /*!*/;

    # at 297

    #161121 12:49:03 server id 1  end_log_pos 411 CRC32 0xa78a9de5 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703743/*!*/;

    insert into emp (ename) values('bin_zx')

    /*!*/;

    # at 411

    #161121 12:49:03 server id 1  end_log_pos 442 CRC32 0x0af0231f Xid = 20

    COMMIT/*!*/;

    # at 442

    # at 542

    #161121 12:49:16 server id 1  end_log_pos 623 CRC32 0x1b2f79ad Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703756/*!*/;

    BEGIN

    /*!*/;

    # at 623

    # at 740

    #161121 12:49:16 server id 1  end_log_pos 771 CRC32 0x5c57e391 Xid = 34

    COMMIT/*!*/;

    # at 771

    #161121 12:49:29 server id 1  end_log_pos 852 CRC32 0x02a2e65c Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703769/*!*/;

    BEGIN

    /*!*/;

    # at 852

    # at 965

    #161121 12:49:29 server id 1  end_log_pos 996 CRC32 0xab27f255 Xid = 35

    COMMIT/*!*/;

    DELIMITER ;

    # End of log file

    ROLLBACK /* added by mysqlbinlog */;

    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

  (4)加-r选项，将上面的结果输出到文件resultfile中

    [root@rhel6 mysql]# mysqlbinlog -r binlog mysqlbin.000002 

    [root@rhel6 mysql]# more binlog

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;

    /*!40019 SET @@session.max_insert_delayed_threads=0*/;

    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;

    DELIMITER /*!*/;

    # at 4

    #161121 10:36:44 server id 1  end_log_pos 120 CRC32 0x7067a31f Start: binlog v 4, server v 5.6.34-log created 161121 10:36:44 at startup

    # Warning: this binlog is either in use or was not closed properly.

    ROLLBACK/*!*/;

    BINLOG '

    vF0yWA8BAAAAdAAAAHgAAAABAAQANS42LjM0LWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA

    AAAAAAAAAAAAAAAAAAC8XTJYEzgNAAgAEgAEBAQEEgAAXAAEGggAAAAICAgCAAAACgoKGRkAAR+j

    Z3A=

    '/*!*/;

    # at 120

    #161121 12:48:15 server id 1  end_log_pos 218 CRC32 0xb953ea67 Querythread_id=1exec_time=0error_code=0

    use `test`/*!*/;

    SET TIMESTAMP=1479703695/*!*/;

    SET @@session.pseudo_thread_id=1/*!*/;

    SET @@session.foreign_key_checks=1, @@session.sql_auto_is_null=0, @@session.unique_checks=1, @@session.autocommit=1/*!*/;

    SET @@session.sql_mode=1075838976/*!*/;

    SET @@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/;

    /*!\C utf8 *//*!*/;

    SET @@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=8/*!*/;

    SET @@session.lc_time_names=0/*!*/;

    SET @@session.collation_database=DEFAULT/*!*/;

    DELETE FROM `test`.`tab_memory`

    /*!*/;

    # at 218

    #161121 12:49:03 server id 1  end_log_pos 297 CRC32 0x6d922200 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703743/*!*/;

    BEGIN

    /*!*/;

    # at 297

    #161121 12:49:03 server id 1  end_log_pos 411 CRC32 0xa78a9de5 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703743/*!*/;

    insert into emp (ename) values('bin_zx')

    /*!*/;

    # at 411

    #161121 12:49:03 server id 1  end_log_pos 442 CRC32 0x0af0231f Xid = 20

    COMMIT/*!*/;

    # at 442

    #161121 12:49:08 server id 1  end_log_pos 542 CRC32 0x4c7a37af Querythread_id=1exec_time=0error_code=0

    use `test1`/*!*/;

    SET TIMESTAMP=1479703748/*!*/;

    DELETE FROM `test1`.`tab_memory`

    /*!*/;

    # at 542

    #161121 12:49:16 server id 1  end_log_pos 623 CRC32 0x1b2f79ad Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703756/*!*/;

    BEGIN

    /*!*/;

    # at 623

    #161121 12:49:16 server id 1  end_log_pos 740 CRC32 0x4f52a0ca Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703756/*!*/;

    insert into emp (ename) values('bin_zx1')

    /*!*/;

    # at 740

    #161121 12:49:16 server id 1  end_log_pos 771 CRC32 0x5c57e391 Xid = 34

    COMMIT/*!*/;

    # at 771

    #161121 12:49:29 server id 1  end_log_pos 852 CRC32 0x02a2e65c Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703769/*!*/;

    BEGIN

    /*!*/;

    # at 852

    #161121 12:49:29 server id 1  end_log_pos 965 CRC32 0xa0d7e1f2 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703769/*!*/;

    delete from emp where ename='bin_zx1'

    /*!*/;

    # at 965

    #161121 12:49:29 server id 1  end_log_pos 996 CRC32 0xab27f255 Xid = 35

    COMMIT/*!*/;

    DELIMITER ;

    # End of log file

    ROLLBACK /* added by mysqlbinlog */;

    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

  （5）结果显示内容较多，显得比较乱，加-s选项将上面的内容进行简单显示。

    [root@rhel6 mysql]# mysqlbinlog -s mysqlbin.000002 

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;

    /*!40019 SET @@session.max_insert_delayed_threads=0*/;

    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;

    DELIMITER /*!*/;

    ROLLBACK/*!*/;

    use `test`/*!*/;

    SET TIMESTAMP=1479703695/*!*/;

    SET @@session.pseudo_thread_id=999999999/*!*/;

    SET @@session.foreign_key_checks=1, @@session.sql_auto_is_null=0, @@session.unique_checks=1, @@session.autocommit=1/*!*/;

    SET @@session.sql_mode=1075838976/*!*/;

    SET @@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/;

    /*!\C utf8 *//*!*/;

    SET @@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=8/*!*/;

    SET @@session.lc_time_names=0/*!*/;

    SET @@session.collation_database=DEFAULT/*!*/;

    DELETE FROM `test`.`tab_memory`

    /*!*/;

    SET TIMESTAMP=1479703743/*!*/;

    BEGIN

    /*!*/;

    SET TIMESTAMP=1479703743/*!*/;

    insert into emp (ename) values('bin_zx')

    /*!*/;

    COMMIT/*!*/;

    use `test1`/*!*/;

    SET TIMESTAMP=1479703748/*!*/;

    DELETE FROM `test1`.`tab_memory`

    /*!*/;

    SET TIMESTAMP=1479703756/*!*/;

    BEGIN

    /*!*/;

    SET TIMESTAMP=1479703756/*!*/;

    insert into emp (ename) values('bin_zx1')

    /*!*/;

    COMMIT/*!*/;

    SET TIMESTAMP=1479703769/*!*/;

    BEGIN

    /*!*/;

    SET TIMESTAMP=1479703769/*!*/;

    delete from emp where ename='bin_zx1'

    /*!*/;

    COMMIT/*!*/;

    DELIMITER ;

    # End of log file

    ROLLBACK /* added by mysqlbinlog */;

    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

 （6）加“--start-datetime --stop-datetime”显示指定时间内的日志

    [root@rhel6 mysql]# mysqlbinlog mysqlbin.000002  --start-datetime='2016/11/21 12:48:00' --stop-datetime='2016/11/21 12:49:00'

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;

    /*!40019 SET @@session.max_insert_delayed_threads=0*/;

    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;

    DELIMITER /*!*/;

    # at 4

    #161121 10:36:44 server id 1  end_log_pos 120 CRC32 0x7067a31f Start: binlog v 4, server v 5.6.34-log created 161121 10:36:44 at startup

    # Warning: this binlog is either in use or was not closed properly.

    ROLLBACK/*!*/;

    BINLOG '

    vF0yWA8BAAAAdAAAAHgAAAABAAQANS42LjM0LWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA

    AAAAAAAAAAAAAAAAAAC8XTJYEzgNAAgAEgAEBAQEEgAAXAAEGggAAAAICAgCAAAACgoKGRkAAR+j

    Z3A=

    '/*!*/;

    # at 120

    #161121 12:48:15 server id 1  end_log_pos 218 CRC32 0xb953ea67 Querythread_id=1exec_time=0error_code=0

    use `test`/*!*/;

    SET TIMESTAMP=1479703695/*!*/;

    SET @@session.pseudo_thread_id=1/*!*/;

    SET @@session.foreign_key_checks=1, @@session.sql_auto_is_null=0, @@session.unique_checks=1, @@session.autocommit=1/*!*/;

    SET @@session.sql_mode=1075838976/*!*/;

    SET @@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/;

    /*!\C utf8 *//*!*/;

    SET @@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=8/*!*/;

    SET @@session.lc_time_names=0/*!*/;

    SET @@session.collation_database=DEFAULT/*!*/;

    DELETE FROM `test`.`tab_memory`

    /*!*/;

    DELIMITER ;

    # End of log file

    ROLLBACK /* added by mysqlbinlog */;

    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

    开始日期和结束日期可以只写一个。如果只写开始日期，表示范围是开始日期到日志结束；如果只写结束日期，表示日志开始到指定的结束日期。

（7）--start-position=#和—stop-position=#和日期范围类似，不过可以更精确地表示范围

    [root@rhel6 mysql]# mysqlbinlog  mysqlbin.000001 mysqlbin.000002  --start-position=120 --stop-position=297

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;

    /*!40019 SET @@session.max_insert_delayed_threads=0*/;

    /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;

    DELIMITER /*!*/;

    # at 4

    #161120 22:45:37 server id 1  end_log_pos 120 CRC32 0x1ce9680d Start: binlog v 4, server v 5.6.34-log created 161120 22:45:37 at startup

    ROLLBACK/*!*/;

    BINLOG '

    EbcxWA8BAAAAdAAAAHgAAAAAAAQANS42LjM0LWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA

    AAAAAAAAAAAAAAAAAAARtzFYEzgNAAgAEgAEBAQEEgAAXAAEGggAAAAICAgCAAAACgoKGRkAAQ1o

    6Rw=

    '/*!*/;

    # at 120

    #161120 23:28:57 server id 1  end_log_pos 143 CRC32 0x69c1b9d0 Stop

    # at 4

    #161121 10:36:44 server id 1  end_log_pos 120 CRC32 0x7067a31f Start: binlog v 4, server v 5.6.34-log created 161121 10:36:44 at startup

    # Warning: this binlog is either in use or was not closed properly.

    ROLLBACK/*!*/;

    BINLOG '

    vF0yWA8BAAAAdAAAAHgAAAABAAQANS42LjM0LWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA

    AAAAAAAAAAAAAAAAAAC8XTJYEzgNAAgAEgAEBAQEEgAAXAAEGggAAAAICAgCAAAACgoKGRkAAR+j

    Z3A=

    '/*!*/;

    # at 120

    #161121 12:48:15 server id 1  end_log_pos 218 CRC32 0xb953ea67 Querythread_id=1exec_time=0error_code=0

    use `test`/*!*/;

    SET TIMESTAMP=1479703695/*!*/;

    SET @@session.pseudo_thread_id=1/*!*/;

    SET @@session.foreign_key_checks=1, @@session.sql_auto_is_null=0, @@session.unique_checks=1, @@session.autocommit=1/*!*/;

    SET @@session.sql_mode=1075838976/*!*/;

    SET @@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/;

    /*!\C utf8 *//*!*/;

    SET @@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=8/*!*/;

    SET @@session.lc_time_names=0/*!*/;

    SET @@session.collation_database=DEFAULT/*!*/;

    DELETE FROM `test`.`tab_memory`

    /*!*/;

    # at 218

    #161121 12:49:03 server id 1  end_log_pos 297 CRC32 0x6d922200 Querythread_id=1exec_time=0error_code=0

    SET TIMESTAMP=1479703743/*!*/;

    BEGIN

    /*!*/;

    DELIMITER ;

    # End of log file

    ROLLBACK /* added by mysqlbinlog */;

    /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;

    /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

4、删除binlog日志

  对于比较繁忙的OLTP（在线事务处理）系统，由于每天生成日志量大，这些日志如果长时间不清除，将会对磁盘空间带来很大的浪费。因此定期删除日志是DBA维护MySQL数据库的一个重要工作内容。下面介绍几种删除日志的常见方法。

  方法1：RESET MASTER;

    执行"RESET MASTER;"命令，该命令将删除所有BINLOG日志，新日志编号从"0000001"开始。

    [root@rhel6 mysql]# ls -l mysqlbin*

    -rw-rw---- 1 mysql mysql  143 Nov 20 23:28 mysqlbin.000001

    -rw-rw---- 1 mysql mysql 1019 Nov 21 15:12 mysqlbin.000002

    -rw-rw---- 1 mysql mysql  143 Nov 21 15:12 mysqlbin.000003

    -rw-rw---- 1 mysql mysql  143 Nov 21 15:46 mysqlbin.000004

    -rw-rw---- 1 mysql mysql  143 Nov 21 15:53 mysqlbin.000005

    -rw-rw---- 1 mysql mysql  143 Nov 21 16:08 mysqlbin.000006

    -rw-rw---- 1 mysql mysql  166 Nov 21 16:42 mysqlbin.000007

    -rw-rw---- 1 mysql mysql  368 Nov 21 18:11 mysqlbin.000008

    -rw-rw---- 1 mysql mysql  143 Nov 21 18:11 mysqlbin.000009

    -rw-rw---- 1 mysql mysql  120 Nov 21 21:11 mysqlbin.000010

    -rw-rw---- 1 mysql mysql  180 Nov 21 21:11 mysqlbin.index

    [root@rhel6 mysql]# mysql -uroot -p 

    Enter password: 

    Welcome to the MySQL monitor.  Commands end with ; or \g.

    Your MySQL connection id is 1

    Server version: 5.6.34-log MySQL Community Server (GPL)

    

    Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved.

    

    Oracle is a registered trademark of Oracle Corporation and/or its

    affiliates. Other names may be trademarks of their respective

    owners.

    

    Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

    

    mysql> reset master;

    Query OK, 0 rows affected (0.05 sec)

    

    mysql> exit

    Bye

    [root@rhel6 mysql]# ls -l mysqlbin*

    -rw-rw---- 1 mysql mysql 120 Nov 21 23:11 mysqlbin.000001

    -rw-rw---- 1 mysql mysql  18 Nov 21 23:11 mysqlbin.index

  方法二：PURGE MASTER LOGS TO 'mysql-bin.******'

    执行"PURGE MASTER LOGS TO 'mysql-bin.******'"命令，该命令将删除"******"编号之前的所的日志。

    [root@rhel6 mysql]# ls -l mysqlbin*

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:12 mysqlbin.000001

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:15 mysqlbin.000002

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:15 mysqlbin.000003

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:15 mysqlbin.000004

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:15 mysqlbin.000005

    -rw-rw---- 1 mysql mysql 120 Nov 21 23:15 mysqlbin.000006

    -rw-rw---- 1 mysql mysql 108 Nov 21 23:15 mysqlbin.index

    [root@rhel6 mysql]# mysql -uroot -p

    Enter password: 

    Welcome to the MySQL monitor.  Commands end with ; or \g.

    Your MySQL connection id is 5

    Server version: 5.6.34-log MySQL Community Server (GPL)

    

    Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved.

    

    Oracle is a registered trademark of Oracle Corporation and/or its

    affiliates. Other names may be trademarks of their respective

    owners.

    

    Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

    

    mysql> purge master logs to 'mysqlbin.000005';

    Query OK, 0 rows affected (0.03 sec)

    

    mysql> exit

    Bye

    [root@rhel6 mysql]# ls -l mysqlbin*

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:15 mysqlbin.000005

    -rw-rw---- 1 mysql mysql 120 Nov 21 23:15 mysqlbin.000006

    -rw-rw---- 1 mysql mysql  36 Nov 21 23:16 mysqlbin.index

  方法3：PURGE MASTER LOGS BEFORE 'yyyy-mm-dd hh24:mi:ss'

    执行"PURGE MASTER LOGS BEFORE 'yyyy-mm-dd hh24:mi:ss'"命令，该命令将删除日期为"yyyy-mm-dd hh24:mi:ss"之前产生的所有日志。

    [root@rhel6 mysql]# ls -l mysqlbin*

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:15 mysqlbin.000005

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:19 mysqlbin.000006

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:19 mysqlbin.000007

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:19 mysqlbin.000008

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:19 mysqlbin.000009

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:19 mysqlbin.000010

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:20 mysqlbin.000011

    -rw-rw---- 1 mysql mysql 120 Nov 21 23:20 mysqlbin.000012

    -rw-rw---- 1 mysql mysql 144 Nov 21 23:20 mysqlbin.index

    [root@rhel6 mysql]# mysql -uroot -p

    Enter password: 

    Welcome to the MySQL monitor.  Commands end with ; or \g.

    Your MySQL connection id is 8

    Server version: 5.6.34-log MySQL Community Server (GPL)

    

    Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved.

    

    Oracle is a registered trademark of Oracle Corporation and/or its

    affiliates. Other names may be trademarks of their respective

    owners.

    

    Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

    

    mysql> purge master logs before '2016-11-21 23:20:00';

    Query OK, 0 rows affected (0.04 sec)

    

    mysql> exit

    Bye

    [root@rhel6 mysql]# ls -l mysqlbin*

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:20 mysqlbin.000011

    -rw-rw---- 1 mysql mysql 120 Nov 21 23:20 mysqlbin.000012

    -rw-rw---- 1 mysql mysql  36 Nov 21 23:20 mysqlbin.index

  方法4：设置expire_logs_days

    设置--expire_logs_days=#，此参数的含义是设置日志的过期天数，过了指定的天数后日志将会被自动删除，这样将有利于减少DBA管理日志的工作量。

    [root@rhel6 mysql]# ls -l mysqlbin*

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:20 mysqlbin.000011

    -rw-rw---- 1 mysql mysql 143 Nov 21 23:30 mysqlbin.000012

    -rw-rw---- 1 mysql mysql 120 Nov 21 23:31 mysqlbin.000013

    -rw-rw---- 1 mysql mysql  54 Nov 21 23:31 mysqlbin.index

    在/etc/my.cnf的[mysqld]中添加expire_logs_day=2

    [root@rhel6 mysql]# grep expire_logs_day /etc/my.cnf

    expire_logs_day=2

    重启mysql

    [root@rhel6 mysql]# service mysql restart

    Shutting down MySQL..                                      [  OK  ]

    Starting MySQL.                                            [  OK  ]

    [root@rhel6 mysql]# date

    Mon Nov 21 23:32:13 CST 2016

    修改日期为1天后

    [root@rhel6 mysql]# date -s '20161122 23:00:00'

    Tue Nov 22 23:00:00 CST 2016

    [root@rhel6 mysql]# date

    Tue Nov 22 23:00:01 CST 2016

    使用flush logs触发日志文件更新，由于还不到2天，日志不会被删除

    [root@rhel6 mysql]# mysqladmin flush-log

    mysqladmin: connect to server at 'localhost' failed

    error: 'Access denied for user 'root'@'localhost' (using password: NO)'

    [root@rhel6 mysql]# mysqladmin -uroot -p flush-log

    Enter password: 

    [root@rhel6 mysql]# ls -lt mysqlbin*

    -rw-rw---- 1 mysql mysql  90 Nov 22 23:00 mysqlbin.index

    -rw-rw---- 1 mysql mysql 120 Nov 22 23:00 mysqlbin.000015

    -rw-rw---- 1 mysql mysql 166 Nov 22 23:00 mysqlbin.000014

    -rw-rw---- 1 mysql mysql 143 Nov 21 23:31 mysqlbin.000013

    -rw-rw---- 1 mysql mysql 143 Nov 21 23:30 mysqlbin.000012

    -rw-rw---- 1 mysql mysql 166 Nov 21 23:20 mysqlbin.000011

    修改日期为3天后，并再次执行flush logs

    [root@rhel6 mysql]# date -s '20161124 23:00:00'

    Thu Nov 24 23:00:00 CST 2016

    [root@rhel6 mysql]# mysqladmin -uroot -p flush-log

    Enter password: 

    两天前的日志(11月21日)被删除了

    [root@rhel6 mysql]# ls -lt mysqlbin*

    -rw-rw---- 1 mysql mysql  72 Nov 24 23:00 mysqlbin.index

    -rw-rw---- 1 mysql mysql 120 Nov 24 23:00 mysqlbin.000017

    -rw-rw---- 1 mysql mysql 166 Nov 24 23:00 mysqlbin.000016

    -rw-rw---- 1 mysql mysql 166 Nov 23 23:00 mysqlbin.000015

    -rw-rw---- 1 mysql mysql 166 Nov 22 23:00 mysqlbin.000014


  参考：《深入浅出MySQL》

  参考文档：http://www.myexception.cn/mysql/1779525.html





     本文转自hbxztc 51CTO博客，原文链接：http://blog.51cto.com/hbxztc/1874987，如需转载请自行联系原作者




文章标签：
云数据库 RDS MySQL 版
日志服务
关系型数据库
MySQL
监控
SQL
数据库
关键词：
mysql日志服务
云数据库 RDS MySQL 版日志
云数据库 RDS MySQL 版binlog
mysql binlog
日志服务binlog
相关实践学习
如何在云端创建MySQL数据库
开始实验后，系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心，利用清洁计算为万物互联的新世界提供源源不断的能源动力，目前开服的区域包括中国（华北、华东、华南、香港）、新加坡、美国（美东、美西）、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程，来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品：云服务器ECS 云服务器 ECS（Elastic Compute Service）是一种弹性可伸缩的计算服务，助您降低 IT 成本，提升运维效率，使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
技术小胖子
目录
相关文章
赵渝强老师
|
6天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
本文介绍了MySQL InnoDB存储引擎中的数据文件和重做日志文件。数据文件包括`.ibd`和`ibdata`文件，用于存放InnoDB数据和索引。重做日志文件（redo log）确保数据的可靠性和事务的持久性，其大小和路径可由相关参数配置。文章还提供了视频讲解和示例代码。
赵渝强老师
111 11
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
大数据文摘
|
10天前
|
存储 SQL 关系型数据库
mysql 的ReLog和BinLog区别
MySQL中的重做日志（Redo Log）和二进制日志（Binary Log）是两种重要的日志系统。重做日志主要用于保证事务的持久性和原子性，通过记录数据页的物理修改信息来恢复未提交的事务更改。二进制日志则记录了数据库的所有逻辑变化操作，用于数据的复制、恢复和审计。两者在写入时机、存储方式、配置参数和使用范围上有所不同，共同确保了数据库的稳定性和可靠性。
大数据文摘
27 2
技术自由圈/原疯狂创客圈
|
30天前
|
SQL 存储 关系型数据库
美团面试：binlog、redo log、undo log的底层原理是什么？它们分别实现ACID的哪个特性？
老架构师尼恩在其读者交流群中分享了关于 MySQL 中 redo log、undo log 和 binlog 的面试题及其答案。这些问题涵盖了事务的 ACID 特性、日志的一致性问题、SQL 语句的执行流程等。尼恩详细解释了这些日志的作用、所在架构层级、日志形式、缓存机制以及写文件方式等内容。他还提供了多个面试题的详细解答，帮助读者系统化地掌握这些知识点，提升面试表现。此外，尼恩还推荐了《尼恩Java面试宝典PDF》和其他技术圣经系列PDF，帮助读者进一步巩固知识，实现“offer自由”。
技术自由圈/原疯狂创客圈
31 1
美团面试：binlog、redo log、undo log的底层原理是什么？它们分别实现ACID的哪个特性？
绿水长流*z
|
1月前
|
存储 缓存 关系型数据库
MySQL事务日志-Redo Log工作原理分析
事务的隔离性和原子性分别通过锁和事务日志实现，而持久性则依赖于事务日志中的`Redo Log`。在MySQL中，`Redo Log`确保已提交事务的数据能持久保存，即使系统崩溃也能通过重做日志恢复数据。其工作原理是记录数据在内存中的更改，待事务提交时写入磁盘。此外，`Redo Log`采用简单的物理日志格式和高效的顺序IO，确保快速提交。通过不同的落盘策略，可在性能和安全性之间做出权衡。
绿水长流*z
1623 14
赵渝强老师
|
3天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL的撤销日志文件和错误日志文件
本文介绍了MySQL的物理存储结构，重点讲解了InnoDB存储引擎中的撤销日志文件（undo log）和错误日志文件。从MySQL 8.0开始，默认生成两个10MB的undo表空间文件，并支持动态扩容和收缩。错误日志文件记录了MySQL启动、运行、关闭过程中的问题，通过示例展示了如何查看和使用这些日志。
赵渝强老师
11 0
喜欢猪猪
|
25天前
|
存储 关系型数据库 MySQL
MySQL中的Redo Log、Undo Log和Binlog：深入解析
【10月更文挑战第21天】在数据库管理系统中，日志是保障数据一致性和完整性的关键机制。MySQL作为一种广泛使用的关系型数据库管理系统，提供了多种日志类型来满足不同的需求。本文将详细介绍MySQL中的Redo Log、Undo Log和Binlog，从背景、业务场景、功能、底层实现原理、使用措施等方面进行详细分析，并通过Java代码示例展示如何与这些日志进行交互。
喜欢猪猪
49 0
听风de歌
|
8天前
|
SQL 关系型数据库 MySQL
go语言数据库中mysql驱动安装
【11月更文挑战第2天】
听风de歌
22 4
路卿老师
|
6天前
|
SQL 关系型数据库 MySQL
12 PHP配置数据库MySQL
路老师分享了PHP操作MySQL数据库的方法，包括安装并连接MySQL服务器、选择数据库、执行SQL语句（如插入、更新、删除和查询），以及将结果集返回到数组。通过具体示例代码，详细介绍了每一步的操作流程，帮助读者快速入门PHP与MySQL的交互。
路卿老师
19 1
m1a6
|
1月前
|
存储 关系型数据库 MySQL
Mysql(4)—数据库索引
数据库索引是用于提高数据检索效率的数据结构，类似于书籍中的索引。它允许用户快速找到数据，而无需扫描整个表。MySQL中的索引可以显著提升查询速度，使数据库操作更加高效。索引的发展经历了从无索引、简单索引到B-树、哈希索引、位图索引、全文索引等多个阶段。
m1a6
61 3
Mysql(4)—数据库索引
土木林森
|
15天前
|
监控 关系型数据库 MySQL
数据库优化：MySQL索引策略与查询性能调优实战
【10月更文挑战第27天】本文深入探讨了MySQL的索引策略和查询性能调优技巧。通过介绍B-Tree索引、哈希索引和全文索引等不同类型，以及如何创建和维护索引，结合实战案例分析查询执行计划，帮助读者掌握提升查询性能的方法。定期优化索引和调整查询语句是提高数据库性能的关键。
土木林森
76 1

热门文章

最新文章

  • 1
    测试开启MySQL performance_schema后对性能的影响
  • 2
    RDS入门——Excel文件转存到RDS数据库实践
  • 3
    【MySQL用法】MySQL中大于，大于等于，小于，小于等于的转义写法
  • 4
    mysql连接池DataSource，DruidDataSource的理解及其使用
  • 5
    一文搞懂阿里云服务器部署MySQL并整合Spring Boot
  • 6
    应用MySQL MGR
  • 7
    干货分享 ｜ 揭秘下一代云数据库引擎MyBase for MySQL
  • 8
    Linux操作系统上的mysql安装
  • 9
    mysql中char与varchar的区别分析
  • 10
    MySQl复制---基于行的复制
  • 1
    DataWorks产品使用合集之在DataWorks中，如何通过PolarDB for MySQL来查看binlog日志
    125
  • 2
    Mysql 的binlog日志的原理【4月更文挑战第1天】
    140
  • 3
    Mysql 的binlog日志的优缺点
    241
  • 4
    mysql的binlog恢复数据
    117
  • 5
    启动多个jar包来监听同一个数据库的binlog
    72
  • 6
    Flink CDC产品常见问题之binlog 过期如何解决
    220
  • 7
    binlog,undolog,redolog
    96
  • 8
    binlog 日志的三种格式
    233
  • 9
    浅谈MySQL Binlog
    79
  • 10
    Flink cdc报错问题之消费binlog报错如何解决
    235

    • 相关课程

    更多
  • MySQL企业常见架构与调优经验分享
  • 云数据库MySQL版快速上手教程
  • 阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
  • MySQL实战进阶
  • 数据库及SQL/MySQL基础
  • 云数据库MySQL快速入门

    • 相关电子书

    更多
  • One Box： 解读事务与分析一体化数据库 HybridDB for MySQL
  • One Box：解读事务与分析一体化数据库HybridDB for MySQL
  • 如何支撑HTAP场景-HybridDB for MySQL系统架构和技术演进

    • 相关实验场景

    更多
  • 通过日志服务实现云资源OSS的安全审计
  • 日志服务之使用Nginx模式采集日志
  • MySQL引擎及架构优化
  • 基于EBS部署高性能的MySQL服务
  • 5分钟上手Flink MySQL连接器
  • 云端MySQL的安装及应用

    • 推荐镜像

    更多
  • mysql
  • mariadb
  • postgresql
    • 下一篇
    阿里云OSS设置跨域访问