MySQL主从复制学习

简介: 概述之前学过MySQL主备的简单搭建,内容很少,这次就从官方手册的介绍系统的学习一下MySQL主备复制的相关知识MySQL复制的优点横向扩展解决方案:在多个从库之间分配负载以提高性能。在此环境中,所有写入和更新都必须在主服务器上进行。

概述

之前学过MySQL主备的简单搭建,内容很少,这次就从官方手册的介绍系统的学习一下MySQL主备复制的相关知识

MySQL复制的优点

  • 横向扩展解决方案:在多个从库之间分配负载以提高性能。在此环境中,所有写入和更新都必须在主服务器上进行。但是,读取操作可以在一个或多个从站上进行。该模型可以提高写入性能(因为主设备专用于写操作),同时显著提高了越来越多的从库的读取速度。
  • 数据安全性 - 因为数据被复制到从库,并且从库可以暂停复制过程,所以可以在从站上运行备份服务而不会破坏相应的主数据。
  • 分析 - 可以在主服务器上创建实时数据,而信息的分析可以在从服务器上进行,而不会影响主服务器的性能。
  • 远程数据分发 - 您可以使用复制为远程站点创建数据的本地副本,而无需永久访问主服务器。

MySQL复制的类型

  • 异步复制:主库不会等待从库的执行情况,是默认的复制模式
  • 半同步复制:使用半同步复制,在返回执行事务的会话之前对主块执行提交,直到至少一个从服务器确认已接收并记录事务的事件为止;
  • MySQL 5.7 还支持延迟复制,使得从属服务器故意滞后于主服务器至少一段指定的时间;

MySQL实现类型格式
有两种核心类型的复制格式:基于语句的复制(SBR),它复制整个SQL语句,以及基于行的复制(RBR),它仅复制已更改的行。

主备通用设置

主库上的设置

开启二进制日志(bin_log)
server-id=1

如果没有设置server_id(或者默认其为0),则住服务器拒绝来自从服务器的任何连接

备库上的设置

server-id=2  设置与主库不同的号,此ID用于标识组内的各个服务器,并且必须是介于1和(2 32)-1 之间的正整数

若是server-id没有设置或是0,则从库会拒绝主库连接

如果这个备库只是一个备库的话,则它无需开启 bin_log 就可以实现功能,但是bin_log的可以让备库进行数据备份和崩溃恢复,还可以作为其他机器的备库。所以,强烈建议开启备库的bin_log。

创建复制用户

每个从库使用MySQL的用户名和密码连接到主库,因此必须使用用户账户,该账户必须被赋予 replication slave 权限

如下此用户,就有复制权限

MySQL [nba]> select user,Repl_slave_priv from mysql.user where user = 'replicate';
+-----------+-----------------+
| user | Repl_slave_priv |
+-----------+-----------------+
| replicate | Y |
+-----------+-----------------+
1 row in set (0.00 sec)

创建用户的过程为

MySQL [nba]> select user,Repl_slave_priv from mysql.user where user = 'stephen';
+---------+-----------------+
| user | Repl_slave_priv |
+---------+-----------------+
| stephen | N |
+---------+-----------------+
1 row in set (0.00 sec)

MySQL [nba]> grant replication slave on *.* to 'stephen'@'%';
Query OK, 0 rows affected (0.00 sec)

MySQL [nba]> select user,Repl_slave_priv from mysql.user where user = 'stephen';
+---------+-----------------+
| user | Repl_slave_priv |
+---------+-----------------+
| stephen | Y |
+---------+-----------------+
1 row in set (0.00 sec)

备库上的数据

要搭建备库,首先备库上需要有现有主库的数据快照,一般使用下面两种方法实现

使用mysqldump

使用mysql自带的mysqldump命令可以将整库备份出来

mysqldump -S /mysqldata/mysql.sock -uroot -pmysql --all-databases --master-data > dbdump.db

除了这个备份,还需要获取主二进制日志坐标,过程如下:

MySQL [nba]> FLUSH TABLES WITH READ LOCK;
Query OK, 0 rows affected (0.01 sec)

MySQL [nba]> show master status\G;
*************************** 1. row ***************************
             File: mysql-bin.000027
         Position: 154
     Binlog_Do_DB: test
 Binlog_Ignore_DB: 
Executed_Gtid_Set: 
1 row in set (0.00 sec)

使用 XtraBackup全备

安装了此功能之后,可以使用这个方法进行数据传输

innobackupex --defaults-file=/etc/my.cnf --user=root --password=mysql --no-timestamp /databackup

在从库上新建备份目录,并把主库的全备传输到从库上

scp -r /databackup/* 192.168.56.11:/databackup

应用一下全备

innobackupex --apply-log /databackup/

在从库上恢复全备

innobackupex --copy-back /databackup

此方法的日志位置,可以在备份目录中的xtrabackup_info文件中查看到

binlog_pos = filename 'mysql-bin.000024', position '154'

搭建主从

建立备库连接

进行连接配置

CHANGE MASTER TO 
 MASTER_HOST='192.168.56.10',
 MASTER_USER='replicate',
 MASTER_PASSWORD='replicate',
 MASTER_PORT=3306,
 MASTER_LOG_FILE='mysql-bin.000024', 
 MASTER_LOG_POS=468,
 MASTER_CONNECT_RETRY=10;

接下来,如果是使用mysqldump

使用 --skip-slave-start 启动备库
导入转储文件:

shell>mysql < fulldb.dump
3. 启动从库线程
mysql>start slave;

如果是使用Xtrabackup全量备份
则在开启数据库后直接开启从库线程即可

半同步复制

概述

MySQL5.7默认的复制是异步复制,主将事物操作写到二进制文件,但是不知道从库是否或何时去应用这些日志,如果主库崩溃,则会有事物未提交到备库,就会导致数据库丢失。为了解决这个问题,我们可以使用半同步复制。

半同步复制有以下性质:
若主库是半同步复制,则在主上执行事物提交的线程等待,直到至少一个半同步设备确认已收到事物的所有内容,或者直到发生超时,这也是半同步复制的'半'字的原因。若是全同步复制,则就需要全部从库收到事务的所有内容

从库只有将事物写到日志直到刷新磁盘后,从库才会确认收到全部事物

安装插件

在使用半同步之前,需要先在主从上分别安装插件
主库上安装插件

MySQL [(none)]> install plugin rpl_semi_sync_master soname 'semisync_master.so';
Query OK, 0 rows affected (0.04 sec)

MySQL [(none)]> set global rpl_semi_sync_master_enabled=on;
Query OK, 0 rows affected (0.00 sec)

查看是否安装成功

MySQL [(none)]> show variables like '%semi%';
+-------------------------------------------+------------+
| Variable_name | Value |
+-------------------------------------------+------------+
| rpl_semi_sync_master_enabled | ON |            #设置为on表示开启了半同步功能
| rpl_semi_sync_master_timeout | 10000 |        #单位是毫秒,表示如果主库等待从库回复消息的时间超过该值,就自动切换为异步复制模式
| rpl_semi_sync_master_trace_level | 32 |        #它控制主库接收多少个从库写事物成功反馈,才返回成功给客户端
| rpl_semi_sync_master_wait_for_slave_count | 1 | #
| rpl_semi_sync_master_wait_no_slave | ON |
| rpl_semi_sync_master_wait_point | AFTER_SYNC |  # 默认值是AFTER_SYNC,含义是主库将每个事物写入binlog,并传递给从库,刷新到中继日志,主库开始等待从库的反馈,接收到从库的回复之后,再提交事物并且返回“commit ok”结果给客户端
+-------------------------------------------+------------+
6 rows in set (0.01 sec)

从库上安装插件

MySQL [(none)]> install plugin rpl_semi_sync_slave soname 'semisync_slave.so';
Query OK, 0 rows affected (0.01 sec)

MySQL [(none)]> set global rpl_semi_sync_slave_enabled=on;
Query OK, 0 rows affected (0.00 sec)

参数完成之后,启动从库线程

MySQL [(none)]> start slave io_thread;
Query OK, 0 rows affected (0.00 sec)

延迟复制

概述

MySQL5.7 支持延迟复制,使得从库可以刻意滞后主库至少一段指定的时间,默认延迟是0秒,使用MASTER_DELAY 选项CHANGE_MASTER_TO 使用

MySQL [nba]> CHANGE MASTER TO MASTER_DELAY = 20;
Query OK, 0 rows affected (0.09 sec)

延迟复制的意义:

  • 防止用户在主库上出错,DBA可以将延迟的从库回滚到误操作前的时间
  • 测试延迟时系统的行为方式
  • 检查数据库很久之前的样子,而不必重新加载备份

信息显示

在show slave statusG 上有几个字段显示了延迟复制的信息

  • SQL_Delay:默认为0,显示与主库延迟的秒数
  • SQL_Remaining_Delay:当 Slave_SQL_Running_State是Waiting until MASTER_DELAY seconds after master executed event,则此字段包含一个整数指示左延迟的秒数。在其他时候,这个参数是NULL
  • Slave_SQL_Running_State:当前的复制的状态,一般的同步完成是Slave has read all relay log; waiting for more updates
相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。 &nbsp; 相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情:&nbsp;https://www.aliyun.com/product/rds/mysql&nbsp;
相关文章
|
NoSQL 算法 Redis
【Docker】(3)学习Docker中 镜像与容器数据卷、映射关系!手把手带你安装 MySql主从同步 和 Redis三主三从集群!并且进行主从切换与扩容操作,还有分析 哈希分区 等知识点!
Union文件系统(UnionFS)是一种**分层、轻量级并且高性能的文件系统**,它支持对文件系统的修改作为一次提交来一层层的叠加,同时可以将不同目录挂载到同一个虚拟文件系统下(unite several directories into a single virtual filesystem) Union 文件系统是 Docker 镜像的基础。 镜像可以通过分层来进行继承,基于基础镜像(没有父镜像),可以制作各种具体的应用镜像。
1084 6
|
SQL 关系型数据库 MySQL
mysql主从复制概述和配置
【10月更文挑战第22天】MySQL 主从复制是一种将主服务器的数据复制到一个或多个从服务器的技术,实现读写分离,提高系统性能和可用性。主服务器记录变更日志,从服务器通过 I/O 和 SQL 线程读取并应用这些变更。适用于读写分离、数据备份和恢复、数据分析等场景。配置步骤包括修改配置文件、创建复制用户、配置从服务器连接主服务器并启动复制进程。
604 1
|
SQL 关系型数据库 MySQL
Mysql基础学习day01
本课程为MySQL基础学习第一天内容,涵盖MySQL概述、安装、SQL简介及其分类(DDL、DML、DQL、DCL)、数据库操作(查询、创建、使用、删除)及表操作(创建、约束、数据类型)。适合初学者入门学习数据库基本概念和操作方法。
364 6
|
关系型数据库 MySQL 数据管理
Mysql基础学习day03-作业
本内容包含数据库建表语句及多表查询示例,涵盖内连接、外连接、子查询及聚合统计,适用于员工与部门数据管理场景。
244 1
|
SQL 关系型数据库 MySQL
Mysql基础学习day02-作业
本教程介绍了数据库表的创建与管理操作,包括创建员工表、插入测试数据、删除记录、更新数据以及多种查询操作,涵盖了SQL语句的基本使用方法,适合初学者学习数据库操作基础。
259 0
|
SQL 关系型数据库 MySQL
Mysql基础学习day03
本课程为MySQL基础学习第三天内容,主要讲解多表关系与多表查询。内容涵盖物理外键与逻辑外键的区别、一对多、一对一及多对多关系的实现方式,以及内连接、外连接、子查询等多表查询方法,并通过具体案例演示SQL语句的编写与应用。
320 0
|
SQL 关系型数据库 MySQL
Mysql基础学习day01-作业
本教程包含三个数据库表的创建练习:学生表(student)要求具备主键、自增长、非空、默认值及唯一约束;课程表(course)定义主键、非空唯一字段及数值精度限制;员工表(employee)包含自增主键、非空字段、默认值、唯一电话号及日期时间类型字段。每个表的结构设计均附有详细SQL代码示例。
256 0
|
SQL 关系型数据库 MySQL
Mysql基础学习day02
本课程为MySQL基础学习第二天内容,涵盖数据定义语言(DDL)的表查询、修改与删除操作,以及数据操作语言(DML)的增删改查功能。通过具体SQL语句与实例演示,帮助学习者掌握MySQL表结构操作及数据管理技巧。
307 0
|
SQL 存储 关系型数据库
【MySQL基础篇】全面学习总结SQL语法、DataGrip安装教程
本文详细介绍了MySQL中的SQL语法,包括数据定义(DDL)、数据操作(DML)、数据查询(DQL)和数据控制(DCL)四个主要部分。内容涵盖了创建、修改和删除数据库、表以及表字段的操作,以及通过图形化工具DataGrip进行数据库管理和查询。此外,还讲解了数据的增、删、改、查操作,以及查询语句的条件、聚合函数、分组、排序和分页等知识点。
1650 57
【MySQL基础篇】全面学习总结SQL语法、DataGrip安装教程
|
SQL 网络协议 关系型数据库
MySQL 主从复制
主从复制是 MySQL 实现数据冗余和高可用性的关键技术。主库通过 binlog 记录操作,从库异步获取并回放这些日志,确保数据一致性。搭建主从复制需满足:多个数据库实例、主库开启 binlog、不同 server_id、创建复制用户、从库恢复主库数据、配置复制信息并开启复制线程。通过 `change master to` 和 `start slave` 命令启动复制,使用 `show slave status` 检查同步状态。常见问题包括 IO 和 SQL 线程故障,可通过重置和重新配置解决。延时原因涉及主库写入延迟、DUMP 线程性能及从库 SQL 线程串行执行等,需优化配置或启用并行处理
473 40

推荐镜像

更多