MySQL主从复制之多主多从部署流程—2023.04

本文涉及的产品
云数据库 RDS MySQL,集群版 2核4GB 100GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
日志服务 SLS,月写入数据量 50GB 1个月
简介: MySQL主从复制之多主多从部署流程—2023.04

一、多主多从实现架构图


这里是2主2从,下图基本例举出来的实现的逻辑,A、C为主,B、D为从,其中B为A的从,D为C的从,且A、C互为主从关系。才能实现在任意一台主节点上写入数据,另一台主节点以及所有从节点数据跟着同步。

ae2bb334d1cf4c7299d66d17301b6ade.png


二、准备工作


首先准备好4台虚拟机,且都要安装好MySQL,版本必须要一致。我这里的MySQL是5.7版本,主节点是192.168.2.31与192.168.2.74,另外两台为从节点。

name ip
master1 192.168.2.31
slave1 192.168.2.32
master2 192.168.2.74
slave2 192.168.2.75


三、MySQL多主多从搭建流程


1、修改2个主节点配置文件

由于2个master要配置成互为主从的效果,所以需要修改2个master节点的配置文件,有一丢丢的差别,注意看!

  • master1上配置/etc/my.cnf文件
[mysqld]
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
# Disabling symbolic-links is recommended to prevent assorted security risks
symbolic-links=0
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid
##########################################################################################
# MySQL 服务的唯一编号,每个 MySQL 服务的 id 需唯一
server-id = 1
# 服务端口号,默认为 3306
port = 3306
#启动二进制日志系统
log-bin=mysql-bin
#设置logbin格式
binlog_format=STATEMENT
#二进制需要同步的数据库名,如果需要同步多个库,例如要再同步westos库,再添加一行“binlog-do-db=westos”,以此类推
binlog-do-db=testdb
#禁止同步 mysql 数据库
binlog-ignore-db=mysql
binlog-ignore-db=information_schema
binlog-ignore-db=sys
binlog-ignore-db=performance_schema
# 是否对sql语句大小写敏感,默认值为0,1表示不敏感
lower_case_table_names=1    #1代表关闭大小写区别 0代表开启大小写
#存储引擎  lnnoDB
default_storage_engine=InnoDB
# 配置默认编码为utf8
character_set_server=utf8
init_connect='SET NAMES utf8'
# 在作为从数据库的时候,有写入操作也要更新二进制日志文件
log-slave-updates
#表示自增长字段每次递增的幅度,指自增字段的起始值,其默认值是1,取值范围是1 .. 65535
auto-increment-increment=2
# 表示自增长初始值
auto-increment-offset=1


说明:

log-slave-updates参数必须要配置,当一台主机即为主又为从时,该参数就要写到配置文件中。目的是让该节点在作为从数据库的时候,有写入操作也要更新二进制日志文件中

auto-increment-offset=1

auto-increment-increment=2

这两个参数分别表示自增长的初始值和自增长的递增幅度

master2上配置/etc/my.cnf文件

master2的配置文件与master1略微有些差异,主要是server-idauto-increment-increment,另外还要再master中增加一行relay-log=mysql-relay

  • 表示启用中继日志,如果这里不启用中继日志,后面在执行时会报错ERROR 1872 (HY000): Slave failed to initialize relay log info structure from the repository
[mysqld]
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
# Disabling symbolic-links is recommended to prevent assorted security risks
symbolic-links=0
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid
###########################################################
# MySQL 服务的唯一编号,每个 MySQL 服务的 id 需唯一
server-id = 2
# 服务端口号,默认为 3306
port = 3306
#启动二进制日志系统
log-bin=mysql-bin
#设置logbin格式
binlog_format=STATEMENT
#二进制需要同步的数据库名,如果需要同步多个库,例如要再同步westos库,再添加一行“binlog-do-db=westos”,以此类推
binlog-do-db=testdb
#禁止同步 mysql 数据库
binlog-ignore-db=mysql
#binlog-ignore-db=information_schema
#binlog-ignore-db=sys
#binlog-ignore-db=performance_schema
# 是否对sql语句大小写敏感,默认值为0,1表示不敏感
lower_case_table_names=1    #1代表关闭大小写区别 0代表开启大小写
#存储引擎  lnnoDB
default_storage_engine=InnoDB
# 配置默认编码为utf8
character_set_server=utf8
init_connect='SET NAMES utf8'
#启用中继日志
relay-log=mysql-relay
# 在作为从数据库的时候,有写入操作也要更新二进制日志文件
log-slave-updates=1
#表示自增长字段每次递增的量,指自增字段的起始值,其默认值是1,取值范围是1 .. 65535
auto-increment-increment=2
# 表示自增长字段从哪个数开始,指字段一次递增多少,他的取值范围是1 .. 65535
auto-increment-offset=2


2、修改2个从节点配置文件

两个从节点的配置文件内容除了server-id不同,其余都是一致的,如下:

  • slave1配置内容
[mysqld]
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
# Disabling symbolic-links is recommended to prevent assorted security risks
symbolic-links=0
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid
server-id=32
#启用中继日志
relay-log=mysql-relay
# 服务端口号,默认为 3306
port = 3306
# 是否对sql语句大小写敏感,默认值为0,1表示不敏感
lower_case_table_names=1    #1代表关闭大小写区别 0代表开启大小写
default_storage_engine=InnoDB   #存储引擎  lnnoDB
# # 配置默认编码为utf8
character_set_server=utf8
init_connect='SET NAMES utf8'


  • slave2配置内容
[mysqld]
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
# Disabling symbolic-links is recommended to prevent assorted security risks
symbolic-links=0
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid
server-id=75
#启用中继日志
relay-log=mysql-relay
# 服务端口号,默认为 3306
port = 3306
# 是否对sql语句大小写敏感,默认值为0,1表示不敏感
lower_case_table_names=1    #1代表关闭大小写区别 0代表开启大小写
default_storage_engine=InnoDB   #存储引擎  lnnoDB
# # 配置默认编码为utf8
character_set_server=utf8
init_connect='SET NAMES utf8'


3、2个主节点相互复制

  • master1上的MySQL中执行:
    进入MySQL:mysql -uroot -pQWErty@123.
# 创建主从同步账号:
grant replication client,replication slave on *.* to 'test1'@'192.168.2.%' identified by 'QWErty@123.';
# 刷新
flush privileges;
# 查看用户是否创建成功
select user from mysql.user where user = '刚才创建的用户';    # mysql.user  表示mysql数据库下的user表
#查看master状态
show master status;
```master status;


file:binlog日志的名字

Position :接入点 (从机从接入点开始复制)

Binlog_Do_DB :需要复制的数据库

Binlog_Ignore_DB :不需要复制的数据库

5d293c26a65c4e028307f767a3220388.png

  • master2上的MySQL中执行:
    进入MySQL:mysql -uroot -pQWErty@123.
# 创建主从同步账号:
grant replication client,replication slave on *.* to 'test1'@'192.168.2.%' identified by 'QWErty@123.';
# 刷新
flush privileges;
# 查看用户是否创建成功
select user from mysql.user where user = '刚才创建的用户';    # mysql.user  表示mysql数据库下的user表
#查看master状态
show master status;


07b033afd3bd45bd96cf36e3aecc74c2.png

下面将master1与master2相互复制

  • master1上执行:
change master to master_host='192.168.2.74', 
master_user='test1', 
master_password='QWErty@123.', 
master_port=3306, 
master_log_file='mysql-bin.000002', 
master_log_pos=154;


注意:这里的信息都是主节点的信息。其中,

master_log_file是在192.168.2.74主机上使用show master status查看的File名称

master_log_pos是在192.168.2.74主机上使用show master status查看的Position

# 启动从服务器复制功能
start slave;
# 查看从服务器状态
show slave status\G;

1fc8b43524944ebab6d7469819eba782.png

  • master2上执行:
    在master2上复制master1的内容
change master to master_host='192.168.2.31', 
master_user='test1', 
master_password='QWErty@123.', 
master_port=3306, 
master_log_file='mysql-bin.000002', 
master_log_pos=154;


# 启动从服务器复制功能
start slave;
# 查看从服务器状态
show slave status\G;

a33a00dde77a4c848e4c15ea42688aae.png

master1与master2都显示为2个绿色的Yes,表示两台主机复制成功


4、2个从节点分别复制主节点

  • slave1操作:
    slave1IP:192.168.2.32,对应主节点:192.168.2.31
change master to master_host='192.168.2.31', 
master_user='test1', 
master_password='QWErty@123.', 
master_port=3306, 
master_log_file='mysql-bin.000002', 
master_log_pos=154;
# 启动从服务器复制功能
start slave;
# 查看从服务器状态
show slave status\G;


  • slave2操作:
    slave2IP:192.168.2.75,对应主节点:192.168.2.74
change master to master_host='192.168.2.74', 
master_user='test1', 
master_password='QWErty@123.', 
master_port=3306, 
master_log_file='mysql-bin.000002', 
master_log_pos=154;
# 启动从服务器复制功能
start slave;
# 查看从服务器状态
show slave status\G;


两台从节点都显示了2个绿色的Yes说明复制成功


注意:

change master to master_host='192.168.2.XX', 
master_user='test1', 
master_password='QWErty@123.', 
master_port=3306, 
master_log_file='mysql-bin.000002', 
master_log_pos=154;


如果执行下面这段命令,报错了,需要去对应的主节点查看master_log_filemaster_log_pos是否发生了变化

然后停止slave的复制:stop slave;

在执行上面的change master to……这一串命令

然后开启复制:start slave;

再看slave状态show slave status\G;


5、测试

在master1上创建数据库testdb,因为我们配置文件里配置的同步数据库就是testdb,在testdb中创建表bsm,并写入内容;

mysql> create database testdb;
mysql> use testdb;
mysql> create table bsm(id int(10),where varchar(20));
mysql> insert bsm values(1,2.74);


在master2、slave1、slave2节点查看,可以看到masetr1增加的数据;

546510c6c2d743d89b5bd48a1648e0b2.png

6fac470002b3450890e08f29140f0699.png

cfdaf970002440c298372ff982fec767.png

同样的,在master2上往表里写入数据,其他节点也可以同步数据。

6859961bfecb40dbb92def02430336d2.png

da462d6f0817434bb8c841ce5f20fb0c.png

记录:

Slave_IO_Running: Connecting

  1. 问题原因:
    (1)网络不通
    (2)防火墙端口未开放
    (3)mysql账户密码错误

(4)mysql主从机配置文件写错

(5)配置从机连接语法错误

(6)主机未开放账户连接权限

2、错误:MySQL error code 1872 (ER_SLAVE_RLI_INIT_REPOSITORY): Slave failed to initialize relay log info structure from the repository

执行完change master to……,后start slave爆出这个错误。

是找不到中继日志的仓库,需要检查变量relay log的位置是否设置

mysql> show variables like 'relay%';

如果没有配置,在配置文件中加上;如果配置了,执行reset slave,之后再change master to……,最后start slave

3、在执行change master to……一定要看master节点的status,查看file的名称和postion的数字书否变化,即使变更。


参考文章:

https://www.jb51.net/article/213992.htm

https://www.bloghome.com.cn/post/mysqlshuang-zhu-zhu-zhu-jia-gou-fang-an.html

https://blog.csdn.net/qq_42094345/article/details/108191985

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
20天前
|
SQL 运维 关系型数据库
MySQL数据库运维第一篇(日志与主从复制)
MySQL数据库运维第一篇(日志与主从复制)
|
21天前
|
存储 关系型数据库 MySQL
Java大佬必知必会——MySQL主从复制
如果你现在有两台MySQL,一台版本是03年的MySQL5.0,另一台是18年的MySQL8.0.11。新版本可以作为老版本的从服务器,但反过来是不可行的。如果二进制文件包含了已存在的数据,就会造成数据重复了。如果从服务器复制该二进制文件后的数据库状态是混乱无序的,那整个复制的过程就没有意义了。如果主、从服务器存储数据的顺序不一样,就会导致每次执行删除的数据都是不同的。,老版本可能无法解析新版本的新特性,甚至复制的文件格式都差异太大。MySQL从库只会复制它本身缺失的最新数据,利用二进制文件里的。
Java大佬必知必会——MySQL主从复制
|
3天前
|
NoSQL Java Redis
软件开发常见流程之宝塔初始化安装环境配置,Lam前面不选,直接跳商城,在宝塔内点击软件商城,安Mysql5.7,安java项目管理器,安Ngnix最新版,安Redis
软件开发常见流程之宝塔初始化安装环境配置,Lam前面不选,直接跳商城,在宝塔内点击软件商城,安Mysql5.7,安java项目管理器,安Ngnix最新版,安Redis
|
14天前
|
SQL 关系型数据库 MySQL
MySQL高可用架构设计:从主从复制到分布式集群
MySQL高可用性涉及主从复制、半同步复制和Group/InnoDB Cluster。主从复制通过二进制日志同步数据,保证故障时可切换。半同步复制确保事务在至少一个从服务器确认后才提交。Group Replication是多主复制,支持自动故障切换。InnoDB Cluster是8.0的集成解决方案,简化集群管理。使用这些技术能提升数据库的稳定性和可靠性。
209 2
|
17天前
|
关系型数据库 MySQL Linux
Linux下怎么快速部署MySQL服务,并使用
Linux下怎么快速部署MySQL服务,并使用
31 5
|
20天前
|
负载均衡 关系型数据库 MySQL
MySQL 主主复制与主从复制对比
MySQL的主主复制和主从复制是两种常见的数据库复制配置方式,各有优缺点和适用场景。以下是对这两种复制方式的详细对比: ### 主从复制 (Master-Slave Replication) **特点:** 1. **单向复制**:数据从主服务器复制到一个或多个从服务器。从服务器只能从主服务器接收数据更新,不能向主服务器发送数据。 2. **读写分离**:主服务器处理写操作(INSERT、UPDATE、DELETE),从服务器处理读操作(SELECT),可以分担读负载,提高系统的整体性能。 3. **数据一致性**:数据在主服务器上是最新的,从服务器上可能会有一定的延迟。 **优点:**
|
24天前
|
关系型数据库 MySQL Docker
docker部署mysql
docker部署mysql
34 1
|
3天前
|
关系型数据库 MySQL Linux
Linux部署实战前言,MySQL在CentOS安装【单机软件】,MySQL的安装需要root权限,yum install mysql,systemctl enable mysqld开机自启的意思
Linux部署实战前言,MySQL在CentOS安装【单机软件】,MySQL的安装需要root权限,yum install mysql,systemctl enable mysqld开机自启的意思
|
11天前
|
关系型数据库 MySQL Nacos
使用 Docker 部署 Nacos 并配置 MySQL 数据源
使用 Docker 部署 Nacos 并配置 MySQL 数据源
31 0
|
11天前
|
关系型数据库 应用服务中间件 nginx
Docker + node(koa) + nginx + mysql 线上环境部署
Docker + node(koa) + nginx + mysql 线上环境部署