MySQL主从复制详细介绍

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
日志服务 SLS,月写入数据量 50GB 1个月
简介: MySQL主从复制详细介绍

一、主从复制的目的


MySQL内建的复制功能是构建基于MySQL的大规模、高性能应用的基础,复制功能的目的是构建高性能的应用,同时也是高可用性、可扩展性、灾难恢复、备份以及数据仓库等工作的基础。比较常见的用途有以下几种:


数据分布:备份特定数据库


负载均衡:读写分离


高可用性和故障切换:从库的存在可以缩短宕机时间


MySQL升级测试:使用一个更高版本的MySQL作为备库,保证在升级全部实例前,查询能够在备库按照预期进行


二、主从复制的原理和步骤


简单的说就是master将数据库的改变写入binary log二进制日志,这个日志会记录下所有修改了数据库的SQL语句(insert,update,delete,grant等),slave同步这些二进制日志,并根据这些二进制日志进行数据操作,其实就是把主服务器上的binary log复制到从服务器上执行一遍,这样从服务器上的数据就和主服务器上的数据相同了。


整体来说,主从复制有以下步骤:


1.主节点必须启用二进制日志,记录任何修改数据库数据的事件。


2.从节点开启一个线程I/O Thread把自己扮演成mysql的客户端,通过mysql协议,请求主节点的二进制日志文件中的事件


3.主节点启动一个线程(dump Thread),检查自己二进制日志中的事件,跟对方请求的位置对比,如果不带请求位置参数,则主节点就会从第一个日志文件中的第一个事件一个一个发送给从节点。


4.从节点接收到主节点发送过来的数据把它放置到中继日志(Relay log)文件中。并记录该次请求到主节点的具哪个二进制日志文件的哪个位置。


5.从节点启动另外一个线程(sql Thread ),把replaylog中的事件读取出来,并在本地再执行一次。


其原理图如下:

image.png

三、复制中线程的作用


从节点:


I/O Thread:从Master请求二进制日志事件,并保存于中继日志中。


Sql Thread:从中继日志中读取日志事件,在本地完成更新。


主节点:


Dump Thread:为每个Slave的I/O Thread启动一个dump线程,用于向从节点发送二进制事件。

如果从节点需要作为其他节点的主节点时,是需要开启二进制日志文件的。这种情况叫做级联复制。如果只是作为从节点,则不需要创建二进制文件。


四、主从复制配置过程


主节点:


1.启用二进制日志。


2.为当前节点设置一个全局唯一的server_id。


3.创建有复制权限的用户账号 replication slave。


从节点:


1.启动中继日志。


2.为当前节点设置一个全局唯一的server_id。


3.使用有复制权限的用户账号连接至主节点,并启动复制线程。


4.1 测试环境

image.png

4.2 主节点配置过程

4.2.1 编辑主节点配置文件

在Centos中打开my.cnf文档:

image.png

· 添加:log-bin = mysql-bin(开启二进制日志)


· 添加:server-id =4(设置服务器id,主节点和从节点的id需要设为不同)


· 添加:binlog-do-db=DBAs(确定需要同步的数据库)


· 添加:binlog-ignore-db=mysql(此处可以实际需求添加需要忽略的数据库)


· 添加:expire_logs_days=7(自动清理 7 天前的log文件,可根据需要修改)

image.png

4.2.2 启动主节点mysql服务,并连接mysql

正常情况下,mysql服务启动命令为:

为了更方便的启动mysql服务,为mysql创建软连接

此时,启动命令变为:

image.png

4.3.4 在从节点配置访问主节点的参数信息

添加 主节点主机,访问主节点的用户名及密码,主节点二进制文件信息。

命令:

此处的master_log_file和master_log_pos需要和主节点状态保持一致。

image.png

4.3.5 查看从节点的状态信息

因为没有启动 从节点的复制线程,I/O线程和SQL 线程都为NO.

image.png

使用start slave命令启动从节点的复制线程,再利用show slave status命令查看当前的从节点状态。

image.png

4.4 功能测试

查看主节点的状态

image.png

2)在从节点查找二进制日志信息,并查看mydb数据库是否复制成功

image.png

最后在从节点上查看数据是否已经同步,命令:

image.png

经过验证,证明主从复制同步成功!!!


五、错误排查总结


5.1 Connecting错误

操作过程中有时候出现如下所述错误:

image.png

排错思路如下:


1.二进制日志没有开启


2.IPTABLES 没有放开端口


3.对应的主机 IP地址写错了


实际操作:关闭主节点防火墙,重新开启从节点,即可连接上。


5.2 Slave_SQL_Running:NO


操作过程中还出现了如下所示的从节点的SQL线程运行错误

image.png

排错思路如下:


查看是否使用了nat的网络结构到导致网络有问题,连接不上。

有可能my.cnf有问题,配置文件

授权的问题,replication slave和file权限是必须的。

实际情况,换工位后网络IP出现问题,连接不上,重新配置网络之后问题解决。


节点,即可连接上。


5.2 Slave_SQL_Running:NO


操作过程中还出现了如下所示的从节点的SQL线程运行错误


排错思路如下:


查看是否使用了nat的网络结构到导致网络有问题,连接不上。

有可能my.cnf有问题,配置文件

授权的问题,replication slave和file权限是必须的。

实际情况,换工位后网络IP出现问题,连接不上,重新配置网络之后问题解决。


关于MySQL主从复制,你学废了么?

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
28天前
|
SQL 关系型数据库 MySQL
mysql主从复制概述和配置
【10月更文挑战第22天】MySQL 主从复制是一种将主服务器的数据复制到一个或多个从服务器的技术,实现读写分离,提高系统性能和可用性。主服务器记录变更日志,从服务器通过 I/O 和 SQL 线程读取并应用这些变更。适用于读写分离、数据备份和恢复、数据分析等场景。配置步骤包括修改配置文件、创建复制用户、配置从服务器连接主服务器并启动复制进程。
|
1月前
|
监控 关系型数据库 MySQL
深入了解MySQL主从复制:构建高效稳定的数据同步架构
深入了解MySQL主从复制:构建高效稳定的数据同步架构
120 1
|
22天前
|
存储 关系型数据库 MySQL
MySQL主从复制原理和使用
本文介绍了MySQL主从复制的基本概念、原理及其实现方法,详细讲解了一主两从的架构设计,以及三种常见的复制模式(全同步、异步、半同步)的特点与适用场景。此外,文章还提供了Spring Boot环境下配置主从复制的具体代码示例,包括数据源配置、上下文切换、路由实现及切面编程等内容,帮助读者理解如何在实际项目中实现数据库的读写分离。
MySQL主从复制原理和使用
|
22天前
|
SQL 关系型数据库 MySQL
Mysql中搭建主从复制原理和配置
主从复制在数据库管理中广泛应用,主要优点包括提高性能、实现高可用性、数据备份及灾难恢复。通过读写分离、从服务器接管、实时备份和地理分布等机制,有效增强系统的稳定性和数据安全性。主从复制涉及I/O线程和SQL线程,前者负责日志传输,后者负责日志应用,确保数据同步。配置过程中需开启二进制日志、设置唯一服务器ID,并创建复制用户,通过CHANGE MASTER TO命令配置从服务器连接主服务器,实现数据同步。实验部分展示了如何在两台CentOS 7服务器上配置MySQL 5.7主从复制,包括关闭防火墙、配置静态IP、设置域名解析、配置主从服务器、启动复制及验证同步效果。
Mysql中搭建主从复制原理和配置
|
2月前
|
存储 关系型数据库 MySQL
分析MySQL主从复制中AUTO_INCREMENT值不一致的问题
通过对 `AUTO_INCREMENT`不一致问题的深入分析和合理应对措施的实施,可以有效地维护MySQL主从复制环境中数据的一致性和完整性,确保数据库系统的稳定性和可靠性。
99 6
|
2月前
|
存储 关系型数据库 MySQL
分析MySQL主从复制中AUTO_INCREMENT值不一致的问题
通过对 `AUTO_INCREMENT`不一致问题的深入分析和合理应对措施的实施,可以有效地维护MySQL主从复制环境中数据的一致性和完整性,确保数据库系统的稳定性和可靠性。
65 1
|
2月前
|
关系型数据库 MySQL Java
MySQL主从复制实现读写分离
MySQL主从复制(二进制日志)、 Sharding-JDBC实现读写分离
MySQL主从复制实现读写分离
|
3月前
|
SQL 关系型数据库 MySQL
说一下MySQL主从复制的原理?
【8月更文挑战第24天】说一下MySQL主从复制的原理?
62 0
|
3月前
|
存储 关系型数据库 MySQL
实战!MySQL主从复制一键搭建脚本分享
实战!MySQL主从复制一键搭建脚本分享
68 2
|
3月前
|
SQL 关系型数据库 MySQL
在Linux中,mysql 如何减少主从复制延迟?
在Linux中,mysql 如何减少主从复制延迟?