服务搭建篇(三) 主从Mysql搭建 , 保姆级教程 ,包看包会

本文涉及的产品
RDS AI 助手,专业版
RDS MySQL DuckDB 分析主实例,基础系列 4核8GB
RDS MySQL DuckDB 分析主实例,集群系列 4核8GB
简介: 而如果要保证数据能够实时同步,对于MySQL,通常就要用到他自身提供的一套通过Binlog日志在多个MySQL服务之间进行同步的集群方案。基于这种集群方案,一方面可以提高数据的安全性,另外也可以以此为基础,提供读写分离、故障转移

一. 主从复制介绍

将主服务器的binlog日志复制到从服务器上执行一遍,达到主从数据的一致状态,称之为主从复制。通俗一点说就是主服务器做什么 , 从服务器也做什么


二. 主从复制原理

其实数据库的主从同步,就是为了要保证多个数据库之间的数据保持一致。最简单的方式就是使用数据库的导入导出工具,定时将主库的数据导出,再导入到从库当中。这是一种很常见,也很简单易行的数据库集群方式。也有很多的工具帮助我们来做这些事情。但是这种方式进行数据同步的实时性比较差。


而如果要保证数据能够实时同步,对于MySQL,通常就要用到他自身提供的一套通过Binlog日志在多个MySQL服务之间进行同步的集群方案。基于这种集群方案,一方面可以提高数据的安全性,另外也可以以此为基础,提供读写分离、故障转移

等其他高级的功能。


即在主库上打开Binlog日志,记录对数据的每一步操作。然后在从库上打开RelayLog日志,用来记录跟主库一样的Binlog日志,并将RelayLog中的操作日志在自己数据库中进行重演。这样就能够更加实时的保证主库与从库的数据一致


需要注意的是 : MySQL的Binlog默认是不打开的。


他的实现过程是在从库上启动一系列IO线程,负责与主库建立TCP连接,请求主库在写入Binlog日志时,也往从库传输一份。这时,主库上会有一个IO Dump线程,负责将Binlog日志通过这些TCP连接传输给从库的IO线程。而从库为了保证日志接收的稳定性,并不会立即重演Binlog数据操作,而是先将接收到的Binlog日志写入到自己的RelayLog日志当中。然后再异步的重演RelayLog中的数据操作


1.从库的IO线程,读取master.info信息,获取主库信息并连接主库

2.主库接收从库的链接请求后,会生成一个准备binlog dump的线程,来响应从库

3.主库一旦有新的日志生成,会发送“信号”给主库的binlog dump线程,然后binlog dump线程会读取binlog日志的更新

4.TP(传送)给从库的IO线程

5.IO线程将收到的日志存储到了TCP/IP 缓存

6.写入TCP/IP缓存后,立即返回ACK给主库 ,此时主库工作完成

7.IO线程更新master.info文件binlog 文件名和postion

8.IO线程将缓存中的数据,存储到relay-log日志文件,此时io线程工作完成

9.从库SQL线程读取relay-log.info文件,获取到上次执行到的relay-log的位置,作为起点

10.从库SQL线程基于从步骤9中获取到的起点,去中继日志relay-log.000001获取后续操作,在从库回放relay-log

11.SQL线程回放完成之后,会更新relay-log.info文件,把当前操作的位置记入,作为下一次操作的起点。

12. relay-log会有自动清理的功能


三.搭建主从复制环境

1.搭建单机Mysql

1.1.删除之前存在的mysql

rpm -qa|grep mysql
rpm -e mysql mysql-libs
yum -y remove mysql-server mysql mysql-libs

1.2.添加yum源

获取源地址 http://dev.mysql.com/downloads/repo/yum/ 添加源命令

rpm -ivh http://dev.mysql.com/get/mysql57-community-release-el7-9.noarch.rpm

1.3.检查是否安装成功

yum repolist enabled | grep "mysql.*-community.*"

1.4.选择版本

[root@localhost ~]# yum repolist all | grep mysql
mysql-connectors-community/x86_64 MySQL Connectors Community         启用:    24
mysql-connectors-community-source MySQL Connectors Community - Sourc 禁用
mysql-tools-community/x86_64      MySQL Tools Community              启用:    38
mysql-tools-community-source      MySQL Tools Community - Source     禁用
mysql-tools-preview/x86_64        MySQL Tools Preview                禁用
mysql-tools-preview-source        MySQL Tools Preview - Source       禁用
mysql55-community/x86_64          MySQL 5.5 Community Server         禁用
mysql55-community-source          MySQL 5.5 Community Server - Sourc 禁用
mysql56-community/x86_64          MySQL 5.6 Community Server         禁用
mysql56-community-source          MySQL 5.6 Community Server - Sourc 禁用
mysql57-community/x86_64          MySQL 5.7 Community Server         启用:   146
mysql57-community-source          MySQL 5.7 Community Server - Sourc 禁用
mysql80-community/x86_64          MySQL 8.0 Community Server         禁用
mysql80-community-source          MySQL 8.0 Community Server - Sourc 禁用
[root@localhost ~]# yum-config-manager --disable mysql57-community
[root@localhost ~]# yum-config-manager --enable mysql56-community

如果 yum-config-manager: 未找到命令,就需要安装 yum-utils

[root@localhost ~]# yum install -y yum-utils

1.5.安装Mysql

[root@localhost ~]# yum install mysql-community-server

1.6.启动 mysqld.service

[root@localhost ~]# systemctl start  mysqld.service
[root@localhost ~]# service mysqld start/status/stop
[root@localhost ~]# systemctl stop  mysqld.service
[root@localhost ~]# systemctl status  mysqld.service
[root@localhost ~]# systemctl restart  mysqld.service


1.7.修改Mysql密码

获取默认密码

[root@localhost ~]# grep 'temporary password' /var/log/mysqld.log

设置新密码


mysql> set password = password('liuxs');

1.8.禁止更新

生产环境一般禁止 MySQL 更新,修改 /etc/yum.conf,添加内容

exclude=mysql-community-client,mysql-community-common,mysql-community-libs,mysql-community-server

如果需要更新

[root@localhost ~]# yum update mysql-server

注意: 在使用 yum 更新之后,MySQL服务器会自动重启。


1.9.Mysql my.conf 配置

默认配置文件路径 /etc/my.cnf


[client]
# 端口号
port=3306
# For advice on how to change settings please see
# http://dev.mysql.com/doc/refman/5.7/en/server-configuration-defaults.html
[mysqld]
#
# Remove leading # and set to the amount of RAM for the most important data
# cache in MySQL. Start at 70% of total RAM for dedicated server, else 10%.
# innodb_buffer_pool_size = 128M
#
# Remove leading # to turn on a very important data integrity option: logging
# changes to the binary log between backups.
# log_bin
#
# Remove leading # to set options mainly useful for reporting servers.
# The server defaults are faster for transactions and fast SELECTs.
# Adjust sizes as needed, experiment to find the optimal values.
# join_buffer_size = 128M
# sort_buffer_size = 2M
# read_rnd_buffer_size = 2M
# 数据存储路径
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
# Disabling symbolic-links is recommended to prevent assorted security risks
symbolic-links=0
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid
character-set-server=utf8
collation-server=utf8_general_ci
lower_case_table_names=1
max_allowed_packet=100M
net_buffer_length=30M
max_connections=80

1.10.创建用户并授权

CREATE USER 'GreatOne'@'%' IDENTIFIED BY 'GreatOne1!';
GRANT ALL PRIVILEGES ON *.* TO '用户名'@'指定ip' IDENTIFIED BY '用户密码' ;
FLUSH PRIVILEGES;

1.11.查看授权

show grants for 'user'@'%';

1.12.权限回收(这一步不操作 , 知道即可)

# 权限回收(不包含赋权权限)
REVOKE ALL PRIVILEGES ON *.* FROM cacti;
REVOKE ALL PRIVILEGES ON cacti.* FROM cacti;
# 收回赋权权限
REVOKE GRANT OPTION ON *.* FROM cacti;
FLUSH PRIVILEGES;


1.13.密码找回(这一步不操作 , 知道即可)

方法一(–init-file)

MySql 官方提供了一种思路,通过在启动 mysqld 服务时指向 init-file 来实现重置密码 参考

https://dev.mysql.com/doc/refman/5.7/en/resetting-permissions.html

实际操作没有成功


方法二(skip-grant-tables)

修改 MySQL 配置,不用密码登录 MySQL 在 [mysqld] 下面添加 skip-grant-tables


[mysqld]
skip-grant-tables
#
# Remove leading # and set to the amount of RAM for the most important data
# cache in MySQL. Start at 70% of total RAM for dedicated server, else 10%.
# innodb_buffer_pool_size = 128M
#
# Remove leading # to turn on a very important data integrity option: logging
# changes to the binary log between backups.
# log_bin
#

重启 mysqld.service 后可以用 mysql 命令免密码登录,此时通过 UPDATE 语句便可修改 root 密码


[root@localhost ~]# systemctl restart mysqld.service
[root@localhost ~]# mysql
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 2
Server version: 5.7.33 MySQL Community Server (GPL)
Copyright (c) 2000, 2021, Oracle and/or its affiliates.
Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.
Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.
mysql>


MySQL 5.7 之后 user 表里用 authentication_string 字段代替 password 字段

mysql> use mysql;
mysql> DESC user;
mysql> UPDATE user SET authentication_string=password('ABCabc123!');

修改好之后把配置改回去,再重启 mysqld.service


2.主从Mysql

在另外一台机器也参考以上步骤安装Mysql , 让然后选择一台在当作主服务


2.1 修改master节点的配置文件

#复制集群中的各节点的id均必须唯一
server-id = 1
开启二进制日志
log-bin = master-bin
开启中继日志
relay-log = relay-log
关闭域名解析
skip_name_resolve 

2.2 重启服务

service mysqld restart

2.3 修改slave节点配置

#复制集群中的各节点的id均必须唯一;第二台slave节点改为3
server-id = 2
#开启中继日志
relay-log = relay-log
#开启二进制日志
log-bin = master-bin
#启用只读属性
read_only = ON 
#是否自动清空不再需要中继日志
relay_log_purge = 0
#关闭名称解析(非必须) 
skip_name_resolve 
#使得更新的数据写进二进制日志中
log_slave_updates = 1


2.4 连接master数据库

grant replication slave,replication client on *.* to 'slave'@'192.168.%.%' identified by 'keer'; 

查看主库状态

show master status; 

2.5 连接slave数据库

注意 : master_log_pos=120;的属性一定要和master节点的对应

c5540e17ac42b83090b45e22dbc4bf27_5222fff53ee844d7b5d68289c88a9900.png

change master to master_host='192.168.154.138', 
master_user='slave', 
master_password='keer', 
master_log_file='master-bin.000001', 
master_log_pos=120;

启动slave

start slave;

查看slave状态

show slave status; 

另外一个从节点也是这样配置 , 查询slave节点状态之后看到如下两个属性都为yes就表示成功

6e4f7bfa184930df774ddc4fe7b14cd5_573c19b9a3c646f099f8014c4cf831e2.png

Slave_IO_Running和Slave_sql_Running状态必须都为yes才可 , 只要有一个为no就不行 , 那么就需要检查配置


3.主从不同步问题解决

如果出现主从不同的原因 , 可以查看我的这篇博客 : https://blog.csdn.net/qq_45001002/article/details/128343697

相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
相关文章
|
4月前
|
Ubuntu 关系型数据库 MySQL
MySQL二进制包安装
本文详细介绍了在多种Linux系统上通过二进制包安装MySQL 8.0和8.4版本的完整过程,涵盖用户创建、glibc版本匹配、程序解压、环境变量配置、初始化数据库及服务启动等步骤,并提供支持多发行版的一键安装脚本,助力高效部署MySQL环境。
597 4
MySQL二进制包安装
|
4月前
|
安全 关系型数据库 MySQL
MySQL包安装 -- SUSE系列(离线RPM包安装MySQL)
本文详细介绍在openSUSE系统上通过离线RPM包安装MySQL 8.0和8.4版本的完整步骤,包括下载地址、RPM包解压、GPG密钥导入、使用rpm或zypper命令安装及服务启动验证,涵盖初始密码获取与安全修改方法,适用于无网络环境下的MySQL部署。
521 3
MySQL包安装 -- SUSE系列(离线RPM包安装MySQL)
|
4月前
|
关系型数据库 MySQL Linux
MySQL包安装 -- SUSE系列(SUSE资源库安装MySQL)
本文介绍了在openSUSE系统上通过SUSE资源库安装MySQL 8.0和8.4版本的完整步骤,包括配置国内镜像源、安装MySQL服务、启动并验证运行状态,以及修改初始密码等操作,适用于希望在SUSE系列系统中快速部署MySQL的用户。
388 3
MySQL包安装 -- SUSE系列(SUSE资源库安装MySQL)
|
5月前
|
安全 关系型数据库 MySQL
CentOS 7 yum 安装 MySQL教程
在CentOS 7上安装MySQL 8,其实流程很清晰。首先通过官方Yum仓库来安装服务,然后启动并设为开机自启。最重要的环节是首次安全设置:需要先从日志里找到临时密码来登录,再修改成你自己的密码,并为远程连接创建用户和授权。最后,也别忘了在服务器防火墙上放行3306端口,这样远程才能连上。
1028 16
|
4月前
|
Ubuntu 关系型数据库 MySQL
MySQL包安装 -- Debian系列(离线DEB包安装MySQL)
本文详细介绍了在Ubuntu 24.04、22.04、20.04及Debian 12系统上,通过离线DEB包安装MySQL 8.0和8.4版本的完整步骤。涵盖下载地址、依赖处理、dpkg安装顺序、配置方法及服务启动验证,确保用户可顺利部署MySQL数据库。
1795 0
MySQL包安装 -- Debian系列(离线DEB包安装MySQL)
|
4月前
|
运维 Ubuntu 关系型数据库
MySQL包安装 -- Debian系列(Apt资源库安装MySQL)
本文介绍了在Debian系列系统(如Ubuntu、Debian 11/12)中通过APT仓库安装MySQL 8.0和8.4版本的完整步骤,涵盖添加官方源、配置国内镜像、安装服务及初始化设置,并验证运行状态,适用于各类Linux运维场景。
1502 0
MySQL包安装 -- Debian系列(Apt资源库安装MySQL)
|
4月前
|
Oracle 关系型数据库 MySQL
MySQL包安装 -- RHEL系列(离线RPM包安装MySQL)
本文详细介绍在Rocky、CentOS、AlmaLinux、openEuler等主流Linux系统上,通过离线RPM包安装MySQL 8.0和8.4版本的完整步骤,涵盖下载、依赖处理、rpm/yum安装、服务启动、密码设置等关键环节,适用于多种企业级环境部署需求。
1195 0
MySQL包安装 -- RHEL系列(离线RPM包安装MySQL)
|
4月前
|
存储 关系型数据库 MySQL
MySQL介绍和MySQL包安装 -- RHEL系列(Yum资源库安装MySQL)
MySQL是一款开源关系型数据库,高性能、易用、跨平台,支持多种存储引擎,广泛应用于Web开发、企业级应用等领域。本教程介绍其特点、架构及在主流Linux系统中的安装配置方法。
823 0
MySQL介绍和MySQL包安装 -- RHEL系列(Yum资源库安装MySQL)
|
9月前
|
存储 关系型数据库 MySQL
【免费动手教程上线】阿里云RDS MySQL推出大容量高性能存储:高性能本地盘(最高16TB存储空间)、高性能云盘(最高64TB存储空间)
阿里云RDS MySQL提供高性能本地盘与高性能云盘等存储方案,满足用户大容量、低延迟需求。高性能本地盘单盘最大16TB,IO延时微秒级;高性能云盘兼容ESSD特性,支持IO性能突发、BPE及16K原子写等能力。此外,阿里云还提供免费动手体验教程,帮助用户直观感受云数据库 RDS 存储性能表现。

推荐镜像

更多