备案控制台
开发者社区 数据库 文章 正文

探究rh6上mysql5.6的主从、半同步、GTID多线程、SSL认证主从复制

2017-11-15 1408
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
RDS MySQL Serverless 基础系列，0.5-2RCU 50GB
推荐场景：
学生管理系统数据库设计 搭建个人博客
RDS MySQL Serverless 高可用系列，价值2615元额度，1个月
简介：

mysql's replication

195336451.png

       Mysql的 Replication 是一个异步的复制过程，从一个 Mysql Master复制到另一个 Mysql Slave。在 Master 与 Slave 之间的实现整个复制过程主要由三个线程来完成，其中两个线程( thread )( SQL_Thread和IO_Thread )在 Slave 端，另外一个线程(IO_Tread )在 Master 端。

   要实现 MySQL 的 Replication ，首先必须打开 Master 端的Binary Log(mysql-bin.xxxxxx)功能，否则无法实现。因为整个复制过程实际上就是Slave从Master端获取该日志然后再在自己身上完全顺序的执行日志中所记录的各种操作。打开 MySQL 的 Binary Log 可以通过在启动 MySQL Server 的过程中使用“—log-bin”参数选项，或者在 my.cnf 配置文件中的 mysqld 参数组([mysqld]标识后的参数部分)增加“log-bin”参数项。

MySQL 复制的基本过程如下：

1.

Slave 上面的IO线程连接上 Master，并请求从指定日志文件的指定位置(或者从最开始的日志)之后的日志内容;

2.

Master 接收到来自 Slave 的 IO 线程的请求后，通过负责复制的 IO 线程根据请求信息读取指定日志指定位置之后的日志信息，返回给 Slave 端的 IO 线程。返回信息中除了日志所包含的信息之外，还包括本次返回的信息在 Master 端的Binary Log 文件的名称以及在 Binary Log 中的位置;

3.

Slave 的 IO 线程接收到信息后，将接收到的日志内容依次写入到 Slave 端的Relay Log文件(mysql-relay-bin.xxxxxx)的最末端，并将读取到的Master端的bin-log的文件名和位置记录到master- info文件中，以便在下一次读取的时候能够清楚的高速Master“我需要从某个bin-log的哪个位置开始往后的日志内容，请发给我”

4.

Slave 的 SQL 线程检测到 Relay Log 中新增加了内容后，会马上解析该 Log 文件中的内容成为在 Master 端真实执行时候的那些可执行的 Query 语句，并在自身执行这些Query。这样，实际上就是在 Master 端和 Slave 端执行了同样的Query，所以两端的数据是完全一样的。

实验过程

虚拟机版本

Rhel6.4

32位

MySQL版本

mysql-5.6.10

linux-glibc2.5-i686.tar.gz

MySQL-5.6主从复制

两个HA节点：

MASTER

SLAVE

HA1:172.16.111.12

HA2:172.16.111.13

node1.doubao.com

node2.doubao.com

（基本是相同的设置，做node1的演示）

关掉selinux

# setenforce 0

或者

# vim /etc/selinux/config

##修改

SELINUX=permissive

配置主机名，保持主机名一致

# hostname node1.doubao.com

# vim /etc/sysconfig/network

##修改如下：

HOSTNAME=node1.doubao.com #当然HA2上要改为node2

：wq #保存退出

主机名称解析：

# vim /etc/hosts

##添加如下内容

172.16.111.6node1.doubao.com node1

172.16.111.7node2.doubao.com node2

双机互信:

#ssh-keygen -t rsa -f ~/.ssh/id_rsa -P '' 生成密钥

#ssh-copy-id -i .ssh/id_rsa.pub root@node2 ##将公钥文件发送到HA2上边

时间同步:

# hwclock –s #由于笔者的实验环境特殊，暂用此方法，也可以使用ntpdate的方法进行更新

配置好yum

http://407711169.blog.51cto.com/6616996/1179601 ## 此处前边是一个配置yum的例子

mysql 配置 （ node1,node2 执行同样操作）

1
2
3
4
5
6
7
8
9
# mkdir /mydata/data -pv
# groupadd -r -g  3306  mysql
# useradd -r -g  3306  mysql
# chown -R mysql.mysql /mydata/data/
# tar xf mysql- 5.6 . 10 -linux-glibc2. 5 -i686.tar.gz -C /usr/local
# ln -sv mysql- 5.6 . 10 -linux-glibc2. 5 -i686 mysql
# chown -R root.mysql ./*
# scripts/mysql_install_db --user=mysql --datadir=/mydata/data
# cp support-files/mysql.server /etc/rc.d/init.d/mysqld

然后这个时候现在主节点（node1 | MASTER）上执行

1
2
3
4
5
6
7
# vim my.cnf#注意这个my.cnf在/usr/local/mysql下
#添加如下内容
datadir = /mydata/data
innodb_file_per_table = ON
server-id =  1
socket =/tmp/mysql.sock
：wq

195535760.png

保存退出后，将mysql的快捷路径输出下，便于以后打开mysql


1
2
3
4
5
# vim /etc/profile.d/mysql.sh
##添加如下内容
export PATH=$PATH:/usr/local/mysql/bin
##完成后退出，执行下此脚本。
# . /etc/profile.d/mysql.sh


然后命令提示符下打开mysql测试下链接

195609264.png


为从服务器添加用户及复制权限：

1
2
3
4
mysql> GRANT REPLICATION SLAVE ON *.* TO  'repluser' @ '172.16.%.%'  IDENTIFIED BY  'replpass' ;
Query OK,  0  rows affected ( 0.00  sec)
mysql> FLUSH PRIVILEGES;
Query OK,  0  rows affected ( 0.00  sec)

195759825.png

从服务器配置

# vim my.cnf

##添加如下内容

1
2
3
4
5
datadir = /mydata/data
server-id =  11
socket = /tmp/mysql.sock
relay-log = relay-log
relay-log-index =relay-log.index

保存退出

195842210.png

保存退出后，将mysql的快捷路径输出下，便于以后打开mysql

1
2
3
4
5
# vim /etc/profile.d/mysql.sh
##添加如下内容
export PATH=$PATH:/usr/local/mysql/bin
##完成后退出，执行下此脚本。
# . /etc/profile.d/mysql.sh



主上观看

195909433.png

从上

195932519.png

在主上创建个数据库测试下。

195947159.png

到从上，刚开始是同步不了的，因为IO和SQL的THREAD还没开启，

200000296.png

这样，主从的模型就完成了。

------------------------完成

（主上创建数据库，从上观看）

为了让从mysql只做读操作，

首先观察从中的mysql的read-only变量，为OFF，为了使其永久生效需要编辑其配置文件：

200023424.png

200038982.png

退出后重启下Mysql服务。然后在进去到mysql中查看其，已经打开（为on）。然后在Mysql中进行下创建数据库的操作（即写操作），就能发现其已经不能执行

MySQL-5.6半同步复制

PS：这里沿用上边的实验数据，从而进行进一步的修改

设置半同步步骤：

1
2
3
4
5
6
7
8
9
在Master和Slave的mysql命令行运行如下代码：
在Master和Slave的my.cnf中编辑：
# On Master
[mysqld]
rpl_semi_sync_master_enabled= 1 ##永久生效
rpl_semi_sync_master_timeout= 1000  #  1  second
# On Slave
[mysqld]
rpl_semi_sync_slave_enabled= 1

然后重启Mysql

主服务器

200114387.png

从服务器

200146536.png

重启下IO线程才能正式启动

200200108.png

主上看

200217446.png

1
2
3
4
5
6
7
8
9
# 也可通过设置全局变量的方式来设置,如下：
set  global rpl_semi_sync_master_enabled= 1
# 取消加载插件
mysql> UNINSTALL PLUGIN rpl_semi_sync_master;
==============================================
# 查看从服务器上的semi_sync是否开启:
mysql> SHOW GLOBAL STATUS LIKE  'rpl_semi%' ;
# 查看主服务器上的semi_sync是否开启，注意clients 变为 1  ，证明主从半同步复制连接成功:
mysql> SHOW GLOBAL STATUS LIKE  'rpl_semi%' ;

这样一个半同步复制的mysql服务器就已经搭建好了，大家可以进行实验测试。

MySQL-5.6-GTID多线程复制

主服务中编辑my.cnf文件添加如下内容

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
datadir = /mydata/data
innodb_file_per_table = ON
server-id =  1
socket=/tmp/mysql.sock
log-bin = master-bin
binlog-format=ROW
log-slave-updates= true
gtid-mode=on
enforce-gtid-consistency= true
master-info-repository=TABLE
relay-log-info-repository=TABLE
sync-master-info= 1
slave-parallel-workers= 2
binlog-checksum=CRC32
master-verify-checksum= 1
slave-sql-verify-cheksum= 1
binlog-rows-query-log_events= 1
repo-port= 3306
port= 3306
report-host= 172.16 . 111.12

# service mysqld restart

200251661.png

从服务器中编辑my.cnf文件添加内容：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
datadir = /mydata/data
server-id =  11
socket=/tmp/mysql.sock
log-bin = master-bin
binlog-format=ROW
log-slave-updates= true
gtid-mode=on
enforce-gtid-consistency= true
master-info-repository=TABLE
relay-log-info-repository=TABLE
sync-master-info= 1
slave-parallel-workers= 2
binlog-checksum=CRC32
master-verify-checksum= 1
slave-sql-verify-cheksum= 1
binlog-rows-query-log_events= 1
repo-port= 3306
port= 3306
report-host= 172.16 . 111.13


重启服务

主上边

200401729.png


然后主上mysql命令中设置

200516948.png

200517194.png


这个时候，GTID多线程复制已经创建好了。当然一台从服务器很难看出来其效果。这里不做具体演示，大家可以自行几个同学一起做下此个实验。

MySQL-5.6-SSL主从复制

PS：主从复制的过程仿照上边来进行，ok后仿照下面来执行SSL的配置

如果是编译安装MySQL，需要加上 --with-openssl 和 --with-vio的安装（这里不做具体演示）


1、自建SSL认证文件

1
2
3
4
5
6
7
8
9
10
11
12
# cd /data/ssl
##创建、签署CA过程
# openssl genrsa  2048  > ca-key.pem#生成密钥
# openssl req - new  -x509 -nodes -days  3600  -key ca-key.pem -out ca-cert.pem
# openssl req -newkey rsa: 2048  -days  3600  -nodes -keyout server-key.pem -out server-req.pem
# openssl rsa - in  server-key.pem -out server-key.pem
# openssl x509 -req - in  server-req.pem -days  3600  -CA ca-cert.pem -CAkey ca-key.pem -set_serial  01  -out server-
cert.pem
# openssl req -newkey rsa: 2048  -days  3600  -nodes -keyout client-key.pem -out client-req.pem
# openssl rsa - in  client-key.pem -out client-key.pem
# openssl x509 -req - in  client-req.pem -days  3600  -CA ca-cert.pem -CAkey ca-key.pem -set_serial  01  -out client-
cert.pem

最后验证下是否正确，如下则是正确的：

1
2
3
# openssl verify -CAfile ca-cert.pem server-cert.pem client-cert.pem
server-cert.pem: OK
client-cert.pem: OK

2、主从数据库配置调整：

编辑主服务器配置/etc/my.cnf 的 [mysqld] 下，加上如下几行，并重启数据库：

1
2
3
4
ssl
ssl-ca = /data/ssl/ca-cert.pem
ssl-cert = /data/ssl/server-cert.pem
ssl-key = /data/ssl/server-key.pem

复制生成的认证文件到从库服务器/data/ssl下

编辑从库数据库配置/etc/my.cnf 的 [mysqld] 下，加上如下几行，并重启数据库：

1
2
3
4
ssl
ssl-ca = /data/ssl/ca-cert.pem
ssl-cert = /data/ssl/client-cert.pem
ssl-key = /data/ssl/client-key.pem

登陆到主从数据库上，

1
2
3
4
5
6
7
8
9
10
11
12
13
mysql> show  var iables like  '%ssl%' ;
+--------------------+------------------------------------------+
| Variable_name | Value|
+--------------------+------------------------------------------+
| have_openssl| YES|
| have_ssl| YES|
| ssl_ca| /data/newscrets/ca-cert.pem|
| ssl_capath||
| ssl_cert| /data/newscrets/server-cert.pem |
| ssl_cipher||
| ssl_key| /data/newscrets/server-key.pem|
+-------------------+--------------------------------------------+
7  rows  in  set  ( 0.00  sec)

看到YES就是成功了，如果看到的是NO或者DISABLE，那么看下验证文件的目录权限和文件权限。确保mysql用户可以读取即可。

3、主从同步

在主库上创建同步帐号：

1
2
mysql> GRANT FILE,SELECT,REPLICATION SLAVEON *.* TO  'repluser' @ '192.168.1.241'  IDENTIFIED BY  'replpass'  REQUIRE
SSL;

在从库上测试下是否可以成功登陆：

1
2
mysql -h192. 168.1 . 154  -urepluser -preplpass -S /tmp/mysql.sock --ssl-ca=/data/ssl/ca-cert.pem --ssl-
cert=/data/ssl/client-cert.pem --ssl-key=/data/ssl/client-key.pem

如果没有问题，登陆从库mysql，change master到主库

1
2
3
4
5
6
7
8
9
10
11
mysql> change master to
master_host= '172.16.111.12' ,
master_port= 3306 ,
master_user= 'repluser' ,
master_password= 'replpass' ,
master_log_file= 'mysql-bin.000001' ,
master_log_pos= 348221 ,
master_ssl= 1 , #是说开启SSL认证的意思。
master_ssl_ca= '/data/ssl/ca-cert.pem' ,
master_ssl_cert= '/data/ssl/client-cert.pem' ,
master_ssl_key= '/data/ssl/client-key.pem' ;

这样，基于SSL的主从复制模型就搭建成功了。大家可以进行测试。

基于SSL认证这些内容，个人参考了一些资料。大家觉得不对的地方欢迎指出。










本文转自 陈延宗 51CTO博客，原文链接：http://blog.51cto.com/407711169/1203973，如需转载请自行联系原作者
文章标签：
云数据库 RDS MySQL 版
日志服务
关系型数据库
MySQL
测试技术
监控
数据库
关键词：
云数据库 RDS MySQL 版ssl
云数据库 RDS MySQL 版主从
云数据库 RDS MySQL 版主从复制
SSL认证
云数据库 RDS MySQL 版gtid
相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境，其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心，利用清洁计算为万物互联的新世界提供源源不断的能源动力，目前开服的区域包括中国（华北、华东、华南、香港）、新加坡、美国（美东、美西）、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程，来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品：云服务器ECS 云服务器 ECS（Elastic Compute Service）是一种弹性可伸缩的计算服务，助您降低 IT 成本，提升运维效率，使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
余二五
目录
相关文章
didiplus
|
1天前
|
Kubernetes Cloud Native 关系型数据库
提升数据安全与性能，掌握Helm一键部署MySQL 8.0主从技巧
【4月更文挑战第9天】提升数据安全与性能，掌握Helm一键部署MySQL 8.0主从技巧
didiplus
53 0
蓝易云
|
1天前
|
关系型数据库 MySQL Linux
服务器Linux系统配置mysql数据库主从自动备份
这是一个基本的配置主从复制和设置自动备份的指南。具体的配置细节和命令可能因您的环境和需求而有所不同，因此建议在操作前详细阅读MySQL文档和相关资源，并谨慎操作以避免数据丢失或不一致。
蓝易云
13 3
宁波阿成.
|
1天前
|
关系型数据库 MySQL Linux
本地虚拟机centos7通过docker安装主从mysql5.7.21
本地虚拟机centos7通过docker安装主从mysql5.7.21
宁波阿成.
19 0
菜菜的后端私房菜
|
1天前
|
SQL canal 运维
MySQL高可用架构探秘：主从复制剖析、切换策略、延迟优化与架构选型
MySQL高可用架构探秘：主从复制剖析、切换策略、延迟优化与架构选型
菜菜的后端私房菜
21 3
库库的里昂
|
1天前
|
运维 负载均衡 关系型数据库
MySQL高可用解决方案演进：从主从复制到InnoDB Cluster架构
MySQL高可用解决方案演进：从主从复制到InnoDB Cluster架构
库库的里昂
34 9
俄罗斯刺沙蓬
|
1天前
|
设计模式 容灾 关系型数据库
MySQL 主从复制架构
MySQL 主从复制架构
俄罗斯刺沙蓬
36 0
威哥爱编程
|
1天前
|
SQL 关系型数据库 MySQL
MySQL主从模式最佳实践
主从模式是很常见的数据库存储解决方案，一主多从，当然还有双主模式（多主模式），你对数据库的主从模式有哪些见解，欢迎跟 V 哥聊聊。
威哥爱编程
20 0
渐暖
|
1天前
|
关系型数据库 MySQL Linux
【mysql】MySql主从复制，从原理到实践！
【mysql】MySql主从复制，从原理到实践！
渐暖
30 0
李振良_阿良
|
1天前
|
SQL 关系型数据库 MySQL
Mysql主从复制
Mysql主从复制
李振良_阿良
20 0
程序三两行
|
1天前
|
SQL 关系型数据库 MySQL
mysql主从复制
mysql主从复制
程序三两行
28 0

热门文章

最新文章

  • 1
    IDEA DataGrip连接sqlserver 提示驱动程序无法通过使用安全套接字层(SSL)加密与 SQL Server 建立安全连接的解决方法
  • 2
    深入理解SSL数字证书：定义、工作原理与网络安全的重要性
  • 3
    SSL原理、生成SSL密钥对、Nginx配置SSL
  • 4
    案例分析｜线程池相关故障梳理&总结
  • 5
    【JAVA】Java 中什么叫单例设计模式？请用 Java 写出线程安全的单例模式
  • 6
    JavaSE&多线程&线程池
  • 7
    【JAVA】线程的run()和start()有什么区别？
  • 8
    Python 多线程编程实战：threading 模块的最佳实践
  • 9
    高德地图爬虫实践：Java多线程并发处理策略
  • 10
    【Java基础】简说多线程（上）
  • 1
    [MySQL]事务原理之redo log,undo log
    127
  • 2
    [MySQL]SQL优化之索引的使用规则
    44
  • 3
    [MySQL] SQL优化之性能分析
    39
  • 4
    【mysql】—— 用户管理
    39
  • 5
    【mysql】—— 视图
    35
  • 6
    【mysql】—— 表的增删改查
    43
  • 7
    【mysql】—— 表的约束
    42
  • 8
    【MYSQL】—— MySQL 在 Centos 7环境安装
    70
  • 9
    MySQL模糊查询二三事
    28
  • 10
    MySQL的JOIN到底是怎么玩的
    110

    • 相关课程

    更多
  • MySQL企业常见架构与调优经验分享
  • 云数据库MySQL版快速上手教程
  • 阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
  • MySQL实战进阶
  • 数据库及SQL/MySQL基础
  • 云数据库MySQL快速入门

    • 相关电子书

    更多
  • 搭建电商项目架构连接MySQL
  • 搭建4层电商项目架构，实战连接MySQL
  • 多IO线程优化版

    • 相关实验场景

    更多
  • 测试场景（RDS无优惠）
  • MySQL引擎及架构优化
  • 基于EBS部署高性能的MySQL服务
  • 使用Python完成RDS数据开发及分析
  • Excel文件转存到RDS数据库
  • 使用CloudLens采集RDS日志并进行审计分析

    • 推荐镜像

    更多
  • mysql
  • mariadb
  • postgresql
    • 下一篇
    2024年阿里云免费云服务器及学生云服务器申请教程参考