MySQL主从复制+mysql-proxy读写分离

本文涉及的产品
云数据库 RDS MySQL Serverless,0.5-2RCU 50GB
简介: MySQL主从复制+mysql-proxy读写分离 主从复制的方式有两种:基于日志、基于GTID(全局事务标识符),我们使用基于日志的复制 MySQL主从复制原理(A/B) 1)master讲数据改变记录到二进制日志(binary log)中,也就是配置文件log-bin指定的文件,这些记录叫做.

MySQL主从复制+mysql-proxy读写分离

主从复制的方式有两种:基于日志、基于GTID(全局事务标识符),我们使用基于日志的复制

MySQL主从复制原理(A/B)

1)master讲数据改变记录到二进制日志(binary log)中,也就是配置文件log-bin指定的文件,这些记录叫做二进制日志时间(binary log events);

2)slave通过I/O线程读取master中的binary log events并写入到他的中继日志(relay log);

3)slave重新操作中继日志中的事件,把中继日志中的事件信息在本地执行一次,完成数据在本地的存储,从而实现将改变反映到它自己的数据(数据重放)

 

开始试验

环境说明

CentOS 6.5

MySQL5.1.73

mysql-proxy

192.168.0.138(master)

192.168.0.161(slave)

192.168.0.198(mysql-proxy)

注意:

1、操作系统一样;

2、数据库版本一样;

3、数据库数据一样;

4、selinux全部为disabled

5、master必须开启二进制日志,master和slave的server_id在局域网中必须唯一,一般使用当前及其的IP最后的值

 

单向主从环境(MySQL A/B复制)搭建

1、主服务器配置

##在[mysqld]中增加以下配置

#设置server_id,一般为IP

server_id=138

## 复制过滤:需要备份的数据库,输出binlog

#binlog-do-db=mydb

## 复制过滤:不需要备份的数据库,不输出(mysql库一般不同步)

binlog-ignore-db=mysql

## 开启二进制日志功能,可以随便取,最好有含义

log-bin=master-bin

## 为每个session 分配的内存,在事务过程中用来存储二进制日志的缓存

binlog_cache_size=1M

## 主从复制的格式(mixed,statement,row,默认格式是statement)

binlog_format=mixed

## 二进制日志自动删除/过期的天数。默认值为0,表示不自动删除。

expire_logs_days=7

## 跳过主从复制中遇到的所有错误或指定类型的错误,避免slave端复制中断。
## 如:1062错误是指一些主键重复,1032错误是因为主从数据库数据不一致

slave_skip_errors=1062

## 如果需要同步函数或者存储过程

log_bin_trust_function_creators=true

重启master数据库,并赋予权限

#service mysql restart

#mysql -u root -p

mysql>create user backup@'%' IDENTIFIED BY 'backup';

mysql>GRANT ALL  on *.* to backup@'%';//这里可根据自己的数据库和权限进行设置

mysql>grant replication slave, replication client on *.* to 'backup'@'192.168.1.161' identified by 'mysql';

mysql>flush privileges;

mysql>select host,user from mysql.user;

mysql>show master status;

记住下面的master-bin.000006和 120,在配置slave时人用到,File_Set和Position每次重新配置都会改变

 

配置从服务器slave

在[mysqld]下面加上

server_id=158

binlog-do=db=mydb

binlog-ignore-db=mysql

log-bin=slave1-bin //这个可以先不加

binlog_cache_size=1M

binlog_format=mixed

expire_logs_days=7

slave_skip_errors=1062

relay_log=mysql-relay-bin  //配置中继日志

log_slave_updates=1  //表示把事件写入自己的二进制文件(和log_bin一起应用)

read_only=1

如果Slave为其它Slave的Master时,必须设置bin_log。在这里,我们开启了二进制日志,而且显式的命名(默认名称为hostname,但是,如果hostname改变则会出现问题)。
relay_log配置中继日志,log_slave_updates表示slave将复制事件写进自己的二进制日志。
当设置log_slave_updates时,你可以让slave扮演其它slave的master。此时,slave把SQL线程执行的事件写进行自己的二进制日志(binary log),然后,它的slave可以获取这些事件并执行它

保存后重启MYSQL

#service mysql restart

#mysql -u root -p

mysql>change master to master_host='192.168.1.177',

>master_user='backup',

>master_password='backup',

>master_port=3306,

>master_log_file='master-bin.000002',

>master_log_pos=391,

>master_connect_retry=30;

//这里的master_log_file和master_log_pos要和show master status中显示的master相关信息对应

开启主从同步

mysql>start slave;

mysql>show slave status \G

两项都是yes表示没有问题

可以进行测试进行进一步验证

 

 

下面进行mysql-proxy的配置实现主从数据库的读写分离

1、安装mysql-proxy

实现读写分离是有lua脚本实现的,现在mysql-proxy里面已经集成,不需要在安装,选择官网下载mysql-proxy

地址:http://dev.mysql.com/downloads/mysql-proxy/下载对应版本或高级版本

对tar包进行解压缩

把mysql-proxy对应文件目录进行移动并改名为/usr/local/mysql-proxy

2、配置mysql-proxy,创建主配置文件

cd/usr/local/mysql-proxy

mkdir lua #创建脚本存放目录

mkdir logs #创建日志目录

cpshare/doc/mysql-proxy/rw-splitting.lua ./lua #复制读写分离配置文件

cpshare/doc/mysql-proxy/admin-sql.lua ./lua #复制管理脚本

vi/etc/mysql-proxy.cnf   #创建配置文件

[mysql-proxy]

user=root #运行mysql-proxy用户

admin-username=lin3615#主从mysql共有的用户

admin-password=123456#用户的密码

proxy-address=192.168.179.142:4040#mysql-proxy运行ip和端口,不加端口,默认4040

proxy-read-only-backend-addresses=192.168.179.147#指定后端从slave读取数据

proxy-backend-addresses=192.168.179.146#指定后端主master写入数据

proxy-lua-script=/usr/local/mysql-proxy/lua/rw-splitting.lua#指定读写分离配置文件位置

admin-lua-script=/usr/local/mysql-proxy/lua/admin-sql.lua#指定管理脚本

log-file=/usr/local/mysql-proxy/logs/mysql-proxy.log#日志位置

log-level=info#定义log日志级别,由高到低分别有(error|warning|info|message|debug)

daemon=true    #以守护进程方式运行

keepalive=true#mysql-proxy崩溃时,尝试重启

#保存退出!

chmod 660/etc/mysql-porxy.cnf

 

3、修改读写分离配置文件

vim/usr/local/mysql-proxy/lua/rw-splitting.lua

if notproxy.global.config.rwsplit then

proxy.global.config.rwsplit = {

min_idle_connections = 1, #默认超过4个连接数时,才开始读写分离,改为1

max_idle_connections = 1, #默认8,改为1

is_debug = false

}

end

 

4、主数据库授权

(1).在主服务器创建proxy用户用于mysql-proxy使用,从服务器也会同步这个操作

mysql>grant all on *.* to 'proxy'@'192.168.0.198' identified by 'proxy';

 

 

5、启动mysql-proxy

#/usr/local/mysql-prox/bin/mysql-proxy –defaults-file=/etc/mysql-proxy.cnf

#netstat –tulpn| grep 4040

 

远程连接测试

原文地址http://www.bieryun.com/3202.html

相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
1月前
|
SQL 存储 关系型数据库
MySQL的主从复制&主从同步
MySQL的主从复制&主从同步
30 0
|
15天前
|
负载均衡 容灾 关系型数据库
mysql主从复制
mysql主从复制
31 1
|
1月前
|
SQL 存储 运维
MySQL高可用性:主从复制和集群
MySQL高可用性:主从复制和集群
36 0
|
14小时前
|
负载均衡 关系型数据库 MySQL
MySQL-Proxy实现MySQL读写分离提高并发负载
MySQL-Proxy实现MySQL读写分离提高并发负载
|
14天前
|
SQL 关系型数据库 MySQL
mysql主从复制
mysql主从复制
|
1月前
|
关系型数据库 MySQL 数据库
使用 Docker 搭建一个“一主一从”的 MySQL 读写分离集群(超详细步骤
使用 Docker 搭建一个“一主一从”的 MySQL 读写分离集群(超详细步骤
62 0
|
1月前
|
SQL 网络协议 关系型数据库
【怒怼大厂面试官】听说你精通MySQL?来说说MySQL主从复制
面试官:MySQL主从复制了解吧?嗯嗯了解的。主要是利用了MySQL的Binary Log二进制文件。那我把二进制文件丢给从库,从库复制整个文件吗。噢噢不是的。
48 1
【怒怼大厂面试官】听说你精通MySQL?来说说MySQL主从复制
|
1月前
|
监控 负载均衡 关系型数据库
|
3月前
|
SQL 负载均衡 关系型数据库
MySQL(六)主从复制
MySQL(六)主从复制
27 0
|
15天前
|
关系型数据库 MySQL 数据库
mysql卸载、下载、安装(window版本)
mysql卸载、下载、安装(window版本)