MySQL Proxy实现数据的读写分离

本文涉及的产品
云数据库 RDS MySQL Serverless,0.5-2RCU 50GB
简介:

做MySQL读写分离实验之前,先要搭建MySQL主从复制,可以参考我之前的两篇文章:

MySQL主从配置:http://msiyuetian.blog.51cto.com/8637744/1697288

部署搭建分层次LAMP架构(最后一章节):http://msiyuetian.blog.51cto.com/8637744/1740236

实现了主从复制后,下面我们进行读写分离的安装与配置。环境说明:

Linux发行版本:centos 6.7 x86_64 (三台)

Hostname
IP 备注
mysql-master
192.168.0.109 主MySQL
mysql-slaver 192.168.0.110 从MySQL
mysql-proxy 192.168.0.104 调度服务器

以下所有操若未特殊说明,都是在 mysql-proxy 机器上操作。


1、安装所需软件包

由于mysql-proxy实际上并不需要在本机上运行MySQL实例,所以这里用yum安装

[root@proxy ~]# yum install -y gcc gcc-c++ autoconf mysql-devel libtool pkgconfig ncurses ncurses-devel


2、安装libevent-2.0.22

[root@proxy ~]# cd /usr/local/src/

[root@proxy src]# wget https://github.com/libevent/libevent/releases/download/release-2.0.22-stable/libevent-2.0.22-stable.tar.gz

[root@proxy src]# tar xvf libevent-2.0.22-stable.tar.gz

[root@proxy src]# cd libevent-2.0.22-stable

[root@proxy libevent-2.0.22-stable]# ./configure

[root@proxy libevent-2.0.22-stable]# make

[root@proxy libevent-2.0.22-stable]# make install


3、安装glib-2.20.4

[root@proxy src]# wget http://ftp.gnome.org/pub/gnome/sources/glib/2.20/glib-2.20.4.tar.gz

[root@proxy src]# tar xvf glib-2.20.4.tar.gz

[root@proxy src]# cd glib-2.20.4

[root@proxy glib-2.20.4]# ./configure

[root@proxy glib-2.20.4]# make

[root@proxy glib-2.20.4]# make install


4、安装readline-6.1

[root@proxy src]# wget http://ftp.gnu.org/gnu/readline/readline-6.1.tar.gz

[root@proxy src]# tar xvf readline-6.1.tar.gz

[root@proxy src]# cd readline-6.1

[root@proxy readline-6.1]# ./configure

[root@proxy readline-6.1]# make

[root@proxy readline-6.1]# make install

[root@proxy readline-6.1]# ldconfig -v          //让动态链接库为系统所共享


5、安装 lua-5.1.4

[root@proxy src]# wget http://www.lua.org/ftp/lua-5.1.4.tar.gz

[root@proxy src]# tar xvf lua-5.1.4.tar.gz

[root@proxy src]# cd lua-5.1.4

[root@proxy lua-5.1.4]# vim src/Makefile        //64位系统需加上 -fPIC

CFLAGS= -O2 -Wall -fPIC $(MYCFLAGS)

[root@proxy lua-5.1.4]# make linux

[root@proxy lua-5.1.4]# make install

验证是否安装成功

[root@proxy lua-5.1.4]# /usr/local/lua/bin/lua

Lua 5.1.4  Copyright (C) 1994-2008 Lua.org, PUC-Rio

>


6、更改环境变量

[root@proxy lua-5.1.4]# cp etc/lua.pc /usr/local/lib/pkgconfig/

[root@proxy lua-5.1.4]# export PKG_CONFIG_PATH=$PKG_CONFIG_PATH:/usr/local/lib/pkgconfig

若版本为5.2以上则通过下面方式修改变量:

[root@proxy lua-5.2.3]# vim /etc/profile                              //添加如下

export LUA_CFLAGS="-I/usr/local/lua/include"

export LUA_LIBS="-L/usr/local/lua/lib-llua -ldl"

export LDFLAGS="-L/usr/local/libevent/lib -lm"

export CPPFLAGS="-I/usr/local/libevent/include"

export CFLAGS="-I/usr/local/libevent/include"

[root@proxy lua-5.2.3]# source /etc/profile


7、安装 mysql-proxy

[root@proxy src]# wget http://mirrors.sohu.com/mysql/MySQL-Proxy/mysql-proxy-0.8.4.tar.gz

[root@proxy src]# tar xvf mysql-proxy-0.8.4.tar.gz

[root@proxy src]# cd mysql-proxy-0.8.4

[root@proxy mysql-proxy-0.8.4]# ./configure -prefix=/usr/local/mysql-proxy

[root@proxy mysql-proxy-0.8.4]# make

[root@proxy mysql-proxy-0.8.4]# make install

[root@proxy mysql-proxy-0.8.4]# cp lib/rw-splitting.lua /usr/local/lib/

[root@proxy mysql-proxy-0.8.4]# cp lib/admin.lua /usr/local/lib/


8、新建配置文件

[root@proxy src]# vim /etc/mysql-proxy.cnf

[mysql-proxy]

admin-username = root

admin-password = 123456

admin-lua-script = /usr/local/lib/admin.lua

proxy-read-only-backend-addresses = 192.168.0.110

proxy-backend-addresses = 192.168.0.109

proxy-lua-script = /usr/local/lib/rw-splitting.lua

log-file = /var/log/mysql-proxy.log

log-level = debug

daemon = true

keepalive = true

[root@proxy src]# chmod 660 /etc/mysql-proxy.cnf

说明:

admin-username :指定登入的用户名

admin-password :指定登入的密码

admin-lua-script :指定由admin插件执行的脚本

proxy-address = <ip:port> :mysql-proxy服务端的监听端口,默认是4040,建议改成3306

proxy-read-only-backend-addresses = <ip:port> :指定只读slave的地址和端口,若有多个slave,以逗号分隔

proxy-backend-addresses = <ip:port> :指定远程master的地址和端口,若不指定默认是127.0.0.1:3306

proxy-lua-script :指定一个Lua脚本来控制mysql-proxy的运行和配置

defaults-file :指定mysql-proxy配置文件

log-file :指定日志文件

log-level :指定日志级别

daemon = true :指定mysql-proxy以守护进程方式运行

keepalive = true :开启该功能修正以前mysql-proxy容易死掉的bug


9、给用户授权

主MySQL执行:

mysql> grant all privileges on *.* to 'proxyuser'@'192.168.0.104' identified by '123456' with grant option;

从MySQL执行:

mysql> grant all privileges on *.* to 'proxyuser'@'192.168.0.104' identified by '123456' with grant option;


10、编辑读写分离脚本

[root@proxy src]# vim /usr/local/lib/rw-splitting.lua

找到:

min_idle_connections = 4,

max_idle_connections = 8,

改为:

min_idle_connections = 1,

max_idle_connections = 2,

说明:修改默认连接,进行快速测试,不修改的话要达到连接数为4时才启用读写分离。


11、启动mysql-proxy

[root@proxy src]# /usr/local/mysql-proxy/bin/mysql-proxy -P 192.168.0.104:3306 --defaults-file=/etc/mysql-proxy.cnf


12、测试读写分离

[root@proxy src]# netstat -lnp                                 //查看已启动 mysql-proxy 服务

wKioL1cPRbTjUlFdAABBKVPkTIs375.png


[root@proxy src]# tail /var/log/mysql-proxy.log    //查看日志文件,如下表示成功

2016-04-14 22:32:11: (message) chassis-unix-daemon.c:136: [angel] we try to keep PID=56545 alive

2016-04-14 22:32:11: (debug) chassis-unix-daemon.c:157: waiting for 56545

2016-04-14 22:32:11: (debug) chassis-unix-daemon.c:121: we are the child: 56545

2016-04-14 22:32:11: (critical) plugin proxy 0.8.4 started

2016-04-14 22:32:11: (debug) max open file-descriptors = 1024

2016-04-14 22:32:11: (message) proxy listening on port 192.168.0.104:3306

2016-04-14 22:32:11: (message) added read/write backend: 192.168.0.109

2016-04-14 22:32:11: (message) added read-only backend: 192.168.0.110

wKioL1cPRfLxa7nBAABLlzuGk3s953.png


注意:MySQL Proxy服务启动后,我们可以看到网站页面全是乱码,所以要将主从数据库的配置文件都要加上如下代码以避免这个问题

# vim /etc/my.cnf

[mysqld]

skip-character-set-client-handshake init-connect = 'SET NAMES utf8'

default-character-set = utf8








      本文转自 M四月天 51CTO博客,原文链接:http://blog.51cto.com/msiyuetian/1763892,如需转载请自行联系原作者






相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助 &nbsp; &nbsp; 相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
9天前
|
缓存 NoSQL 关系型数据库
13- Redis和Mysql如何保证数据⼀致?
该内容讨论了保证Redis和MySQL数据一致性的几种策略。首先提到的两种方法存在不一致风险:先更新MySQL再更新Redis,或先删Redis再更新MySQL。第三种方案是通过MQ异步同步以达到最终一致性,适用于一致性要求较高的场景。项目中根据不同业务需求选择不同方案,如对一致性要求不高的情况不做处理,时效性数据设置过期时间,高一致性需求则使用MQ确保同步,最严格的情况可能涉及分布式事务(如Seata的TCC模式)。
35 6
|
16天前
|
SQL 关系型数据库 MySQL
轻松入门MySQL:保障数据完整性,MySQL事务在进销存管理系统中的应用(12)
轻松入门MySQL:保障数据完整性,MySQL事务在进销存管理系统中的应用(12)
|
23天前
|
关系型数据库 MySQL
elasticsearch对比mysql以及使用工具同步mysql数据全量增量
elasticsearch对比mysql以及使用工具同步mysql数据全量增量
20 0
|
25天前
Mybatis+mysql动态分页查询数据案例——测试类HouseDaoMybatisImplTest)
Mybatis+mysql动态分页查询数据案例——测试类HouseDaoMybatisImplTest)
20 1
|
25天前
|
Java 关系型数据库 数据库连接
Mybatis+MySQL动态分页查询数据经典案例(含代码以及测试)
Mybatis+MySQL动态分页查询数据经典案例(含代码以及测试)
24 1
|
25天前
Mybatis+mysql动态分页查询数据案例——条件类(HouseCondition)
Mybatis+mysql动态分页查询数据案例——条件类(HouseCondition)
15 1
|
25天前
Mybatis+mysql动态分页查询数据案例——分页工具类(Page.java)
Mybatis+mysql动态分页查询数据案例——分页工具类(Page.java)
21 1
|
25天前
Mybatis+mysql动态分页查询数据案例——房屋信息的实现类(HouseDaoMybatisImpl)
Mybatis+mysql动态分页查询数据案例——房屋信息的实现类(HouseDaoMybatisImpl)
21 2
|
25天前
Mybatis+mysql动态分页查询数据案例——工具类(MybatisUtil.java)
Mybatis+mysql动态分页查询数据案例——工具类(MybatisUtil.java)
15 1
|
28天前
|
SQL 安全 关系型数据库
MySQL安全性:防止攻击和保护数据
MySQL安全性:防止攻击和保护数据
34 1