MySQL 读写分离介绍及搭建

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介:

MySQL读写分离介绍


MySQL读写分离基本原理是让master数据库处理写操作,slave数据库处理读操作。master将写操作的变更同步到各个slave节点。


图片


MySQL读写分离能提高系统性能的原因在于:


  • 物理服务器增加,机器处理能力提升。拿硬件换性能。


  • 主从只负责各自的读和写,极大程度缓解X锁和S锁争用。


  • slave可以配置myiasm引擎,提升查询性能以及节约系统开销。


  • master直接写是并发的,slave通过主库发送来的binlog恢复数据是异步。


  • slave可以单独设置一些参数来提升其读的性能。


  • 增加冗余,提高可用性。


MySQLProxy介绍


下面使用MySQL官方提供的数据库代理层产品MySQLProxy搭建读写分离。
MySQLProxy实际上是在客户端请求与MySQLServer之间建立了一个连接池。所有客户端请求都是发向MySQLProxy,然后经由MySQLProxy进行相应的分析,判断出是读操作还是写操作,分发至对应的MySQLServer上。对于多节点Slave集群,也可以起做到负载均衡的效果。


图片


MySQL读写分离配置


MySQL环境准备


master 192.168.1.5

slave 192.168.1.6

proxy 192.168.1.2

MySQL:5.5.37

MySQL-proxy:mysql-proxy-0.8.4-linux-rhel5-x86-64bit.tar.gz


创建用户并分配权限


mysql> create user libai identified by 'libai';

mysql> grant all on *.* to libai@'192.168.1.%' identified by 'libai';


在配置了MySQL复制,以上操作在master执行会同步到slave节点。


启用MySQL复制


MySQL复制配置请参考这里


先关闭并清除之前的复制。


    mysql> stop slave;

    mysql> reset slave all;


启用新的复制同步。启用之前需要清除日志


mysql> change master to master_host='192.168.1.5',master_user='libai',master_password='libai',master_port=3306,master_log_file='mysql-bin.000001',master_log_pos=0;


主库


    # mysql -h localhost -ulibai -plibai

    mysql> create database d;

    mysql> use d;

    mysql> create table t(i int);

    mysql> insert into t values(1);


从库


    mysql> select * from t;

    +------+

    | i    |

    +------+

    |    1 |


启用MySQLProxy代理服务器


代理服务器上创建mysql用户


    # groupadd mysql

    # useradd -g mysql mysql


解压启动mysql-proxy


# ./mysql-proxy --daemon --log-level=debug --user=mysql --keepalive --log-file=/var/log/mysql-proxy.log --plugins="proxy" --proxy-backend-addresses="192.168.1.5:3306" --proxy-read-only-backend-addresses="192.168.1.6:3306" --proxy-lua-script="/root/soft/mysql-proxy/rw-splitting.lua" --plugins=admin --admin-username="admin" --admin-password="admin" --admin-lua-script="/root/soft/mysql-proxy/lib/mysql-proxy/lua/admin.lua"


其中proxy-backend-addresses是master服务器,proxy-read-only-backend-addresses是slave服务器。可以通过./mysql-proxy --help 查看详细说明。


查看启动后进程


    # ps -ef | grep mysql

    root     25721     1  0 11:33 ?        00:00:00 /root/soft/mysql-proxy/libexec/mysql-proxy --daemon --log-level=debug --user=mysql --keepalive --log-file=/var/log/mysql-proxy.log --plugins=proxy --proxy-backend-addresses=192.168.1.5:3306 --proxy-read-only-backend-addresses=192.168.1.6:3306 --proxy-lua-script=/root/soft/mysql-proxy/rw-splitting.lua --plugins=admin --admin-username=admin --admin-password=admin --admin-lua-script=/root/soft/mysql-proxy/lib/mysql-proxy/lua/admin.lua

    mysql    25722 25721  0 11:33 ?        00:00:00 /root/soft/mysql-proxy/libexec/mysql-proxy --daemon --log-level=debug --user=mysql --keepalive --log-file=/var/log/mysql-proxy.log --plugins=proxy --proxy-backend-addresses=192.168.1.5:3306 --proxy-read-only-backend-addresses=192.168.1.6:3306 --proxy-lua-script=/root/soft/mysql-proxy/rw-splitting.lua --plugins=admin --admin-username=admin --admin-password=admin --admin-lua-script=/root/soft/mysql-proxy/lib/mysql-proxy/lua/admin.lua


4040是proxy端口,4041是admin管理端口


    # lsof -i:4040

    COMMAND     PID  USER   FD   TYPE DEVICE SIZE/OFF NODE NAME

    mysql-pro 25722 mysql   10u  IPv4 762429      0t0  TCP *:yo-main (LISTEN)

    # lsof -i:4041

    COMMAND     PID  USER   FD   TYPE DEVICE SIZE/OFF NODE NAME

    mysql-pro 25722 mysql   11u  IPv4 762432      0t0  TCP *:houston (LISTEN)


测试


保证mysqlproxy节点上可执行mysql 。通过复制同步帐号连接proxy


    # mysql -h 192.168.1.2 -ulibai -p --port=4040

    mysql> show databases;

    +--------------------+

    | Database           |

    +--------------------+

    | information_schema |

    | d                  |

    | mysql              |

    | performance_schema |

    | test               |

    +--------------------+


登录admin查看状态


    # mysql -h 192.168.1.2 -u admin -p --port=4041

    mysql> select * from backends;

    +-------------+------------------+-------+------+------+-------------------+

    | backend_ndx | address          | state | type | uuid | connected_clients |

    +-------------+------------------+-------+------+------+-------------------+

    |           1 | 192.168.1.5:3306 | up    | rw   | NULL |                 0 |

    |           2 | 192.168.1.6:3306 | up    | ro   | NULL |                 0 |

    +-------------+------------------+-------+------+------+-------------------+

    2 rows in set (0.00 sec)


可以从以上查询中看到master和slave状态均为up。


1)登录proxy节点,创建数据库dufu,并创建一张表t


    mysql> create database dufu;

    mysql> show databases;

    mysql> use dufu;

    mysql> create table t(id int(10),name varchar(20));

    mysql> show tables;


创建完数据库及表后,主从节点上应该都可以看到


2)关闭同步,分别在master和slave上插入数据


mysql> slave stop;

master


mysql> insert into t values(1,'this_is_master');

slave


mysql> insert into t values(2,'this_is_slave');


3)proxy上查看结果


    mysql> use dufu;

    mysql> select * from t;

    +------+---------------+

    | id   | name          |

    +------+---------------+

    |    2 | this_is_slave |

    +------+---------------+

    1 row in set (0.00 sec)


从结果可以看到数据是从slave上读取的,并没考虑master节点上的数据。


直接从proxy上插入数据


mysql> insert into t values(3,'this_is_proxy');


再次查询


    mysql> select * from t;

    +------+---------------+

    | id   | name          |

    +------+---------------+

    |    2 | this_is_slave |

    +------+---------------+


结果显示查询数据没有变化,因为proxy上执行insert相当于写入到了master上,而查询的数据是从slave上读取的。


master上查询


    mysql> select * from t;

    +------+----------------+

    | id   | name           |

    +------+----------------+

    |    1 | this_is_master |

    |    3 | this_is_proxy  |

    +------+----------------+


启用复制,proxy查询


    mysql> select * from t;

    +------+----------------+

    | id   | name           |

    +------+----------------+

    |    2 | this_is_slave  |

    |    1 | this_is_master |

    |    3 | this_is_proxy  |

    +------+----------------+


说明此时master上的数据同步到了slave,并且在proxy查询到数据是slave数据库的数据。此时,可以看到MySQLProxy实现了分离。










本文转自 小强测试帮 51CTO博客,原文链接:http://blog.51cto.com/xqtesting/1765766#comment,如需转载请自行联系原作者
相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
1月前
|
存储 关系型数据库 MySQL
MySQL 读写分离原理
MySQL 读写分离原理
70 0
MySQL 读写分离原理
|
6月前
|
SQL 关系型数据库 MySQL
小白带你学习linux的mysql服务(主从mysql服务和读写分离三十一)
小白带你学习linux的mysql服务(主从mysql服务和读写分离三十一)
100 0
|
1月前
|
关系型数据库 MySQL Java
MySQL的主从复制 && SpringBoot整合Sharding-JDBC解决读写分离
MySQL的主从复制 && SpringBoot整合Sharding-JDBC解决读写分离
45 0
|
9月前
|
SQL 存储 关系型数据库
MySQL主从复制、读写分离
MySQL主从复制、读写分离
144 0
|
1月前
|
SQL 关系型数据库 MySQL
Mycat【Mycat部署安装(核心配置及目录结构、安装以及管理命令详解)Mycat高级特性(读写分离概述、搭建读写分离、MySQL双主双从原理)】(三)-全面详解(学习总结---从入门到深化)
Mycat【Mycat部署安装(核心配置及目录结构、安装以及管理命令详解)Mycat高级特性(读写分离概述、搭建读写分离、MySQL双主双从原理)】(三)-全面详解(学习总结---从入门到深化)
109 0
|
8月前
|
关系型数据库 MySQL 中间件
企业实战(10)基于Maxscale中间件实现Mysql读写分离实战
企业实战(10)基于Maxscale中间件实现Mysql读写分离实战
|
8月前
|
存储 SQL 关系型数据库
数据库魔法师:使用ShardingSphere实现MySQL读写分离与分片指南跟着爆叔的节奏稳了!
数据库魔法师:使用ShardingSphere实现MySQL读写分离与分片指南跟着爆叔的节奏稳了!
77 0
|
17天前
|
SQL 关系型数据库 MySQL
mysql 主从复制与读写分离
mysql 主从复制与读写分离
|
1月前
|
负载均衡 关系型数据库 MySQL
MySQL读写分离技术深度解析
在高并发、大数据量的互联网应用环境中,数据库作为数据存储的核心组件,其性能直接影响着整个系统的运行效率。MySQL作为最常用的开源关系型数据库之一,虽然功能强大,但在处理大量并发读写请求时,单点服务器的性能瓶颈逐渐显现。为了解决这一问题,MySQL读写分离技术应运而生,成为提升数据库性能、实现负载均衡的有效手段。
|
1月前
|
Java 关系型数据库 MySQL
②⑩② 【读写分离】Sharding - JDBC 实现 MySQL读写分离[SpringBoot框架]
②⑩② 【读写分离】Sharding - JDBC 实现 MySQL读写分离[SpringBoot框架]
48 0