MySQL的主从复制 && SpringBoot整合Sharding-JDBC解决读写分离

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS PostgreSQL,集群系列 2核4GB
简介: MySQL的主从复制 && SpringBoot整合Sharding-JDBC解决读写分离


问题

读和写所有压力都由一台数据库承担,压力大,数据库服务器磁盘损坏则数据丢失,容易造成单点故障。

MySQL的主从复制解决读写分离

介绍

mysql主从复制是一个异步复制的过程,底层是基于mysql数据自带的二进制日志功能。就是一台或者多台从库从另一台mysql数据库就是主库进行日志复制进行日志解析,并将解析出的sql在从库中页执行一遍。mysql主从复制是mysql数据库自带的功能,无需借助第三方工具。主库写,从库读。

MySQL复制过程分为三步

  • master将改变记录到二进制日志
  • slave将master的binary log拷贝到他的中继日志(relay log)
  • slave重做中继日志中的事件,将改变应用到自己的数据库中

配置主从复制(Centos7.6)

前置条件

两台服务器,分别安装mysql5.6

master:192.168.100.10

slave: 192.168.100.101

配置主库Master
[root@localhost src]# vim /etc/my.cnf
[mysqld]
log-bin=mysql-bin  #启用二进制日志
server-id=10       #服务器唯一ID
[root@localhost src]# systemctl restart mysqld
[root@localhost src]# mysql -uroot -proot
Warning: Using a password on the command line interface can be insecure.
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 2
Server version: 5.6.51-log MySQL Community Server (GPL)
Copyright (c) 2000, 2021, Oracle and/or its affiliates. All rights reserved.
Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.
Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.
//密码可以随意设置,为xiaoming这个用户授予root权限
mysql> grant replication slave on *.* to 'xiaoming'@'%' identified by 'root@123456';
Query OK, 0 rows affected (0.00 sec)
mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000001 |      322 |              |                  |                   |
+------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)
配置从库Slave
[root@localhost ~]# vi /etc/my.cnf
[mysqld]
server-id=101   #服务器ID必须唯一
[root@localhost ~]# systemctl restart mysqld
[root@localhost ~]# mysql -uroot -proot
mysql> change master to master_host='192.168.100.10',master_user='xiaoming',master_password='root@123456',master_log_file='mysql-bin.000001',master_log_pos=322;
Query OK, 0 rows affected, 2 warnings (0.01 sec)
注意:
master_host主库的ip 
master_password  主库设置的用户的密码
master_log_file  master_log_pos 主库show master status;查询出的值
#开启
mysql> start slave;
Query OK, 0 rows affected (0.00 sec)

检查(slave执行)

测试

注意

主库一开始就要和从库数据保持一致,不然删除了主库的数据从库同步日志的时候就会报没有该数据库,就会断开主从连接。

读写分离案例

Sharding-JDBC

轻量级java框架,可以理解为增强版的JDBC驱动,完全兼容JDBC和割绒ORM框架。

前提:两台服务器mysql主从配置成功
实现

第一步导入Maven坐标

<!--加入Spring sharding JDBC-->
        <dependency>
            <groupId>org.apache.shardingsphere</groupId>
            <artifactId>sharding-jdbc-spring-boot-starter</artifactId>
            <version>4.0.0-RC1</version>
        </dependency>

第二步配置yml文件

datasource:
    druid:
      #      driver-class-name: com.mysql.cj.jdbc.Driver
      #      url: jdbc:mysql://localhost:3306/reggie?serverTimezone=Asia/Shanghai&useUnicode=true&characterEncoding=utf-8&zeroDateTimeBehavior=convertToNull&useSSL=false&allowPublicKeyRetrieval=true
      #      username: root
      #      password: 796321@zy
      driver-class-name: com.mysql.jdbc.Driver
      url: jdbc:mysql://192.168.100.10:3306/reggie?characterEncoding=utf-8
      username: root
      password: root

替换为sharding jdbc来代理

spring:
  application:
    name: reggie_take_out
  shardingsphere:
    datasource:
      names:
        master,slave
      #主数据源
      master:
        type: com.alibaba.druid.pool.DruidDataSource
        driver-class-name: com.mysql.jdbc.Driver
        url: jdbc:mysql://192.168.100.10:3306/reggie?characterEncoding=utf-8
        username: root
        password: root
      slave:
        type: com.alibaba.druid.pool.DruidDataSource
        driver-class-name: com.mysql.jdbc.Driver
        url: jdbc:mysql://192.168.100.101:3306/reggie?characterEncoding=utf-8
        username: root
        password: root
    masterslave:
      # 读写分离配置
      load-balance-algorithm-type: round_robin # 轮询
      # 最终数据源名称
      name: dataSource
      master-data-source-name: master
      slave-data-source-names: slave
    props:
      sql:
        show: true # 开启sql显示,默认为false
  # 允许bean定义覆盖
  main:
    allow-bean-definition-overriding: true

第三步测试

SqlSession [org.apache.ibatis.session.defaults.DefaultSqlSession@4791d6fc] was not registered for synchronization because synchronization is not active
JDBC Connection [org.apache.shardingsphere.shardingjdbc.jdbc.core.connection.MasterSlaveConnection@325065f3] will not be managed by Spring
==>  Preparing: SELECT id,type,name,sort,create_time,update_time,create_user,update_user FROM category WHERE id=?
2023-03-21 16:24:33.152  INFO 14928 --- [nio-8080-exec-6] ShardingSphere-SQL                       : Rule Type: master-slave
2023-03-21 16:24:33.152  INFO 14928 --- [nio-8080-exec-6] ShardingSphere-SQL                       : SQL: SELECT id,type,name,sort,create_time,update_time,create_user,update_user FROM category WHERE id=?  ::: DataSources: slave
==> Parameters: 1397844263642378242(Long)
相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助 &nbsp; &nbsp; 相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
1月前
|
SQL 关系型数据库 MySQL
mysql主从复制概述和配置
【10月更文挑战第22天】MySQL 主从复制是一种将主服务器的数据复制到一个或多个从服务器的技术,实现读写分离,提高系统性能和可用性。主服务器记录变更日志,从服务器通过 I/O 和 SQL 线程读取并应用这些变更。适用于读写分离、数据备份和恢复、数据分析等场景。配置步骤包括修改配置文件、创建复制用户、配置从服务器连接主服务器并启动复制进程。
|
25天前
|
存储 关系型数据库 MySQL
MySQL主从复制原理和使用
本文介绍了MySQL主从复制的基本概念、原理及其实现方法,详细讲解了一主两从的架构设计,以及三种常见的复制模式(全同步、异步、半同步)的特点与适用场景。此外,文章还提供了Spring Boot环境下配置主从复制的具体代码示例,包括数据源配置、上下文切换、路由实现及切面编程等内容,帮助读者理解如何在实际项目中实现数据库的读写分离。
MySQL主从复制原理和使用
|
11天前
|
分布式计算 关系型数据库 MySQL
SpringBoot项目中mysql字段映射使用JSONObject和JSONArray类型
SpringBoot项目中mysql字段映射使用JSONObject和JSONArray类型 图像处理 光通信 分布式计算 算法语言 信息技术 计算机应用
34 8
|
12天前
|
SQL 前端开发 关系型数据库
SpringBoot使用mysql查询昨天、今天、过去一周、过去半年、过去一年数据
SpringBoot使用mysql查询昨天、今天、过去一周、过去半年、过去一年数据
44 9
|
25天前
|
SQL 关系型数据库 MySQL
Mysql中搭建主从复制原理和配置
主从复制在数据库管理中广泛应用,主要优点包括提高性能、实现高可用性、数据备份及灾难恢复。通过读写分离、从服务器接管、实时备份和地理分布等机制,有效增强系统的稳定性和数据安全性。主从复制涉及I/O线程和SQL线程,前者负责日志传输,后者负责日志应用,确保数据同步。配置过程中需开启二进制日志、设置唯一服务器ID,并创建复制用户,通过CHANGE MASTER TO命令配置从服务器连接主服务器,实现数据同步。实验部分展示了如何在两台CentOS 7服务器上配置MySQL 5.7主从复制,包括关闭防火墙、配置静态IP、设置域名解析、配置主从服务器、启动复制及验证同步效果。
Mysql中搭建主从复制原理和配置
|
1月前
|
Java 关系型数据库 MySQL
mysql5.7 jdbc驱动
遵循上述步骤,即可在Java项目中高效地集成MySQL 5.7 JDBC驱动,实现数据库的访问与管理。
125 1
|
1月前
|
Java 关系型数据库 MySQL
springboot学习五:springboot整合Mybatis 连接 mysql数据库
这篇文章是关于如何使用Spring Boot整合MyBatis来连接MySQL数据库,并进行基本的增删改查操作的教程。
75 0
springboot学习五:springboot整合Mybatis 连接 mysql数据库
|
1月前
|
Java 关系型数据库 MySQL
springboot学习四:springboot链接mysql数据库,使用JdbcTemplate 操作mysql
这篇文章是关于如何使用Spring Boot框架通过JdbcTemplate操作MySQL数据库的教程。
26 0
springboot学习四:springboot链接mysql数据库,使用JdbcTemplate 操作mysql
|
21天前
|
关系型数据库 MySQL Java
SpringBoot项目中mysql字段映射使用JSONObject和JSONArray类型
SpringBoot项目中mysql字段映射使用JSONObject和JSONArray类型
22 0
|
1月前
|
SQL 分布式计算 关系型数据库
Hadoop-24 Sqoop迁移 MySQL到Hive 与 Hive到MySQL SQL生成数据 HDFS集群 Sqoop import jdbc ETL MapReduce
Hadoop-24 Sqoop迁移 MySQL到Hive 与 Hive到MySQL SQL生成数据 HDFS集群 Sqoop import jdbc ETL MapReduce
86 0