MySQL的主从复制 && SpringBoot整合Sharding-JDBC解决读写分离

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
云数据库 RDS PostgreSQL,集群系列 2核4GB
简介: MySQL的主从复制 && SpringBoot整合Sharding-JDBC解决读写分离


问题

读和写所有压力都由一台数据库承担,压力大,数据库服务器磁盘损坏则数据丢失,容易造成单点故障。

MySQL的主从复制解决读写分离

介绍

mysql主从复制是一个异步复制的过程,底层是基于mysql数据自带的二进制日志功能。就是一台或者多台从库从另一台mysql数据库就是主库进行日志复制进行日志解析,并将解析出的sql在从库中页执行一遍。mysql主从复制是mysql数据库自带的功能,无需借助第三方工具。主库写,从库读。

MySQL复制过程分为三步

  • master将改变记录到二进制日志
  • slave将master的binary log拷贝到他的中继日志(relay log)
  • slave重做中继日志中的事件,将改变应用到自己的数据库中

配置主从复制(Centos7.6)

前置条件

两台服务器,分别安装mysql5.6

master:192.168.100.10

slave: 192.168.100.101

配置主库Master
[root@localhost src]# vim /etc/my.cnf
[mysqld]
log-bin=mysql-bin  #启用二进制日志
server-id=10       #服务器唯一ID
[root@localhost src]# systemctl restart mysqld
[root@localhost src]# mysql -uroot -proot
Warning: Using a password on the command line interface can be insecure.
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 2
Server version: 5.6.51-log MySQL Community Server (GPL)
Copyright (c) 2000, 2021, Oracle and/or its affiliates. All rights reserved.
Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.
Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.
//密码可以随意设置,为xiaoming这个用户授予root权限
mysql> grant replication slave on *.* to 'xiaoming'@'%' identified by 'root@123456';
Query OK, 0 rows affected (0.00 sec)
mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000001 |      322 |              |                  |                   |
+------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)
配置从库Slave
[root@localhost ~]# vi /etc/my.cnf
[mysqld]
server-id=101   #服务器ID必须唯一
[root@localhost ~]# systemctl restart mysqld
[root@localhost ~]# mysql -uroot -proot
mysql> change master to master_host='192.168.100.10',master_user='xiaoming',master_password='root@123456',master_log_file='mysql-bin.000001',master_log_pos=322;
Query OK, 0 rows affected, 2 warnings (0.01 sec)
注意:
master_host主库的ip 
master_password  主库设置的用户的密码
master_log_file  master_log_pos 主库show master status;查询出的值
#开启
mysql> start slave;
Query OK, 0 rows affected (0.00 sec)

检查(slave执行)

测试

注意

主库一开始就要和从库数据保持一致,不然删除了主库的数据从库同步日志的时候就会报没有该数据库,就会断开主从连接。

读写分离案例

Sharding-JDBC

轻量级java框架,可以理解为增强版的JDBC驱动,完全兼容JDBC和割绒ORM框架。

前提:两台服务器mysql主从配置成功
实现

第一步导入Maven坐标

<!--加入Spring sharding JDBC-->
        <dependency>
            <groupId>org.apache.shardingsphere</groupId>
            <artifactId>sharding-jdbc-spring-boot-starter</artifactId>
            <version>4.0.0-RC1</version>
        </dependency>

第二步配置yml文件

datasource:
    druid:
      #      driver-class-name: com.mysql.cj.jdbc.Driver
      #      url: jdbc:mysql://localhost:3306/reggie?serverTimezone=Asia/Shanghai&useUnicode=true&characterEncoding=utf-8&zeroDateTimeBehavior=convertToNull&useSSL=false&allowPublicKeyRetrieval=true
      #      username: root
      #      password: 796321@zy
      driver-class-name: com.mysql.jdbc.Driver
      url: jdbc:mysql://192.168.100.10:3306/reggie?characterEncoding=utf-8
      username: root
      password: root

替换为sharding jdbc来代理

spring:
  application:
    name: reggie_take_out
  shardingsphere:
    datasource:
      names:
        master,slave
      #主数据源
      master:
        type: com.alibaba.druid.pool.DruidDataSource
        driver-class-name: com.mysql.jdbc.Driver
        url: jdbc:mysql://192.168.100.10:3306/reggie?characterEncoding=utf-8
        username: root
        password: root
      slave:
        type: com.alibaba.druid.pool.DruidDataSource
        driver-class-name: com.mysql.jdbc.Driver
        url: jdbc:mysql://192.168.100.101:3306/reggie?characterEncoding=utf-8
        username: root
        password: root
    masterslave:
      # 读写分离配置
      load-balance-algorithm-type: round_robin # 轮询
      # 最终数据源名称
      name: dataSource
      master-data-source-name: master
      slave-data-source-names: slave
    props:
      sql:
        show: true # 开启sql显示,默认为false
  # 允许bean定义覆盖
  main:
    allow-bean-definition-overriding: true

第三步测试

SqlSession [org.apache.ibatis.session.defaults.DefaultSqlSession@4791d6fc] was not registered for synchronization because synchronization is not active
JDBC Connection [org.apache.shardingsphere.shardingjdbc.jdbc.core.connection.MasterSlaveConnection@325065f3] will not be managed by Spring
==>  Preparing: SELECT id,type,name,sort,create_time,update_time,create_user,update_user FROM category WHERE id=?
2023-03-21 16:24:33.152  INFO 14928 --- [nio-8080-exec-6] ShardingSphere-SQL                       : Rule Type: master-slave
2023-03-21 16:24:33.152  INFO 14928 --- [nio-8080-exec-6] ShardingSphere-SQL                       : SQL: SELECT id,type,name,sort,create_time,update_time,create_user,update_user FROM category WHERE id=?  ::: DataSources: slave
==> Parameters: 1397844263642378242(Long)
相关实践学习
如何快速连接云数据库RDS MySQL
本场景介绍如何通过阿里云数据管理服务DMS快速连接云数据库RDS MySQL,然后进行数据表的CRUD操作。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助 &nbsp; &nbsp; 相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
1月前
|
SQL 关系型数据库 MySQL
如何实现 MySQL 的读写分离?
本文介绍了 MySQL 读写分离的实现方式及其主从复制原理,解释了如何通过主从架构提升读并发能力。重点分析了主从同步延时问题及解决方案,如半同步复制、并行复制等技术手段,并结合实际案例探讨了高并发场景下的优化策略。文章还提醒开发者在编写代码时需谨慎处理插入后立即查询的情况,避免因主从延时导致的数据不一致问题。
207 44
如何实现 MySQL 的读写分离?
|
27天前
|
关系型数据库 MySQL 数据库
RDS用多了,你还知道MySQL主从复制底层原理和实现方案吗?
随着数据量增长和业务扩展,单个数据库难以满足需求,需调整为集群模式以实现负载均衡和读写分离。MySQL主从复制是常见的高可用架构,通过binlog日志同步数据,确保主从数据一致性。本文详细介绍MySQL主从复制原理及配置步骤,包括一主二从集群的搭建过程,帮助读者实现稳定可靠的数据库高可用架构。
84 9
RDS用多了,你还知道MySQL主从复制底层原理和实现方案吗?
|
1月前
|
SQL 网络协议 关系型数据库
MySQL 主从复制
主从复制是 MySQL 实现数据冗余和高可用性的关键技术。主库通过 binlog 记录操作,从库异步获取并回放这些日志,确保数据一致性。搭建主从复制需满足:多个数据库实例、主库开启 binlog、不同 server_id、创建复制用户、从库恢复主库数据、配置复制信息并开启复制线程。通过 `change master to` 和 `start slave` 命令启动复制,使用 `show slave status` 检查同步状态。常见问题包括 IO 和 SQL 线程故障,可通过重置和重新配置解决。延时原因涉及主库写入延迟、DUMP 线程性能及从库 SQL 线程串行执行等,需优化配置或启用并行处理
101 40
|
1月前
|
Java 关系型数据库 MySQL
SpringBoot 通过集成 Flink CDC 来实时追踪 MySql 数据变动
通过详细的步骤和示例代码,您可以在 SpringBoot 项目中成功集成 Flink CDC,并实时追踪 MySQL 数据库的变动。
233 43
|
1月前
|
SQL 存储 关系型数据库
MySQL主从复制 —— 作用、原理、数据一致性,异步复制、半同步复制、组复制
MySQL主从复制 作用、原理—主库线程、I/O线程、SQL线程;主从同步要求,主从延迟原因及解决方案;数据一致性,异步复制、半同步复制、组复制
155 11
|
3月前
|
Java 数据库连接 数据库
springboot java.lang.ClassNotFoundException: dm.jdbc.driver.DmDriver应该如何解决
通过上述步骤,可以有效解决Spring Boot项目中遇到的 `java.lang.ClassNotFoundException: dm.jdbc.driver.DmDriver`问题。确保在项目中正确添加达梦数据库的JDBC驱动依赖,并在配置文件中正确配置数据源信息,是解决此问题的关键。通过这些方法,可以确保Spring Boot项目能够正确连接达梦数据库并正常运行。
474 31
|
3月前
|
NoSQL 关系型数据库 Redis
《docker高级篇(大厂进阶):1.Docker复杂安装详说》包括:安装mysql主从复制、安装redis集群
《docker高级篇(大厂进阶):1.Docker复杂安装详说》包括:安装mysql主从复制、安装redis集群
145 14
|
3月前
|
关系型数据库 MySQL 数据库
docker高级篇(大厂进阶):安装mysql主从复制
docker高级篇(大厂进阶):安装mysql主从复制
137 24
|
3月前
|
JavaScript 安全 Java
java版药品不良反应智能监测系统源码,采用SpringBoot、Vue、MySQL技术开发
基于B/S架构,采用Java、SpringBoot、Vue、MySQL等技术自主研发的ADR智能监测系统,适用于三甲医院,支持二次开发。该系统能自动监测全院患者药物不良反应,通过移动端和PC端实时反馈,提升用药安全。系统涵盖规则管理、监测报告、系统管理三大模块,确保精准、高效地处理ADR事件。
196 1
|
3月前
|
Java 关系型数据库 MySQL
如何将Spring Boot + MySQL应用程序部署到Pivotal Cloud Foundry (PCF)
如何将Spring Boot + MySQL应用程序部署到Pivotal Cloud Foundry (PCF)
92 5

热门文章

最新文章