Redis主从复制、哨兵、cluster集群原理+实验(好好等,会晚些,但会更好)(三)

简介: Redis主从复制、哨兵、cluster集群原理+实验(好好等,会晚些,但会更好)(三)

三、Redis 集群模式


集群,即Redis Cluster,是Redis3.0开始引入的分布式存储方案。


集群由多个节点(Node)组成,Redis的数据分布在这些节点中。集群中的节点分为主节点和从节点:只有主节点负责读写请求和集群信息的维护;从节点只进行主节点数据和状态信息的复制。


3.1 集群的作用

(1)数据分区:数据分区(或称数据分片)是集群最核心的功能。


集群将数据分散到多个节点,一方面突破了Redis单机内存大小的限制,存储容量大大增加;另一方面每个主节点都可以对外提供读服务和写服务,大大提高了集群的响应能力。

Redis单机内存大小受限问题,在介绍持久化和主从复制时都有提及;例如,如果单机内存太大,bgsave和bgrewriteaof的fork操作可能导致主进程阻塞,主从环境下主机切换时可能导致从节点长时间无法提供服务,全量复制阶段主节点的复制缓冲区可能溢出。


(2)高可用:集群支持主从复制和主节点的自动故障转移(与哨兵类似);当任一节点发生故障时,集群仍然可以对外提供服务。


3.2 Redis集群的数据分片

Redis集群引入了哈希槽的概念


Redis集群有16384个哈希槽(编号0-16383)


集群的每个节点负责一部分哈希槽


每个Key通过CRC16校验后对16384取余来决定放置哪个哈希槽,通过这个值,去找到对应的插槽所对应的节点,然后直接自动跳转到这个对应的节点上进行存取操作


以3个节点组成的集群为例


节点A包含0到5460号哈希槽

节点B包含5461到10922号哈希槽

节点c包含10923到16383号哈希槽


3.3 集群模式的主从复制模型

集群中具有A、B、C三个节点,如果节点B失败了,整个集群就会因缺少5461-10922这个范围的槽而不可以用。

为每个节点添加一个从节点A1、B1、C1整个集群便有三个Master节点和三个slave节点组成,在节点B失败后,集群选举B1位为主节点继续服务。当B和B1都失败后,集群将不可用。


3.4 搭建Redis集群

3.4.1 实验环境

6台机子,3主3从

服务器类型

名称和IP地址 需要安装的组件
master1 centos7-1 192.168.109.131 redis-5.0.7.tar.gz
slave1 centos7-4 192.168.109.135 redis-5.0.7.tar.gz
master2 centos7-2 192.168.109.132 redis-5.0.7.tar.gz
slave2 centos7-5 192.168.109.137 redis-5.0.7.tar.gz
master3 centos7-3 192.168.109.133 redis-5.0.7.tar.gz
slave2 centos7-7 192.168.109.134 redis-5.0.7.tar.gz

初始化环境

#关闭防火墙
systemctl stop firewalld.service
systemctl disable firewalld.service
setenforce 0


3.4.2 Redis部署

参照上篇博客3.1节


Redis配置与优化


3.4.3 开启集群功能

修改任意一台服务器配置文件,再通过scp命令传给其他主机


cd /opt/redis-5.0.7/
vim redis.conf
bind 192.168.109.131                      #69行,注释掉bind项,改为自己
protected-mode no                         #88行,修改,关闭保护模式
port 6379                                 #92行redis默认监听端口,
daemonize yes                             #136行,开启守护进程,以独立进程启动
appendonly yes                            #700行,修改,开启AOF持久化
cluster-enabled yes                       #832行,取消注释,开启群集功能
cluster-config-file nodes-6379.conf       #840行,取消注释,群集名称文件设置
cluster-node-timeout 15000                #846行,取消注释群集超时时间设置
#远程传输完要修改监听地址为自己
[root@localhost redis-5.0.7]# scp redis.conf 192.168.109.132:`pwd`
[root@localhost redis-5.0.7]# scp redis.conf 192.168.109.133:`pwd`
[root@localhost redis-5.0.7]# scp redis.conf 192.168.109.134:`pwd`
[root@localhost redis-5.0.7]# scp redis.conf 192.168.109.135:`pwd`
[root@localhost redis-5.0.7]# scp redis.conf 192.168.109.137:`pwd`







修改其他节点给服务器配置文件监控地址





所有节点启动redis

cd /opt/redis-5.0.7/
redis-server redis.conf   #启动redis节点


启动集群

redis-cli --cluster create 192.168.109.131:6379 192.168.109.132:6379 192.168.109.133:6379 192.168.109.134:6379 192.168.109.135:6379 192.168.109.137:6379 --cluster-replicas 1
#六个主机分为三组,三主三从,前面的做主节点后面的做从节点下面交互的时候需要输入yes才可以创建 --replicas 1表示每个主节点有一个从节点
#前三台为Master,后三台为Slave



3.4.4 测试集群

#加-c参数,节点之间就可以互相跳转  
redis-cli -h 192.168.109.131 -p 6379 -c 
 #查看节点的哈希槽编号范围
 cluster slots    
 #赋值
 set name stevelu
#查看键的槽编号  
cluster keyslot hobby
[root@localhost redis-5.0.7]# redis-cli -h 192.168.109.131 -p 6379 -c
192.168.109.131:6379>  cluster slots
1) 1) (integer) 10923
   2) (integer) 16383
   3) 1) "192.168.109.133"
      2) (integer) 6379
      3) "0dbd7b7c8d5e283c84bf6a4cf18623d8203bff38"
   4) 1) "192.168.109.134"
      2) (integer) 6379
      3) "e88d26685eb7631316cf614887758b7b383cd403"
2) 1) (integer) 5461
   2) (integer) 10922
   3) 1) "192.168.109.132"
      2) (integer) 6379
      3) "bb538c1eb454842bb7366c0989d992465a850d98"
   4) 1) "192.168.109.137"
      2) (integer) 6379
      3) "457bc85b8540205f1f149380c6ad50089efe851e"
3) 1) (integer) 0
   2) (integer) 5460
   3) 1) "192.168.109.131"
      2) (integer) 6379
      3) "157ae2ca611029844692588038571c32f52a7c31"
   4) 1) "192.168.109.135"
      2) (integer) 6379
      3) "7e2d7753764a866e7346b2f3c3a910044a79c017"
192.168.109.131:6379>


目录
相关文章
|
11月前
|
存储 负载均衡 NoSQL
【赵渝强老师】Redis Cluster分布式集群
Redis Cluster是Redis的分布式存储解决方案,通过哈希槽(slot)实现数据分片,支持水平扩展,具备高可用性和负载均衡能力,适用于大规模数据场景。
770 2
|
9月前
|
NoSQL Java 网络安全
SpringBoot启动时连接Redis报错:ERR This instance has cluster support disabled - 如何解决?
通过以上步骤一般可以解决由于配置不匹配造成的连接错误。在调试问题时,一定要确保服务端和客户端的Redis配置保持同步一致。这能够确保SpringBoot应用顺利连接到正确配置的Redis服务,无论是单机模式还是集群模式。
734 5
|
9月前
|
NoSQL 算法 Redis
【Docker】(3)学习Docker中 镜像与容器数据卷、映射关系!手把手带你安装 MySql主从同步 和 Redis三主三从集群!并且进行主从切换与扩容操作,还有分析 哈希分区 等知识点!
Union文件系统(UnionFS)是一种**分层、轻量级并且高性能的文件系统**,它支持对文件系统的修改作为一次提交来一层层的叠加,同时可以将不同目录挂载到同一个虚拟文件系统下(unite several directories into a single virtual filesystem) Union 文件系统是 Docker 镜像的基础。 镜像可以通过分层来进行继承,基于基础镜像(没有父镜像),可以制作各种具体的应用镜像。
930 6
|
10月前
|
存储 监控 NoSQL
Redis高可用架构全解析:从主从复制到集群方案
Redis高可用确保服务持续稳定,避免单点故障导致数据丢失或业务中断。通过主从复制实现数据冗余,哨兵模式支持自动故障转移,Cluster集群则提供分布式数据分片与水平扩展,三者层层递进,保障读写分离、容灾切换与大规模数据存储,构建高性能、高可靠的Redis架构体系。
|
10月前
|
存储 负载均衡 NoSQL
Redis主从复制
在分布式系统中,为解决单点故障和提升性能,常采用Redis主从复制架构。通过将数据复制到多个从节点,实现读写分离、负载均衡及高可用性,同时支持多种拓扑结构以适应不同场景需求。
|
存储 NoSQL 网络安全
Redis安装(单机、主从、哨兵、集群)
Redis安装(单机、主从、哨兵、集群)
454 1
|
存储 NoSQL Redis
【NoSQL】redis主从、哨兵、集群(二)
【NoSQL】redis主从、哨兵、集群(二)
【NoSQL】redis主从、哨兵、集群(二)
|
存储 运维 监控
【Redis】主从、哨兵、集群架构
【Redis】主从、哨兵、集群架构
566 1
|
缓存 NoSQL 应用服务中间件
分布式缓存之Redis(持久化、主从、哨兵、分片集群)
分布式缓存之Redis(持久化、主从、哨兵、分片集群)
|
存储 NoSQL 算法
Redis主从、哨兵、 Cluster集群一锅端! 2
Redis主从、哨兵、 Cluster集群一锅端!