redis 主从复制(读写分离)集群搭建(含错误处理)

本文涉及的产品
云数据库 Tair(兼容Redis),内存型 2GB
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
简介: 1.概述当面临大流量时,redis可以采取集群的方式进行扩容,将压力分散到集群中的多个结点上去防止redis被打挂。redis的扩容方式有两种:垂直扩容,即读写分离。水平扩容,即分区。读写分离,将写请求和读请求分开来处理,写请求打到主结点上去,读请求打到从结点上去,主节点、从节点之间通过复制的方式进行数据同步。因为从节点中存放有全局数据,所以可以通过负载均衡的方式将读请求的流量打散,将压力分摊给各个从节点。在面对读多写少的大流量情景时,使用读写分离集群是很好的解决方式。

1.概述

当面临大流量时,redis可以采取集群的方式进行扩容,将压力分散到集群中的多个结点上去防止redis被打挂。redis的扩容方式有两种:

  • 垂直扩容,即读写分离。
  • 水平扩容,即分区。

读写分离,将写请求和读请求分开来处理,写请求打到主结点上去,读请求打到从结点上去,主节点、从节点之间通过复制的方式进行数据同步。


因为从节点中存放有全局数据,所以可以通过负载均衡的方式将读请求的流量打散,将压力分摊给各个从节点。在面对读多写少的大流量情景时,使用读写分离集群是很好的解决方式

3ad27d5619ff4187a8acc308409f0f66.png

能读?能写?问题:

能写的服务器能读,一般只拿来写。(主)

能读的服务器,不一定能写。(从)

宕机重新上线问题:

  1. 从服务器down机后,重连以后不会自动成为从服务器,需要手动配置。
  2. 无论从服务器接入的早晚,从服务器的数据一定会和主机一致。
  3. 主机down机以后,从机原地待命,等待主机上线。

2.搭建

集群IP规划:

IP 角色
192.1668.31.10 主节点
192.1668.31.20 从节点
192.1668.31.30 从节点

2.1.安装配置

redis的安装配置教程可以看博主的另一篇文章,里面有详细的安装步骤和错误处理:

Linux安装redis(含报错解决)__BugMan的博客-CSDN博客

2.2.认主

主从复制的关键点就在于从节点的手动认主。在未进行认主的时候,每个redis结点都默认为自己就是一个主节点,自己玩儿自己的:

使用info Replication命令查看主从关系

c245d41195db4ba1b6f97df7836f951b.png

在从节点上使用slaveof ip地址 端口号,进行认主:

6b3ab11956aa465b9bc37b6bfd77f9a0.png

认主成功后会在master上可以看到:

92bf3845313e44088d42c6482f5de256.png

2.3.错误处理

从节点认主后可能会出现主节点连不上的问题:

Error condition on socket for SYNC: Connection reset by peer

c73d2a36d0b44d22b76d42461cc6e47f.png 这个问题是由于主节点的保护模式造成的,将主节点的保护模式关掉,并且将bind ip修改为0.0.0.0让任意ip都可以连接,或者修改为从节点的ip,直接注释掉bind ip是无效的!!!

3.原理

主从复制的原理很简单,是采用RDB进行数据的复制的,每次从机联结都会给主机发送sync指令,告诉主机自己已经上线并且准备好进行数据同步了,然后主机会发送RDB文件给从机,从机收到RDB后会使用RDB进行数据的加载

相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
目录
相关文章
|
23天前
|
存储 NoSQL Redis
redis主从集群与分片集群的区别
主从集群通过主节点处理写操作并向从节点广播读操作,从节点处理读操作并复制主节点数据,优点在于提高读取性能、数据冗余及故障转移。分片集群则将数据分散存储于多节点,根据规则路由请求,优势在于横向扩展能力强,提升读写性能与存储容量,增强系统可用性和容错性。主从适用于简单场景,分片适合大规模高性能需求。
36 5
|
4月前
|
监控 NoSQL Redis
看完这篇就能弄懂Redis的集群的原理了
看完这篇就能弄懂Redis的集群的原理了
169 0
|
2月前
|
存储 NoSQL 大数据
大数据-51 Redis 高可用方案CAP-AP 主从复制 一主一从 全量和增量同步 哨兵模式 docker-compose测试
大数据-51 Redis 高可用方案CAP-AP 主从复制 一主一从 全量和增量同步 哨兵模式 docker-compose测试
45 3
|
3月前
|
NoSQL 网络协议 Redis
Redis的主从复制和哨兵模式
本文详细介绍了Redis的主从复制配置、原理(包括全量复制和增量复制)以及如何搭建一主二从的Redis集群,同时还探讨了Redis哨兵模式的概念、配置文件、以及如何配置一主二从三哨兵的Redis哨兵模式,以实现高可用性。
|
4月前
|
消息中间件 存储 缓存
深入理解Redis集群主从复制原理
该文章主要探讨了Redis集群中的主从复制原理,包括为何需要主从复制、配置方法、复制流程以及一些高级特性。
深入理解Redis集群主从复制原理
|
5月前
|
存储 NoSQL 算法
Redis 集群模式搭建
Redis 集群模式搭建
104 5
|
4月前
|
NoSQL Redis
Redis——单机迁移cluster集群如何快速迁移
Redis——单机迁移cluster集群如何快速迁移
154 0
|
4月前
|
NoSQL Linux Redis
使用docker-compose搭建redis-cluster集群
使用docker-compose搭建redis-cluster集群
613 0
|
4月前
|
NoSQL Linux Redis
基于redis6搭建集群
基于redis6搭建集群