redis高可用集群搭建

本文涉及的产品
云数据库 Tair(兼容Redis),内存型 2GB
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
简介: redis高可用集群搭建

redis的安装

sudo apt-get install redis-server

配置允许远程访问

sudo gedit /etc/redis/redis.conf

注释掉**#bind 127.0.0.1**行

重启服务

sudo redis-server /etc/redis/redis.conf

检查服务是否启动

ps -ef | grep redis

架构图

开始搭建集群

要想搭建高可用的redis集群,至少需要三台主库,每个主库需要一台从库。每个主库的数据是不同的,每个从库的数据跟主库同步,redis会将需要存放的数据放到某一个主库中。我们开八台虚拟机,使用前六台搭建一个高可用的redis集群,服务器分配如下:

分别进入1-6号主机,建立redis的集群目录,要有权限,以服务端口为文件夹名,在下面把redis的配置文件拷贝一份:

mkdir -p /home/wang/redis-cluster/7001
sudo cp /etc/redis/redis.conf /home/wang/redis-cluster/7001/redis-7001.conf
chmod 777 redis-7001.conf

其余5台服务器操作类似,只需要改服务端口。

修改redis-7001.conf的内容,注意以下配置:

port 7001
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes

其余五台服务器只需要变更端口号。

改好后,要以全新的配置文件来启动redis:

sudo redis-server /home/wang/redis-cluster/7001/redis.conf
ps -ef|grep redis

如果发现默认的6379的redis还开着,就把它关掉:

sudo /etc/init.d/redis-server stop

此时redis的进程应该是这样的:

确认六台redis都按照指定的配置和端口启动后,就可以创建集群了。

安装ruby

sudo apt-get install ruby
sudo apt-get install rubygems
sudo gem install redis

创建集群

找到创建集群的脚本文件redis-trib.rb,把它拷贝到bin目录下:

cp redis-trib.rb /usr/local/bin/redis-trib

随便找一台服务器,执行一次集群的创建命令:

sudo redis-trib create --replicas 1 192.168.252.128:7001 192.168.252.130:7002 192.168.252.131:7003 192.168.252.132:7004 192.168.252.134:7005 192.168.252.135:7006 

看到如下提示:

确认主从没问题,输入yes,即可创建成功。

我们输入以下命令确认集群的状态:

redis-trib check 192.168.252.130:7002

可以看到集群的信息:

通过以下命令也能查看集群状态:

redis-cli -p 7111 cluster nodes

高可用测试

进入192.168.252.128:7001,杀掉redis的进程,过几秒,看看集群的状态,发现7001的主节点已经挂掉,对应的从节点7004已经变为主节点:

下面恢复192.168.252.128:7001

sudo redis-server /home/wang/redis-cluster/7001/redis.conf
redis-cli -c -p 7001
cluster nodes

发现挂掉的7001节点已经变为7004的从节点。这说明,在master节点下线后,slave节点会自动提升为master节点,保存集群持续提供服务;fail节点恢复后,会自动添加到集群中,变成slave节点。

redis集群的扩展

为了演示redis集群的扩展,我们使用7和8两台服务器扩展现有的6台集群。

进入7号和八号服务器,按照前面的方式,分别安装redis,创建集群的目录和配置文件并启动。

将7号机添加为新的master节点

使用redis-trib脚本的add-node命令将一个节点添加到集群里面,第一个是新节点 ip:port,第二个是任意一个已存在节点 ip:port。

cp redis-trib.rb /usr/local/bin/redis-trib
redis-trib add-node 192.168.252.150:7007 192.168.252.128:7001

以上操作结果表示节点添加成功,新增的节点不包含任何数据, 因为它没有分配任何 slot。

为新节点分配哈希槽(slot):你只需要指定集群中其中一个节点的地址,redis-trib 就会自动找到集群中的其他节点。目前redis-trib只能在管理员的协助下完成重新分片的工作,命令如下:

redis-trib reshard 192.168.252.150:7007

它会问你想分配多少个槽位过来,填个500吧。他又问你要分配主机(7号服务器)的ID,我的是e131a6564a1e935da2ceab59813c5ccb5dfd9c11。他又问你从哪些服务器取槽位过来,就填all表示所有。输入yes确认即可。

可以通过下图看到集群的状态,可以看到7号机的槽位分配成功。

以上集群状态输出信息解析:

  1. 节点 ID
  2. IP:PORT
  3. 节点状态标识: master、slave、myself、fail?、fail
  4. 如果是从节点,表示主节点的ID;
  5. 如果是主节点,则为 ‘-’ 集群最近一次向各个节点发送 PING 命令后,过去多长时间还没有接到回复
  6. 节点最近一次返回 PONG 的时间戳
  7. 节点的配置纪元
  8. 本节点的网络连接情况: connected、disconnected
  9. 如果是主节点,表示节点包含的槽

添加从节点

进入八号服务器192.168.252.133,输入:

redis-trib add-node 192.168.252.133:7008 192.168.252.128:7001

这时新增的服务器还是master,我们将其转为slave,命令后跟7号服务器的id:

redis-cli -c -p 7008
cluster replicate ab31611b3424990e2b9bbe73135cb4cb0ace394f

这时就变为slave了:

cluster nodes

删掉一个slave节点

redis-trib del-node 192.168.252.133:7008 5256e05a17c106c93285a03aff1b1b9e7ca7bf0c

再看节点状态,发现八号机已被删除:

删除master节点

先移走master节点的槽位,再移除服务器:

redis-trib reshard 192.168.252.150:7007

要删除槽位的数量,填499,接收槽位的 master 节点 ID,填4号服务器ID,删除槽位的master节点ID,填7号的ID.最后输入done。

redis-cli -c -p 7006 cluster nodes

这时发现7号服务器的槽位已被移除,可以开始删了。

redis-trib del-node 192.168.252.150:7007 ab31611b3424990e2b9bbe73135cb4cb0ace394f

这时7号节点也被关闭:


相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
2月前
|
NoSQL Redis
基于Redis的高可用分布式锁——RedLock
这篇文章介绍了基于Redis的高可用分布式锁RedLock的概念、工作流程、获取和释放锁的方法,以及RedLock相比单机锁在高可用性上的优势,同时指出了其在某些特殊场景下的不足,并提到了ZooKeeper作为另一种实现分布式锁的方案。
71 2
基于Redis的高可用分布式锁——RedLock
|
3月前
|
存储 缓存 NoSQL
Redis常见面试题(二):redis分布式锁、redisson、主从一致性、Redlock红锁;Redis集群、主从复制,哨兵模式,分片集群;Redis为什么这么快,I/O多路复用模型
redis分布式锁、redisson、可重入、主从一致性、WatchDog、Redlock红锁、zookeeper;Redis集群、主从复制,全量同步、增量同步;哨兵,分片集群,Redis为什么这么快,I/O多路复用模型——用户空间和内核空间、阻塞IO、非阻塞IO、IO多路复用,Redis网络模型
Redis常见面试题(二):redis分布式锁、redisson、主从一致性、Redlock红锁;Redis集群、主从复制,哨兵模式,分片集群;Redis为什么这么快,I/O多路复用模型
|
2月前
|
监控 NoSQL Redis
看完这篇就能弄懂Redis的集群的原理了
看完这篇就能弄懂Redis的集群的原理了
52 0
|
3月前
|
监控 NoSQL Redis
Redis 哨兵模式高可用
Redis 哨兵模式高可用
54 4
|
3月前
|
存储 NoSQL 算法
Redis 集群模式搭建
Redis 集群模式搭建
68 5
|
3月前
|
存储 缓存 NoSQL
高并发架构设计三大利器:缓存、限流和降级问题之Redis用于搭建分布式缓存集群问题如何解决
高并发架构设计三大利器:缓存、限流和降级问题之Redis用于搭建分布式缓存集群问题如何解决
|
2月前
|
NoSQL Redis
Redis——单机迁移cluster集群如何快速迁移
Redis——单机迁移cluster集群如何快速迁移
46 0
|
3月前
|
缓存 NoSQL Java
Redis Spring配置集群
【7月更文挑战第5天】
66 10
|
2月前
|
NoSQL Linux Redis
使用docker-compose搭建redis-cluster集群
使用docker-compose搭建redis-cluster集群
218 0
下一篇
无影云桌面