软件体系结构 - Redis 技术架构

本文涉及的产品
云数据库 Redis 版,社区版 2GB
推荐场景:
搭建游戏排行榜
简介: 【4月更文挑战第16天】软件体系结构 - Redis 技术架构

核心组件

内存数据存储

  • 数据结构丰富:Redis以键值对的形式存储数据,支持多种数据结构,如字符串(Strings)、散列(Hashes)、列表(Lists)、集合(Sets)、有序集合(Sorted Sets)、位图(Bitmaps)、超日志(HyperLogLogs)、地理空间索引(Geospatial indexes)等。这些数据结构为开发者提供了灵活且高效的存储解决方案,适用于多种应用场景。

事件驱动模型

  • 高效IO处理:Redis采用了作者自己开发的ae(Async Event)事件驱动模型,能够高效地处理网络IO读写、命令执行以及时间事件。这种模型使得Redis能够在一个单线程中并发地响应客户端请求,避免了多线程同步开销,保证了高吞吐量。

持久化机制

  • RDB(Redis Database):Redis支持定期将内存中的数据以二进制形式dump到磁盘上,生成RDB文件,实现数据的持久化。RDB是Redis的一种全量快照方式,通过SAVEBGSAVE命令触发,适用于数据备份和灾难恢复。
  • AOF(Append-only File):除了RDB,Redis还提供了AOF持久化模式。在这种模式下,Redis将每一个写操作(如SET、HSET等)以命令形式追加到AOF文件中。AOF可以提供更高的数据安全性,因为它记录了完整的操作日志,允许在服务器重启时通过重新执行这些命令来恢复数据状态。

网络通信

  • 单线程响应:尽管Redis内部采用单线程处理命令,但它通过非阻塞IO和多路复用技术(如epoll、kqueue等)并行处理多个客户端连接。客户端发送请求到Redis服务器,服务器在单线程内顺序执行这些命令,并将响应返回给相应的客户端。

系统扩展与高可用性

主从复制(Replication)

  • 数据同步:Redis支持主从复制架构,主节点处理写入请求并将其同步到一个或多个从节点。数据同步分为全量同步和部分同步(增量同步)。全量同步通过生成并发送RDB快照实现,部分同步则通过将主节点的写命令传播给从节点来保持数据一致性。
  • 故障切换:主从复制为Redis提供了数据冗余和故障恢复能力。在主节点故障时,可以手动或通过Redis Sentinel自动将一个从节点提升为主节点,继续提供服务。

Redis Sentinel

  • 监控与自动故障转移:Redis Sentinel是一个独立的服务,用于监控Redis集群的健康状况,自动检测主节点故障并执行故障转移操作。Sentinel还负责通知客户端主节点变更情况,使得客户端能够透明地切换到新的主节点。

Redis Cluster

  • 分布式数据分片:Redis Cluster实现了数据的水平分区(sharding),每个节点仅存储一部分数据。客户端可以直接与任意节点交互,节点间通过哈希槽(slot)映射机制路由请求到正确的节点。这样可以实现数据的横向扩展,理论上支持无限数量的节点。
  • 节点间通信与数据一致性:Redis Cluster节点之间通过Gossip协议进行通信,共享集群状态信息。对于涉及多个键的操作(如跨槽的事务、集合操作等),Redis Cluster提供有限的支持,确保数据在集群内的某种程度上的一致性。

Module System

  • 插件化扩展:Redis支持Module System,允许开发者使用C语言编写自定义的数据类型、命令和脚本,无缝集成到Redis服务器中,从而扩展Redis的功能,满足特定业务需求。

其他特性

  • Lua脚本:Redis支持在服务器端执行Lua脚本,实现原子性、复合操作,减少网络往返延迟,并确保数据一致性。
  • LRU/EVICT策略:Redis提供了多种数据淘汰策略,如LRU(Least Recently Used)和TTL(Time To Live),用于在内存不足时自动删除较旧或过期的数据,以维持内存使用在配置的限制范围内。
相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
7天前
|
缓存 NoSQL Redis
软件体系结构 - 缓存技术(7)Redis持久化方法
【4月更文挑战第20天】软件体系结构 - 缓存技术(7)Redis持久化方法
82 14
|
7天前
|
存储 缓存 运维
软件体系结构 - 缓存技术(5)Redis Cluster
【4月更文挑战第20天】软件体系结构 - 缓存技术(5)Redis Cluster
137 10
|
7天前
|
存储 缓存 NoSQL
软件体系结构 - 缓存技术(4)Redis分布式存储
【4月更文挑战第20天】软件体系结构 - 缓存技术(4)Redis分布式存储
39 12
|
7天前
|
存储 缓存 NoSQL
软件体系结构 - 缓存技术(2)Redis
【4月更文挑战第20天】软件体系结构 - 缓存技术(2)Redis
47 12
|
20天前
|
存储 NoSQL 算法
09- Redis分片集群中数据是怎么存储和读取的 ?
Redis分片集群使用哈希槽分区算法,包含16384个槽(0-16383)。数据存储时,通过CRC16算法对key计算并模16383,确定槽位,进而分配至对应节点。读取时,根据槽位找到相应节点直接操作。
54 12
|
20天前
|
NoSQL Linux Redis
06- 你们使用Redis是单点还是集群 ? 哪种集群 ?
**Redis配置:** 使用哨兵集群,结构为1主2从,加上3个哨兵节点,总计分布在3台Linux服务器上,提供高可用性。
327 0
|
29天前
|
负载均衡 监控 NoSQL
Redis的集群方案有哪些?
Redis集群包括主从复制(基础,手动故障恢复)、哨兵模式(自动高可用)和Redis Cluster(官方分布式解决方案,自动分片和容错)。此外,还有如Codis、Redisson和Twemproxy等第三方工具用于代理和负载均衡。选择方案需考虑应用场景、数据规模和并发需求。
275 2
|
2月前
|
NoSQL Redis
Redis集群(六):集群常用命令及说明
Redis集群(六):集群常用命令及说明
233 0
|
6天前
|
存储 NoSQL 算法
Redis 搭建分片集群
Redis 搭建分片集群
15 2
|
29天前
|
NoSQL Java 测试技术
面试官:如何搭建Redis集群?
**Redis Cluster** 是从 Redis 3.0 开始引入的集群解决方案,它分散数据以减少对单个主节点的依赖,提升读写性能。16384 个槽位分配给节点,客户端通过槽位信息直接路由请求。集群是无代理、去中心化的,多数命令直接由节点处理,保持高性能。通过 `create-cluster` 工具快速搭建集群,但适用于测试环境。在生产环境,需手动配置文件,启动节点,然后使用 `redis-cli --cluster create` 分配槽位和从节点。集群动态添加删除节点、数据重新分片及故障转移涉及复杂操作,包括主从切换和槽位迁移。
34 0
面试官:如何搭建Redis集群?