Redis键过期策略、内存淘汰策略详解(下)

本文涉及的产品
云数据库 Redis 版,社区版 2GB
推荐场景:
搭建游戏排行榜
简介: Redis键过期策略、内存淘汰策略详解(下)

3 内存淘汰

3.1 内存淘汰策略

配置项

image.png

image.png

noeviction(Redis默认策略)

image.png

不删除任何东西,只需在写操作中返回错误。即不会继续服务写请求 (但DEL 请求可继续服务),读请求可继续进行。

这保证不会丢数据,但会让线上业务无法持续进行。

  • config.c
createEnumConfig("maxmemory-policy", NULL, 
  MODIFIABLE_CONFIG, maxmemory_policy_enum, 
    server.maxmemory_policy, 
      MAXMEMORY_NO_EVICTION, NULL, NULL),

allkeys-random

当内存不足以容纳新写入的数据时,在键空间中,随机移除某key。

但是凭啥随机呢,至少也是把最近最少使用的key删除。

allkeys-lru

当内存不足以容纳新写入数据时,在键空间中,移除最近最少使用的key,没有设置过期时间的 key 也会被淘汰。

allkeys-lfu(Least Frequently Used)

LRU的关键是看页面最后一次被使用到发生调度的时间长短,而LFU关键是看一定时间段内页面被使用的频率

volatile-lru(最常用)

尝试淘汰设置了过期时间的 key,最少使用的 key 优先被淘汰。

没有设置过期时间的 key 不会被淘汰,这样可以保证需要持久化的数据不会突然丢失。

区别于 allkey-lru,这个策略要淘汰的只是过期的 key 集。

volatile-lfu

volatile-random

淘汰的 key 是过期 key 集合中随机的 key。

volatile-ttl

淘汰的策略不是 LRU,而是 key 的剩余寿命 ttl 的值,ttl

越小越优先被淘汰。

volatile-xxx 策略只会针对带TTL的 key 进行淘汰,allkeys-xxx 策略会对所有的 key 进行淘汰。

  • 若只拿 Redis 做缓存,推荐 allkeys-xxx,客户端写缓存时不必携带TTL
  • 若你还想同时使用 Redis 持久化,推荐 volatile-xxx,这样可以保留没有TTL的 key,它们是永久 key 不会被 LRU 淘汰。

数据淘汰策略

1.volatile-lru:从已设置过期时间的数据集(server.db[i].expires)中挑选最近最少使用的数据淘汰

2.volatile-ttl:从已设置过期时间的数据集(server.db[i].expires)中挑选将要过期的数据淘汰

3.volatile-random:从已设置过期时间的数据集(server.db[i].expires)中任意选择数据淘汰

4.allkeys-lru:从数据集(server.db[i].dict)中挑选最近最少使用的数据淘汰;

5.allkeys-random:从数据集(server.db[i].dict)中任意选择数据淘汰;

6.no-enviction(驱逐):禁止驱逐数据。

应用场景

可以充分的利用Redis的特性,大大提高效率。


在主页中显示最新的项目列表

Redis使用的是常驻内存的缓存,速度非常快


LPUSH用来插入一个内容ID,作为关键字存储在列表头部

LTRIM用来限制列表中的项目数最多为5000

如果用户需要的检索的数据量超越这个缓存容量,这时才需要把请求发送到数据库

删除和过滤

如果一篇文章被删除,可以使用LREM从缓存中彻底清除掉


排行榜及相关问题

排行榜(leader board)按照得分进行排序


ZADD命令可以直接实现这个功能

ZREVRANGE命令可以用来按照得分来获取前100名的用户

ZRANK可以用来获取用户排名,非常直接而且操作容易

按照用户投票和时间排序

排行榜,得分会随着时间变化。

LPUSH和LTRIM命令结合运用,把文章添加到一个列表中

一项后台任务用来获取列表,并重新计算列表的排序,ZADD命令用来按照新的顺序填充生成列表。列表可以实现非常快速的检索,即使是负载很重的站点。


过期处理

使用Unix时间作为关键字,用来保持列表能够按时间排序。对current_time和time_to_live进行检索,完成查找过期项目的艰巨任务。另一项后台任务使用ZRANGE…WITHSCORES进行查询,删除过期的条目。


计数

进行各种数据统计的用途是非常广泛的,比如想知道什么时候封锁一个IP地址

INCRBY命令让这些变得很容易,通过原子递增保持计数

GETSET用来重置计数器

过期属性用来确认一个关键字什么时候应该删除


特定时间内的特定项目

这是特定访问者的问题,可以通过给每次页面浏览使用SADD命令来解决

SADD不会将已经存在的成员添加到一个集合。


Pub/Sub

在更新中保持用户对数据的映射是系统中的一个普遍任务。Redis的pub/sub功能使用了SUBSCRIBE、UNSUBSCRIBE和PUBLISH命令,让这个变得更加容易。


队列

在当前的编程中队列随处可见。除了push和pop类型的命令之外,Redis还有阻塞队列的命令,能够让一个程序在执行时被另一个程序添加到队列。



相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
目录
相关文章
|
15天前
|
NoSQL Redis
05- Redis的数据淘汰策略有哪些 ?
Redis 提供了 8 种数据淘汰策略:挥发性 LRU、LFU 和 TTL(针对有过期时间的数据),挥发性随机淘汰,以及全库的 LRU、LFU 随机淘汰,用于在内存不足时选择删除。另外,还有不淘汰策略(no-eviction),允许新写入操作报错而非删除数据。
182 1
|
16天前
|
NoSQL 安全 Redis
redis内存限制与淘汰策略
Redis内存管理包括限制和淘汰策略。`maxmemory`配置参数决定内存上限,无设置时64位系统默认不限制,可能导致系统资源耗尽,生产环境建议设定合理值。当内存满时,未设置淘汰策略会导致写入错误。Redis提供8种淘汰策略,如LRU(最近最少使用)和LFU(最不经常使用),以及随机或基于过期时间的删除。需根据数据重要性、访问频率和一致性选择合适策略。
153 0
|
22天前
|
存储 缓存 NoSQL
Redis 服务器指南:高性能内存数据库的完整使用指南
Redis 服务器指南:高性能内存数据库的完整使用指南
|
23天前
|
存储 缓存 NoSQL
Redis的内存淘汰策略是什么?
【4月更文挑战第2天】Redis内存淘汰策略在内存满时,通过删除旧数据为新数据腾空间。策略包括:volatile-lru/LFU(基于LRU/LFU算法淘汰有过期时间的键),volatile-random/ttl(随机/按TTL淘汰),allkeys-lru/LFU(所有键的LRU/LFU),allkeys-random(随机淘汰所有键),以及noeviction(不淘汰,返回错误)。选择策略要考虑访问模式、数据重要性和性能需求。
|
15天前
|
NoSQL Linux Redis
06- 你们使用Redis是单点还是集群 ? 哪种集群 ?
**Redis配置:** 使用哨兵集群,结构为1主2从,加上3个哨兵节点,总计分布在3台Linux服务器上,提供高可用性。
216 0
|
23天前
|
负载均衡 监控 NoSQL
Redis的集群方案有哪些?
Redis集群包括主从复制(基础,手动故障恢复)、哨兵模式(自动高可用)和Redis Cluster(官方分布式解决方案,自动分片和容错)。此外,还有如Codis、Redisson和Twemproxy等第三方工具用于代理和负载均衡。选择方案需考虑应用场景、数据规模和并发需求。
181 2
|
29天前
|
NoSQL Redis
Redis集群(六):集群常用命令及说明
Redis集群(六):集群常用命令及说明
176 0
|
2月前
|
运维 NoSQL 算法
Redis-Cluster 与 Redis 集群的技术大比拼
Redis-Cluster 与 Redis 集群的技术大比拼
81 0
|
23天前
|
NoSQL Java 测试技术
面试官:如何搭建Redis集群?
**Redis Cluster** 是从 Redis 3.0 开始引入的集群解决方案,它分散数据以减少对单个主节点的依赖,提升读写性能。16384 个槽位分配给节点,客户端通过槽位信息直接路由请求。集群是无代理、去中心化的,多数命令直接由节点处理,保持高性能。通过 `create-cluster` 工具快速搭建集群,但适用于测试环境。在生产环境,需手动配置文件,启动节点,然后使用 `redis-cli --cluster create` 分配槽位和从节点。集群动态添加删除节点、数据重新分片及故障转移涉及复杂操作,包括主从切换和槽位迁移。
31 0
面试官:如何搭建Redis集群?

热门文章

最新文章