【2023】Redis缓存高并发

本文涉及的产品
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
云数据库 Tair(兼容Redis),内存型 2GB
简介: 【2023】Redis缓存高并发

1.Redis缓存

Redis是一种高性能的键值对存储系统,它支持多种数据结构,包括字符串、散列、列表和有序集合等。它的缓存机制也非常强大,支持多种缓存策略,包括缓存预热、缓存过期、缓存监测等。

Redis缓存可以用于处理高并发的请求,减轻数据库负载,提高系统性能。它可以将常用数据存储在内存中,以便于快速访问,从而减少了对数据库的查询次数,提高了响应速度。

单个Redis实例可以支持数万甚至数十万每秒的并发读取操作。但是,这取决于Redis的配置和性能优化,以及应用程序的具体需求。

1.1.Redis缓存的优点包括:

  • 高性能:Redis支持多种数据结构和缓存策略,可以大大提高数据读取和写入的速度。
  • 可扩展性:Redis支持分布式部署,可以在不增加硬件资源的情况下支持更高的并发访问。
  • 可靠性:Redis支持多种数据备份和故障恢复方法,可以保证数据的安全和完整性。
  • 简单易用:Redis提供了多种API和SDK,支持多种编程语言,可以方便地集成到已有的系统中。

1.2.Redis缓存的缺点包括:

  • 数据存储有限:Redis的内存容量有限,不能存储过多的数据。因此,在使用Redis缓存之前,需要对数据进行清洗和压缩,以便于存储。
  • 缓存过期:如果缓存数据没有及时清除,或者缓存的过期时间已经到了,那么缓存中的数据就会丢失。因此,需要定期清除缓存中的数据,或者设置缓存过期时间。
  • 并发访问的安全性:如果没有对并发访问进行安全控制,那么可能会出现缓存数据被篡改或者冲突的情况。因此,需要对并发访问进行安全控制,保证缓存的安全和完整性。

在一个高并发的场景下,缓存可能会面临以下问题:

2.缓存雪崩

缓存雪崩是指大量数据同时访问缓存系统,导致缓存系统负载过高,出现服务器宕机或者缓存数据丢失的情况。

如果发生在服务器宕机的情况:可以将Redis部署为集群模式,确保一份数据在多节点存在,这样即使有单节点不可用,也会有其他节点作为代替。

如果有更大的规模,也可以将Redis集群跨机房部署,Master节点与Slave节点部署在不同的机房,以满足容灾要求。

人为制造雪崩:不管是有意也好,无意也好,总之假如你需要重启服务器了,而并没有将缓存数据做持久化处理,那么服务器重启后数据将空空如也,也就是人为制造雪崩,所以重启需谨慎。

大量缓存失效:有时候,缓存的数据是集中预热的,比如你每天的某个时间点将数据更新到缓存,就可能导致一大批缓存是集中于一个时间更新的,然后也可能会在某段时间后突然集中失效。可以通过在原有过期时间的基础上设置一个范围的随机数,这样即使是同一时间更新,也不会发生集中失效。

3.缓存穿透

缓存穿透指的是当请求一个缓存中不存在的数据时,这个请求会直接访问数据库。如果请求的数据在数据库中也不存在,那么这个请求会一直被重复发出直到被处理掉,这就导致了大量的无效数据库请求,从而影响系统的性能。

通常,这种攻击是由恶意攻击者发起的,他们会发送大量的请求来试探系统中是否存在他们想要的数据。缓存穿透问题可以通过使用布隆过滤器等技术来解决。

解决思路:

1️⃣:布隆过滤器:在Redis中使用布隆过滤器存储所有可能的请求参数,当请求到来时,首先通过布隆过滤器判断该请求是否在可能的参数范围内,如果不在,则直接返回无结果。

2️⃣:缓存空白值:在缓存中存储一个空对象,如null或者空字符串,当缓存中查询不到数据时,直接返回空对象。

3️⃣:接口限流:对接口的访问进行限流,例如使用Redis进行令牌桶限流等。

4️⃣:数据预热:在系统启动时,将热门数据预热到缓存中,保证缓存中有足够的数据,避免发生缓存穿透。

4.缓存穿击

如果我们的key过期了,但是这个key又是个热门,这些流量就可能会穿击透过redis进入数据库,如果并发大可能会打垮数据库/

对于这种情况,可以考虑这些解决办法:

1️⃣:对于一些热门的key,不设置过期时间,而是定期更新其值

2️⃣:逻辑过期,当数据过期时候,让任务异步重新刷新这个缓存,重新设置过期时间和逻辑过期时间。

3️⃣:互斥锁,即每次发现key不存在的时候就加锁,只放一条线程去数据库查询真实数据,其他线程等候,直到被唤醒的时候重新检查缓存,就能直接返回缓存数据。

5.缓存打满

缓存打满是指缓存系统中所有可用空间都已被占满的状态。在这种情况下,当有新的数据需要被缓存时,缓存系统就需要将一些已缓存的数据删除,以便为新的数据腾出空间。

缓存打满可能会导致系统性能下降,因为当缓存系统需要删除已缓存的数据时,它需要花费更多时间来查找和删除数据,从而增加了系统的响应时间。

为了避免缓存打满的情况发生,可以通过增加缓存大小或者使用更高效的缓存算法来提高缓存系统的性能。

上限由配置maxmemory决定

缓存打满一般发生在数据没设置过期时间设置过期时间不合理的情况

可通过这些办法解决:

1️⃣:存储隔离,针对一些不过期的数据,与正常的缓存数据做分离

2️⃣:容量监控,针对内存作监控,针对key的过期时间做监控等

相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
目录
相关文章
|
4天前
|
缓存 NoSQL Redis
Redis 缓存使用的实践
《Redis缓存最佳实践指南》涵盖缓存更新策略、缓存击穿防护、大key处理和性能优化。包括Cache Aside Pattern、Write Through、分布式锁、大key拆分和批量操作等技术,帮助你在项目中高效使用Redis缓存。
48 22
|
3天前
|
缓存 NoSQL 中间件
redis高并发缓存中间件总结!
本文档详细介绍了高并发缓存中间件Redis的原理、高级操作及其在电商架构中的应用。通过阿里云的角度,分析了Redis与架构的关系,并展示了无Redis和使用Redis缓存的架构图。文档还涵盖了Redis的基本特性、应用场景、安装部署步骤、配置文件详解、启动和关闭方法、systemctl管理脚本的生成以及日志警告处理等内容。适合初学者和有一定经验的技术人员参考学习。
39 7
|
7天前
|
存储 缓存 监控
利用 Redis 缓存特性避免缓存穿透的策略与方法
【10月更文挑战第23天】通过以上对利用 Redis 缓存特性避免缓存穿透的详细阐述,我们对这一策略有了更深入的理解。在实际应用中,我们需要根据具体情况灵活运用这些方法,并结合其他技术手段,共同保障系统的稳定和高效运行。同时,要不断关注 Redis 缓存特性的发展和变化,及时调整策略,以应对不断出现的新挑战。
33 10
|
7天前
|
缓存 监控 NoSQL
Redis 缓存穿透的检测方法与分析
【10月更文挑战第23天】通过以上对 Redis 缓存穿透检测方法的深入探讨,我们对如何及时发现和处理这一问题有了更全面的认识。在实际应用中,我们需要综合运用多种检测手段,并结合业务场景和实际情况进行分析,以确保能够准确、及时地检测到缓存穿透现象,并采取有效的措施加以解决。同时,要不断优化和改进检测方法,提高检测的准确性和效率,为系统的稳定运行提供有力保障。
33 5
|
7天前
|
缓存 监控 NoSQL
Redis 缓存穿透及其应对策略
【10月更文挑战第23天】通过以上对 Redis 缓存穿透的详细阐述,我们对这一问题有了更深入的理解。在实际应用中,我们需要根据具体情况综合运用多种方法来解决缓存穿透问题,以保障系统的稳定运行和高效性能。同时,要不断关注技术的发展和变化,及时调整策略,以应对不断出现的新挑战。
26 4
|
8天前
|
缓存 NoSQL Java
有Redis为什么还要本地缓存?谈谈你对本地缓存的理解?
有Redis为什么还要本地缓存?谈谈你对本地缓存的理解?
22 0
有Redis为什么还要本地缓存?谈谈你对本地缓存的理解?
|
存储 缓存 NoSQL
Spring Boot2.5 实战 MongoDB 与高并发 Redis 缓存|学习笔记
快速学习 Spring Boot2.5 实战 MongoDB 与高并发 Redis 缓存
Spring Boot2.5 实战 MongoDB 与高并发 Redis 缓存|学习笔记
|
缓存 NoSQL 安全
6.0Spring Boot 2.0实战 Redis 分布式缓存6.0|学习笔记
快速学习6.0Spring Boot 2.0实战 Redis 分布式缓存6.0。
323 0
6.0Spring Boot 2.0实战 Redis 分布式缓存6.0|学习笔记
|
缓存 NoSQL Redis
首页数据显示-添加 redis 缓存(3)| 学习笔记
快速学习 首页数据显示-添加 redis 缓存(3)
149 0
首页数据显示-添加 redis 缓存(3)| 学习笔记
|
缓存 NoSQL Java
首页数据显示-添加 redis 缓存(1) | 学习笔记
快速学习 首页数据显示-添加 redis 缓存(1)
234 0
首页数据显示-添加 redis 缓存(1) | 学习笔记