【2023】Redis缓存高并发

本文涉及的产品
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
云数据库 Tair(兼容Redis),内存型 2GB
简介: 【2023】Redis缓存高并发

1.Redis缓存

Redis是一种高性能的键值对存储系统,它支持多种数据结构,包括字符串、散列、列表和有序集合等。它的缓存机制也非常强大,支持多种缓存策略,包括缓存预热、缓存过期、缓存监测等。

Redis缓存可以用于处理高并发的请求,减轻数据库负载,提高系统性能。它可以将常用数据存储在内存中,以便于快速访问,从而减少了对数据库的查询次数,提高了响应速度。

单个Redis实例可以支持数万甚至数十万每秒的并发读取操作。但是,这取决于Redis的配置和性能优化,以及应用程序的具体需求。

1.1.Redis缓存的优点包括:

  • 高性能:Redis支持多种数据结构和缓存策略,可以大大提高数据读取和写入的速度。
  • 可扩展性:Redis支持分布式部署,可以在不增加硬件资源的情况下支持更高的并发访问。
  • 可靠性:Redis支持多种数据备份和故障恢复方法,可以保证数据的安全和完整性。
  • 简单易用:Redis提供了多种API和SDK,支持多种编程语言,可以方便地集成到已有的系统中。

1.2.Redis缓存的缺点包括:

  • 数据存储有限:Redis的内存容量有限,不能存储过多的数据。因此,在使用Redis缓存之前,需要对数据进行清洗和压缩,以便于存储。
  • 缓存过期:如果缓存数据没有及时清除,或者缓存的过期时间已经到了,那么缓存中的数据就会丢失。因此,需要定期清除缓存中的数据,或者设置缓存过期时间。
  • 并发访问的安全性:如果没有对并发访问进行安全控制,那么可能会出现缓存数据被篡改或者冲突的情况。因此,需要对并发访问进行安全控制,保证缓存的安全和完整性。

在一个高并发的场景下,缓存可能会面临以下问题:

2.缓存雪崩

缓存雪崩是指大量数据同时访问缓存系统,导致缓存系统负载过高,出现服务器宕机或者缓存数据丢失的情况。

如果发生在服务器宕机的情况:可以将Redis部署为集群模式,确保一份数据在多节点存在,这样即使有单节点不可用,也会有其他节点作为代替。

如果有更大的规模,也可以将Redis集群跨机房部署,Master节点与Slave节点部署在不同的机房,以满足容灾要求。

人为制造雪崩:不管是有意也好,无意也好,总之假如你需要重启服务器了,而并没有将缓存数据做持久化处理,那么服务器重启后数据将空空如也,也就是人为制造雪崩,所以重启需谨慎。

大量缓存失效:有时候,缓存的数据是集中预热的,比如你每天的某个时间点将数据更新到缓存,就可能导致一大批缓存是集中于一个时间更新的,然后也可能会在某段时间后突然集中失效。可以通过在原有过期时间的基础上设置一个范围的随机数,这样即使是同一时间更新,也不会发生集中失效。

3.缓存穿透

缓存穿透指的是当请求一个缓存中不存在的数据时,这个请求会直接访问数据库。如果请求的数据在数据库中也不存在,那么这个请求会一直被重复发出直到被处理掉,这就导致了大量的无效数据库请求,从而影响系统的性能。

通常,这种攻击是由恶意攻击者发起的,他们会发送大量的请求来试探系统中是否存在他们想要的数据。缓存穿透问题可以通过使用布隆过滤器等技术来解决。

解决思路:

1️⃣:布隆过滤器:在Redis中使用布隆过滤器存储所有可能的请求参数,当请求到来时,首先通过布隆过滤器判断该请求是否在可能的参数范围内,如果不在,则直接返回无结果。

2️⃣:缓存空白值:在缓存中存储一个空对象,如null或者空字符串,当缓存中查询不到数据时,直接返回空对象。

3️⃣:接口限流:对接口的访问进行限流,例如使用Redis进行令牌桶限流等。

4️⃣:数据预热:在系统启动时,将热门数据预热到缓存中,保证缓存中有足够的数据,避免发生缓存穿透。

4.缓存穿击

如果我们的key过期了,但是这个key又是个热门,这些流量就可能会穿击透过redis进入数据库,如果并发大可能会打垮数据库/

对于这种情况,可以考虑这些解决办法:

1️⃣:对于一些热门的key,不设置过期时间,而是定期更新其值

2️⃣:逻辑过期,当数据过期时候,让任务异步重新刷新这个缓存,重新设置过期时间和逻辑过期时间。

3️⃣:互斥锁,即每次发现key不存在的时候就加锁,只放一条线程去数据库查询真实数据,其他线程等候,直到被唤醒的时候重新检查缓存,就能直接返回缓存数据。

5.缓存打满

缓存打满是指缓存系统中所有可用空间都已被占满的状态。在这种情况下,当有新的数据需要被缓存时,缓存系统就需要将一些已缓存的数据删除,以便为新的数据腾出空间。

缓存打满可能会导致系统性能下降,因为当缓存系统需要删除已缓存的数据时,它需要花费更多时间来查找和删除数据,从而增加了系统的响应时间。

为了避免缓存打满的情况发生,可以通过增加缓存大小或者使用更高效的缓存算法来提高缓存系统的性能。

上限由配置maxmemory决定

缓存打满一般发生在数据没设置过期时间设置过期时间不合理的情况

可通过这些办法解决:

1️⃣:存储隔离,针对一些不过期的数据,与正常的缓存数据做分离

2️⃣:容量监控,针对内存作监控,针对key的过期时间做监控等

相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
目录
相关文章
|
21天前
|
canal 缓存 NoSQL
Redis缓存与数据库如何保证一致性?同步删除+延时双删+异步监听+多重保障方案
根据对一致性的要求程度,提出多种解决方案:同步删除、同步删除+可靠消息、延时双删、异步监听+可靠消息、多重保障方案
Redis缓存与数据库如何保证一致性?同步删除+延时双删+异步监听+多重保障方案
|
22天前
|
存储 NoSQL Redis
SpringCloud基础7——Redis分布式缓存,RDB,AOF持久化+主从+哨兵+分片集群
Redis持久化、RDB和AOF方案、Redis主从集群、哨兵、分片集群、散列插槽、自动手动故障转移
SpringCloud基础7——Redis分布式缓存,RDB,AOF持久化+主从+哨兵+分片集群
|
5天前
|
存储 缓存 NoSQL
解决Redis缓存击穿问题的技术方法
解决Redis缓存击穿问题的技术方法
19 2
|
5天前
|
缓存 NoSQL Redis
解决 Redis 缓存穿透问题的有效方法
解决 Redis 缓存穿透问题的有效方法
17 2
|
1月前
|
缓存 NoSQL 关系型数据库
MySQL与Redis缓存一致性的实现与挑战
在现代软件开发中,MySQL作为关系型数据库管理系统,广泛应用于数据存储;而Redis则以其高性能的内存数据结构存储特性,常被用作缓存层来提升数据访问速度。然而,当MySQL与Redis结合使用时,确保两者之间的数据一致性成为了一个重要且复杂的挑战。本文将从技术角度分享MySQL与Redis缓存一致性的实现方法及其面临的挑战。
64 2
|
2月前
|
Java UED Maven
紧跟技术潮流:手把手教你构建响应式Vaadin应用,让用户体验无缝接轨!
【8月更文挑战第31天】本文从零开始,详细介绍如何使用强大的Java框架Vaadin构建流畅且响应式的Web应用程序。首先,确保安装JDK 1.8+、Maven 3.3.9+及IDE。接着,创建Maven项目并添加Vaadin依赖。然后,通过继承`UI`类创建主界面,并定义自定义主题与样式。利用Vaadin的响应式布局组件,如`HorizontalLayout`和`VerticalLayout`,实现多设备兼容性。
30 0
|
2月前
|
缓存 NoSQL Redis
Entity Framework Core 与 Redis 强强联手!实现高速缓存,提升应用性能超厉害
【8月更文挑战第31天】在现代应用开发中,结合 Entity Framework Core 与 Redis 可显著提升数据访问速度。Entity Framework Core 是一个强大的 ORM 框架,但处理频繁访问的数据时可能遇到性能瓶颈。Redis 作为高性能内存数据库,具备快速读写能力。两者结合利用 Redis 高速缓存,减少直接数据库访问,提高应用响应速度及性能。
40 0
|
存储 缓存 NoSQL
Spring Boot2.5 实战 MongoDB 与高并发 Redis 缓存|学习笔记
快速学习 Spring Boot2.5 实战 MongoDB 与高并发 Redis 缓存
Spring Boot2.5 实战 MongoDB 与高并发 Redis 缓存|学习笔记
|
缓存 NoSQL 安全
6.0Spring Boot 2.0实战 Redis 分布式缓存6.0|学习笔记
快速学习6.0Spring Boot 2.0实战 Redis 分布式缓存6.0。
314 0
6.0Spring Boot 2.0实战 Redis 分布式缓存6.0|学习笔记
|
缓存 NoSQL Redis
首页数据显示-添加 redis 缓存(3)| 学习笔记
快速学习 首页数据显示-添加 redis 缓存(3)
143 0
首页数据显示-添加 redis 缓存(3)| 学习笔记
下一篇
无影云桌面