Redis中缓存雪崩、缓存穿透、缓存降级等概念的简单说明

本文涉及的产品
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
云数据库 Tair(兼容Redis),内存型 2GB
简介: Redis中缓存雪崩、缓存穿透、缓存降级等概念的简单说明(言简意赅,不啰嗦): 1、缓存雪崩:缓存集中过期,新缓存还没能刷入进来,导致所有请求(查询)都走数据库,给数据库内存和CPU巨大压力,严重导致数据库宕机,进而造成系统崩溃。
 Redis中缓存雪崩、缓存穿透、缓存降级等概念的简单说明(言简意赅,不啰嗦):
      1、缓存雪崩:缓存集中过期,新缓存还没能刷入进来,导致所有请求(查询)都走数据库,给数据库内存和CPU巨大压力,严重导致数据库宕机,进而造成系统崩溃。
          (1)、在并发数不是特别多的情况下,最多的解决方案是加锁排队。
            public object GetProductListNew()
            {
                const int cacheTime = 30;
                const string cacheKey = "product_list";
                const string lockKey = cacheKey;
        
                  var cacheValue = CacheHelper.Get(cacheKey);
                  if (cacheValue != null)
                  {
                      return cacheValue;
                  }
                  else
                  {
                      lock (lockKey)
                      {
                          cacheValue = CacheHelper.Get(cacheKey);
                          if (cacheValue != null)
                          {
                                return cacheValue;
                          }
                          else
                          {
                              cacheValue = GetProductListFromDB(); //这里一般是 sql查询数据。              
                              CacheHelper.Add(cacheKey, cacheValue, cacheTime);
                          }                    
                      }
                      return cacheValue;
                 }
            } 
          (2)、加锁排队只是保护了数据库,并没有提高吞吐量,在高并发下,缓存重建期key是锁着的,导致用户等待超时。
                另一个解决方法是:给每一个缓存数据增加相应的缓存标记,记录缓存是否失效,如果缓存失效,从新刷入缓存。
                public object GetProductListNew()
                {
                    const int cacheTime = 30;
                    const string cacheKey = "product_list";
                    //缓存标记。
                    const string cacheSign = cacheKey + "_sign";
        
                    var sign = CacheHelper.Get(cacheSign);
                    //获取缓存值
                    var cacheValue = CacheHelper.Get(cacheKey);
                    if (sign != null)
                    {
                        return cacheValue; //未过期,直接返回。
                    }
                    else
                    {
                        CacheHelper.Add(cacheSign, "1", cacheTime);
                        ThreadPool.QueueUserWorkItem((arg) =>
                        {
                            cacheValue = GetProductListFromDB(); //这里一般是 sql查询数据。
                            CacheHelper.Add(cacheKey, cacheValue, cacheTime*2); //过期时间设缓存时间的2倍,用于脏读。                
                        });
            
                        return cacheValue;
                    }
                } 
                
                
        缓存标记:记录缓存数据是否过期,如果过期会触发另外的线程在后台去更新实际key的缓存。
        缓存数据:数据的过期时间是缓存标记的过期时间的2倍,当缓存标记key过期后,实际缓存还能把旧数据返回给用户,直到另外的线程在后台更新完缓存后,才返回新缓存的数据。
          
        设置缓存时候,尽量设置为一个随机的过期时间,尽量避免大量的缓存设置相同的过期时间,避免集中过期。
   
  2、缓存穿透
        这其实就是缓存命中率问题:用户查找的信息(例:id),在数据库中不存在,缓存中更没有。这就造成,每次都去数据库查一次,然后返回空。
        解决办法就是:如果查询数据库为空,直接设置一个默认的缓存值到缓存,这样再访问这个数据的时候,直接返回默认值,不会再访问数据库了。对需要查询的key进行预先的校验,校验通过的再放行给后面的正常的缓存处理逻辑。
        
        public object GetProductListNew()
        {
            const int cacheTime = 30;
            const string cacheKey = "product_list";

            var cacheValue = CacheHelper.Get(cacheKey);
            if (cacheValue != null)
                return cacheValue;
            
            cacheValue = CacheHelper.Get(cacheKey);
            if (cacheValue != null)
            {
                return cacheValue;
            }
            else
            {
                cacheValue = GetProductListFromDB(); //数据库查询不到,为空。
            
                if (cacheValue == null)
                {
                    cacheValue = string.Empty; //如果发现为空,设置个默认值,也缓存起来。                
                }
                CacheHelper.Add(cacheKey, cacheValue, cacheTime);
            
                return cacheValue;
            }
        }    
  3、缓存预热
        所谓预热,就是在用户使用之前,把需要缓存的数据,先缓存到缓存系统。
        操作方法:
           (1)、写个刷缓存的程序,上线前,手动刷一下。
           (2)、访问量低谷时定期定时刷缓存(凌晨3点-4点)。
  4、缓存更新
        (1)、访问量低谷时定期定时刷缓存凌晨3点-4点)。        
        (2)、当有用户请求时,再去判断是否过期,过期的话,再更新缓存。 
  5、缓存降级
        (1)、缓存降级:核心就是弃车保帅,保证核心服务可用,降级可以丢弃的服务,可以让程序实施自动降级,也可以人工紧急降级。
  6、分布式缓存系统的问题
        (1)、缓存系统与底层数据库的一致性。底层系统是可读可写时,很重要。
        (2)、缓存分层时候,不同层缓存的一致性。例如:全局缓存,二级缓存,全局缓存可以有二级缓存来组成。
        (3)、多个缓存副本的一致性。缓存系统背后往往是两套缓存系统(如memcached、redis等)。
  7、缓存淘汰:
        (1)、定时定期去清理过期的缓存。
        (2)、用户请求时再去更新缓存。
  8、缓存算法(缓存满了时候,那种缓存先淘汰)
        (1)、FIFO算法,先进先出。先缓存,先被淘汰。
        (2)、LFU算法,最不经常使用算法。 
        (3)、LRU算法,近期最少使用算法。
        
  备注: 根据博客和《深入理解redis》一书理解和整理。     
        
             
相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
4天前
|
存储 缓存 NoSQL
解决Redis缓存数据类型丢失问题
解决Redis缓存数据类型丢失问题
118 85
|
1天前
|
缓存 监控 NoSQL
Redis经典问题:缓存穿透
本文详细探讨了分布式系统和缓存应用中的经典问题——缓存穿透。缓存穿透是指用户请求的数据在缓存和数据库中都不存在,导致大量请求直接落到数据库上,可能引发数据库崩溃或性能下降。文章介绍了几种有效的解决方案,包括接口层增加校验、缓存空值、使用布隆过滤器、优化数据库查询以及加强监控报警机制。通过这些方法,可以有效缓解缓存穿透对系统的影响,提升系统的稳定性和性能。
|
1月前
|
缓存 NoSQL 关系型数据库
大厂面试高频:如何解决Redis缓存雪崩、缓存穿透、缓存并发等5大难题
本文详解缓存雪崩、缓存穿透、缓存并发及缓存预热等问题,提供高可用解决方案,帮助你在大厂面试和实际工作中应对这些常见并发场景。关注【mikechen的互联网架构】,10年+BAT架构经验倾囊相授。
大厂面试高频:如何解决Redis缓存雪崩、缓存穿透、缓存并发等5大难题
|
25天前
|
缓存 NoSQL 数据库
缓存穿透、缓存击穿和缓存雪崩及其解决方案
在现代应用中,缓存是提升性能的关键技术之一。然而,缓存系统也可能遇到一系列问题,如缓存穿透、缓存击穿和缓存雪崩。这些问题可能导致数据库压力过大,甚至系统崩溃。本文将探讨这些问题及其解决方案。
|
1月前
|
缓存 NoSQL PHP
Redis作为PHP缓存解决方案的优势、实现方式及注意事项。Redis凭借其高性能、丰富的数据结构、数据持久化和分布式支持等特点,在提升应用响应速度和处理能力方面表现突出
本文深入探讨了Redis作为PHP缓存解决方案的优势、实现方式及注意事项。Redis凭借其高性能、丰富的数据结构、数据持久化和分布式支持等特点,在提升应用响应速度和处理能力方面表现突出。文章还介绍了Redis在页面缓存、数据缓存和会话缓存等应用场景中的使用,并强调了缓存数据一致性、过期时间设置、容量控制和安全问题的重要性。
40 5
|
2月前
|
存储 缓存 NoSQL
数据的存储--Redis缓存存储(一)
数据的存储--Redis缓存存储(一)
103 1
|
2月前
|
存储 缓存 NoSQL
数据的存储--Redis缓存存储(二)
数据的存储--Redis缓存存储(二)
53 2
数据的存储--Redis缓存存储(二)
|
2月前
|
消息中间件 缓存 NoSQL
Redis 是一个高性能的键值对存储系统,常用于缓存、消息队列和会话管理等场景。
【10月更文挑战第4天】Redis 是一个高性能的键值对存储系统,常用于缓存、消息队列和会话管理等场景。随着数据增长,有时需要将 Redis 数据导出以进行分析、备份或迁移。本文详细介绍几种导出方法:1)使用 Redis 命令与重定向;2)利用 Redis 的 RDB 和 AOF 持久化功能;3)借助第三方工具如 `redis-dump`。每种方法均附有示例代码,帮助你轻松完成数据导出任务。无论数据量大小,总有一款适合你。
80 6
|
1月前
|
存储 缓存 NoSQL
【赵渝强老师】基于Redis的旁路缓存架构
本文介绍了引入缓存后的系统架构,通过缓存可以提升访问性能、降低网络拥堵、减轻服务负载和增强可扩展性。文中提供了相关图片和视频讲解,并讨论了数据库读写分离、分库分表等方法来减轻数据库压力。同时,文章也指出了缓存可能带来的复杂度增加、成本提高和数据一致性问题。
【赵渝强老师】基于Redis的旁路缓存架构
|
1月前
|
缓存 NoSQL Redis
Redis 缓存使用的实践
《Redis缓存最佳实践指南》涵盖缓存更新策略、缓存击穿防护、大key处理和性能优化。包括Cache Aside Pattern、Write Through、分布式锁、大key拆分和批量操作等技术,帮助你在项目中高效使用Redis缓存。
265 22