AI 助理
文档备案控制台
开发者社区 数据库 文章 正文

Redis学习16：企业解决方案之缓存预热、缓存雪崩、缓存击穿、缓存穿透、性能指标监控等

2023-01-09 327
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 服务器宕机的问题排查

缓存预热

服务器宕机的问题排查：

bf5dd6cfaa49ea3eab8cf94a58f4f5f4_325bac28751740fd8f2b8199cbc1f6c8.png

ca1b7e8bedfe8b387dbfd85eb52da689_watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA572R5LqL6ZqP6aOOMjAxNw==,size_14,color_FFFFFF,t_70,g_se,x_16.png

37dc90d31ed93e62e9ca5be06eaef7d6_86b3a8c5a2904fc79d75ab62a49349d5.png


缓存雪崩

84c92f2e4ab45c51293a97fd7e2f2b9f_watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA572R5LqL6ZqP6aOOMjAxNw==,size_10,color_FFFFFF,t_70,g_se,x_16.png

6d665af1ff90a667065dc9f0954cd4a9_watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA572R5LqL6ZqP6aOOMjAxNw==,size_16,color_FFFFFF,t_70,g_se,x_16.png

22ad599b6f0bd01bb9896243872888d6_3e6bfd90da3a4818aa5c2847a2f4dfbe.png

3975d4db66a6797560b91582dfeda7cd_watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA572R5LqL6ZqP6aOOMjAxNw==,size_20,color_FFFFFF,t_70,g_se,x_16.png

418508965024129c1cbac030cd3b2850_watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA572R5LqL6ZqP6aOOMjAxNw==,size_16,color_FFFFFF,t_70,g_se,x_16.png096611ec9ddfc85fcf89263fe9d9bba1_watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA572R5LqL6ZqP6aOOMjAxNw==,size_20,color_FFFFFF,t_70,g_se,x_16.png

4fc5aa27c88226fa77560384f2306f71_watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA572R5LqL6ZqP6aOOMjAxNw==,size_20,color_FFFFFF,t_70,g_se,x_16.png

就是类似redis没有，全部挤在mysql访问了。

缓存击穿

be49d73fcc230da1162e1256fbafdd3c_watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA572R5LqL6ZqP6aOOMjAxNw==,size_9,color_FFFFFF,t_70,g_se,x_16.png

7a02e80fd471f63e76d331ac24ad6857_watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA572R5LqL6ZqP6aOOMjAxNw==,size_13,color_FFFFFF,t_70,g_se,x_16.png

d3f9339091f9426f2e534d7150ac74aa_050db89ee3484bf8afebe0b2173186ef.png


不是高热不会发生这个状况的。

cedb1bfc6e3e58f6722509c8c5874a04_watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA572R5LqL6ZqP6aOOMjAxNw==,size_19,color_FFFFFF,t_70,g_se,x_16.png


加锁，操作完一个走一个，这样就不会从一个key击穿整个redis。

加锁是没有办法的办法了。

b4aaab6cd1a0db9f07046563443cd398_watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA572R5LqL6ZqP6aOOMjAxNw==,size_20,color_FFFFFF,t_70,g_se,x_16.png

缓存穿透

1054040ea345eda7b643366845988817_watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA572R5LqL6ZqP6aOOMjAxNw==,size_9,color_FFFFFF,t_70,g_se,x_16.png

d470c64ed863018e386777eec0b69bc2_f7613492a1d84c72be4c1a547043934f.png

535a8c85a196a74c062543c16e2ae5c8_a7c9011ca8654960881bf089a4b82385.png

也就是大量的url无效访问，然后整崩数据库。

把服务器拖垮了。攻击没有的数据。

38c6ab603824626951999ecad588fd0c_watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA572R5LqL6ZqP6aOOMjAxNw==,size_20,color_FFFFFF,t_70,g_se,x_16.png

如果同时来几十万个请求，那缓存null就不太合适了，不可能建立几十万个null，内存泄漏了。

这种方法应对一些比较low的方法就好了。

布隆过滤器有个命中的问题。但是会并不考虑这个小误差。

03f465d4fed0006c4418de5f49a19c52_watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA572R5LqL6ZqP6aOOMjAxNw==,size_20,color_FFFFFF,t_70,g_se,x_16.png

性能指标监控

038dcac967b81a05859fbe933ea58c6f_watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA572R5LqL6ZqP6aOOMjAxNw==,size_7,color_FFFFFF,t_70,g_se,x_16.png

文章标签：
云数据库 Tair（兼容 Redis）
关系型数据库
NoSQL
监控
MySQL
Redis
数据库
缓存
关键词：
云数据库 Tair（兼容 Redis）缓存
redis缓存
缓存击穿
缓存穿透
缓存击穿穿透
洲的学习日记
目录
相关文章
海水哦
|
11月前
|
缓存 数据库连接 数据库
缓存三剑客（穿透、击穿、雪崩）
缓存穿透指查询数据库和缓存中都不存在的数据，导致请求直接冲击数据库。解决方案包括缓存空对象和布隆过滤器。缓存击穿是大量请求访问同一个失效的热点数据，使数据库瞬间压力剧增，解决方法有提前预热、设置永不过期、加锁限流等。缓存雪崩是大量key同时失效，导致所有请求直达数据库，可通过引入随机过期时间缓解。三者分别对应单点爆破、全面崩塌等问题，需根据场景选择合适策略优化系统性能与稳定性。
海水哦
612 0
安全风信子
|
8月前
|
缓存 负载均衡 监控
135_负载均衡：Redis缓存 - 提高缓存命中率的配置与最佳实践
在现代大型语言模型（LLM）部署架构中，缓存系统扮演着至关重要的角色。随着LLM应用规模的不断扩大和用户需求的持续增长，如何构建高效、可靠的缓存架构成为系统性能优化的核心挑战。Redis作为业界领先的内存数据库，因其高性能、丰富的数据结构和灵活的配置选项，已成为LLM部署中首选的缓存解决方案。
安全风信子
856 25
varin
|
9月前
|
存储 缓存 NoSQL
Redis专题-实战篇二-商户查询缓存
本文介绍了缓存的基本概念、应用场景及实现方式，涵盖Redis缓存设计、缓存更新策略、缓存穿透问题及其解决方案。重点讲解了缓存空对象与布隆过滤器的使用，并通过代码示例演示了商铺查询的缓存优化实践。
varin
381 1
Redis专题-实战篇二-商户查询缓存
蒋星熠Jaxonic
|
8月前
|
缓存 运维 监控
Redis 7.0 高性能缓存架构设计与优化
🌟蒋星熠Jaxonic，技术宇宙中的星际旅人。深耕Redis 7.0高性能缓存架构，探索函数化编程、多层缓存、集群优化与分片消息系统，用代码在二进制星河中谱写极客诗篇。
蒋星熠Jaxonic
1609 3
游客y6nbucfgpbrn4
|
9月前
|
缓存 NoSQL 关系型数据库
Redis缓存和分布式锁
Redis 是一种高性能的键值存储系统，广泛用于缓存、消息队列和内存数据库。其典型应用包括缓解关系型数据库压力，通过缓存热点数据提高查询效率，支持高并发访问。此外，Redis 还可用于实现分布式锁，解决分布式系统中的资源竞争问题。文章还探讨了缓存的更新策略、缓存穿透与雪崩的解决方案，以及 Redlock 算法等关键技术。
游客y6nbucfgpbrn4
488 0
左诗右码
|
10月前
|
缓存 监控 安全
告别缓存击穿！Go 语言中的防并发神器：singleflight 包深度解析
在高并发场景中，多个请求同时访问同一资源易导致缓存击穿、数据库压力过大。Go 语言提供的 `singleflight` 包可将相同 key 的请求合并，仅执行一次实际操作，其余请求共享结果，有效降低系统负载。本文详解其原理、实现及典型应用场景，并附示例代码，助你掌握高并发优化技巧。
左诗右码
740 0
技术自由圈/原疯狂创客圈
|
缓存 NoSQL 关系型数据库
美团面试：MySQL有1000w数据，redis只存20w的数据，如何做 缓存 设计？
美团面试：MySQL有1000w数据，redis只存20w的数据，如何做 缓存 设计？
技术自由圈/原疯狂创客圈
2396 12
美团面试：MySQL有1000w数据，redis只存20w的数据，如何做 缓存 设计？
pickstar-33775
|
缓存 NoSQL Java
Redis+Caffeine构建高性能二级缓存
大家好，我是摘星。今天为大家带来的是Redis+Caffeine构建高性能二级缓存，废话不多说直接开始~
pickstar-33775
1650 0
蓝易云
|
消息中间件 缓存 NoSQL
基于Spring Data Redis与RabbitMQ实现字符串缓存和计数功能（数据同步）
总的来说，借助Spring Data Redis和RabbitMQ，我们可以轻松实现字符串缓存和计数的功能。而关键的部分不过是一些"厨房的套路"，一旦你掌握了这些套路，那么你就像厨师一样可以准备出一道道饕餮美食了。通过这种方式促进数据处理效率无疑将大大提高我们的生产力。
蓝易云
386 32
卓伊凡
|
缓存 NoSQL Java
Redis：现代服务端开发的缓存基石与电商实践-优雅草卓伊凡
Redis：现代服务端开发的缓存基石与电商实践-优雅草卓伊凡
卓伊凡
331 5
Redis：现代服务端开发的缓存基石与电商实践-优雅草卓伊凡

热门文章

最新文章

  • 1
    关于java的DNS解析IP缓存问题
  • 2
    Enterprise Library 4.1学习笔记8----缓存应用程序块之FileDependency
  • 3
    Sync.Pool无锁ringbuffer队列+双向链表构建高性能缓存池
  • 4
    百万QPS系统的缓存实践
  • 5
    CPU缓存一致性协议MESi
  • 6
    nginx的反向代理缓存
  • 7
    Linux网络管理之arp命令 – 操纵系统arp缓存（地址解析协议）
  • 8
    艾伟_转载：Web网站缓存文件并发问题解决方案
  • 9
    Java版Spring Cloud B2B2C o2o社交电商-Hystrix的缓存使用
  • 10
    IE缓存的BUG 和其他浏览器的缓存问题
  • 1
    redis 集群模式（redis cluster）介绍
    9279
  • 2
    redis 集群 （主从复制 哨兵模式 cluster）
    399
  • 3
    redis 缓存穿透 击穿 雪崩 的原因及解决方法
    1089
  • 4
    redis 高可用与 持久化
    235
  • 5
    redis 数据库的安装及使用方法
    340
  • 6
    Redis 缓存失效策略及其应用场景
    534
  • 7
    Redis - 笔记
    516
  • 8
    Redis 安装
    417
  • 9
    详解Redis哨兵模式下，主节点掉线而重新选取主节点的流程
    995
  • 10
    Centos7 安装和配置 Redis 5 教程
    1987

    • 相关课程

    更多
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第一阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第四阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第五阶段
  • Redis入门实战演练
  • 云数据库 Redis 版使用教程
  • Redis数据库入门

    • 相关电子书

    更多
  • ApsaraDB for Redis——与创客同行
  • 微博的Redis定制之路
  • 云数据库Redis版的开源之路

    • 相关实验场景

    更多
  • 通过云原生API网关进行AI缓存
    • 下一篇
    利用阿里云OSS（对象存储服务）快速搭建私人网盘