27.【学习心得】学习心得-如何更新redis缓存

简介: 【学习心得】学习心得-如何更新redis缓存

文档参考:书名:《从程序员到架构师:大数据量、缓存、高并发、微服务、多团队协同等核心场景实战》-王伟杰

image.png

前文如下:


23.【学习心得】学习心得-冷热分离概述

24.【学习心得】学习心得-如何分离冷热数据

25.【学习心得】学习心得-基于MySQL的分表分库

26.【学习心得】学习心得-读缓存


1.如何更新缓存


更新缓存的步骤特别简单,共两步:更新数据库和更新缓存。但这简单的两步中需要考虑很多问题。

1)先更新数据库还是先更新缓存?更新缓存时先删除还是直接更新?

2)假设第一步成功了,第二步失败了怎么办?

3)假设两个线程同时更新同一个数据,A线程先完成第一步,B线程先完成第二步怎么办?


1.1 组合1:先更新缓存,再更新数据库


对于这个组合,会遇到这种情况:假设第二步更新数据库失败了,要求回滚缓存的更新,这时该怎么办呢?Redis不支持事务回滚,除非采用手工回滚的方式,先保存原有数据,然后再将缓存更新回原来的数据,这种解决方案有些缺陷。


1.1.1 缺陷


1)原来缓存中的值是a,两个线程同时更新库存。

2)线程A将缓存中的值更新成b,且保存了原来的值a,然后更新数据库。

3)线程B将缓存中的值更新成c,且保存了原来的值b,然后更新数据库。

4)线程A更新数据库时失败了,它必须回滚,那现在缓存中的值更新成什么呢?理论上应该更新成c,因为数据库中的值是c,但是,线程A里面无从获得c这个值。

image.png

缓存=a,数据库=a

线程A修改缓存为b,修改成功,缓存=b,本地原值=a,数据库=a

线程B修改缓存为c,修改成功,缓存=c,本地原值=b,数据库=a

线程B将数据库修改为c,修改成功,缓存=c,本地原值=b,数据库=c

线程A将数据库修改为b,修改失败,数据库回滚,数据库=c,本地原值=a,缓存回滚=原值a


1.1.2 总结


线程A更新,B线程更新:A线程先修改缓存,然后B线程快,把数据库和缓存都更新了;A更新数据库失败回滚,数据库回滚到B线程修改的值,缓存回滚到A线程原值,导致数据不一致


1.2 组合2:先删除缓存,再更新数据库


使用这种方案,即使更新数据库失败了也不需要回滚缓存。这种做法虽然巧妙规避了失败回滚的问题,却引出了两个更大的问题。


1.2.1 缺陷

1)假设线程A先删除缓存,再更新数据库。在线程A完成更新数据库之前,后执行的线程B反而超前完成了操作,读取Key发现没有数据后,将数据库中的旧值存放到了缓存中。线程A在线程B都完成后再更新数据库,这样就会出现缓存(旧值)与数据库的值(新值)不一致的问题

2)为了解决一致性问题,可以让线程A给Key加锁,也就是删除redis和更新库放在同一个事务操作里面,因为写操作特别耗时,这种处理方法会导致大量的读请求卡在锁中。

image.png


缓存=a,数据库=a

线程A删除缓存,删除成功,缓存=null,数据库=a

线程B读取缓存为null,读取数据库值=a更新到缓存,缓存=a,数据库=a

线程A将数据库修改为b,修改成功,缓存=a,数据库=b


1.2.2 总结


线程A更新,线程B读取:A线程删完后,数据库还没来得及更新;B线程又把数据库旧值更新到redis里,然后A线程更新数据库成功,导致这样缓存(旧值)与数据库的值(新值)不一致的问题


1.3 组合3:先更新数据库,再更新缓存


对于组合3,同样需要考虑两个问题。


1.3.1 缺陷


1)假设第一步(更新数据库)成功,第二步(更新缓存)失败了怎么办?因为缓存不是主流程,数据库才是,所以不会因为更新缓存失败而回滚第一步对数据库的更新。此时一般采取的做法是重试机制,但重试机制如果存在延时还是会出现数据库与缓存不一致的情况,不好处理。


image.png


缓存=a,数据库=a

线程A修改数据库为b,修改成功,缓存=a,数据库=b

线程A将缓存修改为b,修改失败,缓存=a,数据库=b

2)假设两个线程同时更新同一个数据,线程A先完成了第一步,线程B先完成了第二步怎么办?线程A把值更新成a,线程B把值更新成b,此时数据库中的最新值是b,因为线程A先完成了第一步,后完成第二步,所以缓存中的最新值是a,数据库与缓存的值还是不一致,这个逻辑还是有问题的。因此,也不建议采用这个组合。


image.png


缓存=a,数据库=a

线程A修改数据库为b,修改成功,缓存=a,数据库=b

线程B修改数据库为c,修改成功,缓存=a,数据库=c

线程B将缓存修改为c,修改成功,缓存=c,数据库=c

线程B将缓存修改为b,修改成功,缓存=b,数据库=c


1.3.1 总结


场景1:线程A更新,B线程读取:A线程数据库更新成功,缓存更新失败,数据不一致,可以增加重试。但是重试过程中线程B读到旧的缓存数据

场景2:线程A更新,B线程更新:A线程数据库更新成功,然后B线程数据库和缓存先更新完;然后A线程才更新成功缓存;导致缓存存的A线程修改值,数据库存的B线程修改值,数据不一致


1.4 组合4:先更新数据库,再删除缓存


针对组合4,先看看它能不能解决组合3的第二个问题。假设两个线程同时更新同一个数据,线程A先完成第一步,线程B先完成第二步怎么办?线程A把值更新成b,线程B把值更新成c,此时数据库中的最新值是c,因为线程A先完成了第一步,所以第二步谁先完成已经不重要了,因为都是直接删除缓存数据。这个问题解决了。


image.png


缓存=a,数据库=a

线程A修改数据库为b,修改成功,缓存=a,数据库=b

线程B修改数据库为c,修改成功,缓存=a,数据库=c

线程B将缓存删除,删除成功,缓存=null,数据库=c

线程A将缓存删除,删除成功,缓存=null,数据库=c


那么,它能解决组合3的第一个问题吗?假设第一步成功,第二步失败了怎么办?这种情况的出现概率与组合3相比明显低不少,因为删除比更新容易多了。虽然这个组合方案不完美,但出现一致性问题的概率较低。除了组合3会碰到的问题,组合4还会碰到别的问题吗?


是的。假设线程A要更新数据,先完成第一步更新数据库,在线程A删除缓存之前,线程B要访问缓存,那么取得的就是旧数据。这是一个小小的缺陷。


image.png


缓存=a,数据库=a

线程A修改数据库为b,修改成功,缓存=a,数据库=b

线程B读取缓存,读到缓存=a,数据库=b

线程A将缓存删除,删除成功,缓存=null,数据库=b


1.4.2 总结


场景1:线程A更新,B线程读取:A线程数据库更新成功,缓存删除不是同一个事务中(失败概率较低),B线程会读数据库最新的值到缓存;但是A线程数据库更新和缓存删除不是同一个事务中,B线程读到的缓存和数据库不一致,此场景概率较小


场景2:线程A更新,B线程更新:最终缓存都是null,其他线程读取都得读一次库再更新到缓存。

那么,以上问题有办法解决吗?


1.5 组合5:先删除缓存,更新数据库,再删除缓存(延迟双删)


还有一个方案,就是先删除缓存,再更新数据库,再删除缓存。这个方案其实和先更新数据库,再删除缓存差不多,因为还是会出现类似的问题:假设线程A要更新数据库,先删除了缓存,这一瞬间线程B要读缓存,先把数据迁移到缓存;然后线程A完成了更新数据库的操作,这一瞬间线程C也要访问缓存,此时它访问到的就是线程C放到缓存里面的旧数据


image.png



缓存=a,数据库=a

线程A删除缓存,删除成功,缓存=null,数据库=a

线程B读取缓存为null,读取数据库值=a更新到缓存,缓存=a,数据库=a

线程A将数据库修改为b,修改成功,缓存=a,数据库=b

线程C读取缓存,读取成功,缓存=a,数据库=b


不过组合5出现类似问题的概率更低,因为要刚好有3个线程配合才会出现问题(比先更新数据库,再删除缓存的方案多了一个需要配合的线程)。但是相比于组合4,组合5规避了第二步删除缓存失败的问题——组合5是先删除缓存,再更新数据库,假设它的第三步“再删除缓存”失败了,也没关系,因为缓存已经删除了。 其实没有一个组合是完美的,它们都有读到脏数据(这里指旧数据)的可能性,只不过概率不同。根据以上分析,组合5相对来说是比较好的选择。


1.5.1 缺陷


不过这个组合也有一些问题要考虑,具体如下。


1)删除缓存数据后变相出现缓存击穿,此时该怎么办?

2)删除缓存失败如何重试?这个重试可以做得复杂一点,也可以做得简单一点。简单一点就是使用try…catch…,假设删除缓存失败了,在catch里面重试一次即可;复杂一点就是使用一个异步线程不断重试,甚至用到MQ。不过这里没有必要大动干戈。而且异步重试的延时大,会带来更多的读脏数据的可能性。所以仅仅同步重试一次就可以了。

3)不可避免的脏数据问题。虽然这个问题在组合5中出现的概率已经大大降低了,但是还是有的。关于这一点就需要与业务沟通,毕竟这种情况比较少见,可以根据实际业务情况判断是否需要解决这个瑕疵。


1.5.2 总结


延时双删,有等待环节,如果系统要求低延时,这种场景就不合适了。 延时双删,不适合“秒杀”这种频繁修改数据和要求数据强一致的场景。 延时双删,延时时间是一个预估值,不能确保 mysql 和 redis 数据在这个时间段内都实时同步或持久化成功了。



相关文章
|
12月前
|
缓存 NoSQL 关系型数据库
美团面试:MySQL有1000w数据,redis只存20w的数据,如何做 缓存 设计?
美团面试:MySQL有1000w数据,redis只存20w的数据,如何做 缓存 设计?
美团面试:MySQL有1000w数据,redis只存20w的数据,如何做 缓存 设计?
|
7月前
|
缓存 负载均衡 监控
135_负载均衡:Redis缓存 - 提高缓存命中率的配置与最佳实践
在现代大型语言模型(LLM)部署架构中,缓存系统扮演着至关重要的角色。随着LLM应用规模的不断扩大和用户需求的持续增长,如何构建高效、可靠的缓存架构成为系统性能优化的核心挑战。Redis作为业界领先的内存数据库,因其高性能、丰富的数据结构和灵活的配置选项,已成为LLM部署中首选的缓存解决方案。
769 25
|
8月前
|
存储 缓存 NoSQL
Redis专题-实战篇二-商户查询缓存
本文介绍了缓存的基本概念、应用场景及实现方式,涵盖Redis缓存设计、缓存更新策略、缓存穿透问题及其解决方案。重点讲解了缓存空对象与布隆过滤器的使用,并通过代码示例演示了商铺查询的缓存优化实践。
348 1
Redis专题-实战篇二-商户查询缓存
|
7月前
|
NoSQL 算法 Redis
【Docker】(3)学习Docker中 镜像与容器数据卷、映射关系!手把手带你安装 MySql主从同步 和 Redis三主三从集群!并且进行主从切换与扩容操作,还有分析 哈希分区 等知识点!
Union文件系统(UnionFS)是一种**分层、轻量级并且高性能的文件系统**,它支持对文件系统的修改作为一次提交来一层层的叠加,同时可以将不同目录挂载到同一个虚拟文件系统下(unite several directories into a single virtual filesystem) Union 文件系统是 Docker 镜像的基础。 镜像可以通过分层来进行继承,基于基础镜像(没有父镜像),可以制作各种具体的应用镜像。
808 6
|
7月前
|
缓存 运维 监控
Redis 7.0 高性能缓存架构设计与优化
🌟蒋星熠Jaxonic,技术宇宙中的星际旅人。深耕Redis 7.0高性能缓存架构,探索函数化编程、多层缓存、集群优化与分片消息系统,用代码在二进制星河中谱写极客诗篇。
1352 3
|
8月前
|
缓存 NoSQL 关系型数据库
Redis缓存和分布式锁
Redis 是一种高性能的键值存储系统,广泛用于缓存、消息队列和内存数据库。其典型应用包括缓解关系型数据库压力,通过缓存热点数据提高查询效率,支持高并发访问。此外,Redis 还可用于实现分布式锁,解决分布式系统中的资源竞争问题。文章还探讨了缓存的更新策略、缓存穿透与雪崩的解决方案,以及 Redlock 算法等关键技术。
|
存储 缓存 NoSQL
Spring Boot2.5 实战 MongoDB 与高并发 Redis 缓存|学习笔记
快速学习 Spring Boot2.5 实战 MongoDB 与高并发 Redis 缓存
Spring Boot2.5 实战 MongoDB 与高并发 Redis 缓存|学习笔记
|
缓存 NoSQL 安全
6.0Spring Boot 2.0实战 Redis 分布式缓存6.0|学习笔记
快速学习6.0Spring Boot 2.0实战 Redis 分布式缓存6.0。
653 0
6.0Spring Boot 2.0实战 Redis 分布式缓存6.0|学习笔记
|
缓存 NoSQL Redis
首页数据显示-添加 redis 缓存(3)| 学习笔记
快速学习 首页数据显示-添加 redis 缓存(3)
305 0
首页数据显示-添加 redis 缓存(3)| 学习笔记
|
缓存 NoSQL Java
首页数据显示-添加 redis 缓存(1) | 学习笔记
快速学习 首页数据显示-添加 redis 缓存(1)
388 0
首页数据显示-添加 redis 缓存(1) | 学习笔记