redis分布式锁面临的几个问题及解决方案

本文涉及的产品
云数据库 Redis 版,社区版 2GB
推荐场景:
搭建游戏排行榜
简介: redis分布式锁面临的几个问题及解决方案

前言

在我们的日常开发过程中,一般都会有一些定时任务,在集群环境中为保证定时任务运行在某一台机器上,这个时候就需要使用到分布式锁;另外在一些第三方框架中也会有分布式锁的应用,比如Seata分布式事务中,AT模式的行锁就是存放在TC服务中,一旦抢占到行锁的服务才能够操作对应的表数据,没拿到行锁的服务只能等待锁释放;

在日常开发中,通常会采用redis作为中间存储层来实现分布式锁。

redis分布式锁的几个问题及对应解决方案

一般我们实现的分布式锁伪代码如下,和jvm内存锁差不多:

try{
  boolean lock = false;
  // 上锁
  if(lock = tryLock()){
    // TODO 执行业务逻辑
  }
}finally{
  if(lock){
    // 解锁
    unlock();
  }
}
复制代码
  • 锁无法释放问题:

一旦抢占到锁的服务在执行业务逻辑时宕机了,那么该分布式锁就无法解除,其他服务就永远无法抢占到分布式锁;

为了解决抢占锁的服务宕机后导致其他服务无法拿到锁的问题,我们可以给分布式锁设置一个过期时间。伪代码如下:

try{
  boolean lock = false;
  // 上锁,过期时间30秒
  if(lock = tryLock(30)){
    // TODO 执行业务逻辑
  }
}finally{
  if(lock){
    // 解锁
    unlock();
  }
}
复制代码
  • 过期时间无法确定

因为我们无法为每个任务提前计算好执行时间,当前我们设置的过期时间是30秒,假如有任何一个任务的执行时间超过了30秒,那么就会导致过期后,有其他的进程抢占了分布式锁,也就意味着同一时间有多个任务在一个分布式锁中,这显然违背了分布式锁的互斥性;

  • 加解锁的同源性

如果任务A执行时间过长,任务还没执行完毕,分布式锁就过期了,那么任务B抢占到分布式锁,当任务A执行完毕后,将执行解锁操作,此刻解除的锁是任务B抢占到的锁;

为了解决上述两个问题,我们需要做以下处理:

1.为了在任务执行期间保证分布式锁不过期,我们需要添加一个定时任务检测分布式锁的剩余时间,当ttl还剩10秒时,我们可以给这个分布式锁续到30秒,直至任务执行完毕,该分布式锁被删除;

2.为了解决加解锁的同源性问题,我们在加锁的时候,需要带上相关的业务标签,比如tryLock(key,taskA,30)表示分布式锁key对应的值是taskA,过期时间为30秒,解锁时unlock(key,taskA)一定要对比此刻锁对应的值一定要时taskA;这样的话,才能保证加解锁的同源性;

所以,我们又可以升级一下我们的伪代码了:

try{
  String key = "myLock"
  String taskName = "taskA";
  boolean lock = false;
  // 上锁,过期时间30秒
  if(lock = tryLock(key,taskName,30)){
    // TODO 执行业务逻辑
  }
}finally{
  if(lock){
    // 解锁
    unlock(key,taskName);
  }
}
复制代码
  • 可重入性

在我们平时使用的jvm锁synchronized中,同一个线程是可以多次获取锁的,这称为锁的重入,那么我们的分布式锁可不可以实现类似的功能呢?

答案是可以的,我们需要修改底层实现分布式锁的的数据结构为HashmyLock:taskA:countmyLock代表分布式锁的key,taskA代表对应的对应的Hash结构的key,count代表锁重入的次数,每次重入加1,解锁就减1;

  • 原子性

我们在加解锁的过程中,必须保证加锁、解锁操作的原子性,所以我们必须通过Lua脚本来实现上述两个方法;

小结

我们通过伪代码一步一步提出redis分布式锁面临的问题,并同时给出了对应的解决方案,我们下面做出以下几点小结:

  1. redis分布式锁的加锁、解锁操作必须通过Lua脚本保证原子性;
  2. 为了保证服务宕机后不会影响其他服务抢占锁,需要设置锁的过期时间;
  3. 锁的过期时间带来两个问题,一个是无法确定任务执行时间;另一个就是过期后有可能导致加解锁不能保证同源性;
  4. 加上watch dog机制保证任务没执行完毕,锁不会过期;
  5. 加锁、解锁都带上对应的值标记,解锁时一定要判断是否和加锁的值一致,保证加解锁的同源性;
  6. 通过redis Hash结构实现分布式锁的重入性;



相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
4天前
|
存储 监控 NoSQL
【Redis】分布式锁及其他常见问题
【Redis】分布式锁及其他常见问题
16 0
|
4天前
|
NoSQL Java Redis
【Redis】Redis实现分布式锁
【Redis】Redis实现分布式锁
7 0
|
4天前
|
NoSQL 分布式数据库 MongoDB
【MongoDB 专栏】MongoDB 的分布式事务解决方案
【5月更文挑战第11天】本文探讨了MongoDB的分布式事务处理,涉及两阶段提交(2PC)、TCC补偿事务、分布式锁和幂等处理。2PC通过协调者与参与者确保数据一致性,而TCC提供更高性能和容错性。分布式锁解决并发冲突,幂等处理保证事务正确性。根据业务需求选择合适方案,并关注性能、可靠性和容错。
【MongoDB 专栏】MongoDB 的分布式事务解决方案
|
4天前
|
缓存 NoSQL 搜索推荐
Redis缓存雪崩穿透等解决方案
本文讨论了缓存使用中可能出现的问题及其解决方案。首先,缓存穿透是指查询数据库中不存在的数据,导致请求频繁到达数据库。解决方法包括数据校验、缓存空值和使用BloomFilter。其次,缓存击穿是大量请求同一失效缓存项,可采取监控、限流或加锁策略。再者,缓存雪崩是大量缓存同时失效,引发数据库压力。应对措施是避免同一失效时间,分散缓存过期。接着,文章介绍了Spring Boot中Redis缓存的配置,包括缓存null值以防止穿透,并展示了自定义缓存过期时间的实现,以避免雪崩效应。最后,提供了在`application.yml`中配置不同缓存项的个性化过期时间的方法。
|
4天前
|
缓存 监控 数据库
分布式系统中缓存穿透问题与解决方案
在分布式系统中,缓存技术被广泛应用以提高系统性能和响应速度。然而,缓存穿透是一个常见而严重的问题,特别是在面对大规模请求时。本文将深入探讨缓存穿透的原因、影响以及一些有效的解决方案,以确保系统在面对这一问题时能够保持稳定和高效。
39 13
|
4天前
|
监控 NoSQL 算法
探秘Redis分布式锁:实战与注意事项
本文介绍了Redis分区容错中的分布式锁概念,包括利用Watch实现乐观锁和使用setnx防止库存超卖。乐观锁通过Watch命令监控键值变化,在事务中执行修改,若键值被改变则事务失败。Java代码示例展示了具体实现。setnx命令用于库存操作,确保无超卖,通过设置锁并检查库存来更新。文章还讨论了分布式锁存在的问题,如客户端阻塞、时钟漂移和单点故障,并提出了RedLock算法来提高可靠性。Redisson作为生产环境的分布式锁实现,提供了可重入锁、读写锁等高级功能。最后,文章对比了Redis、Zookeeper和etcd的分布式锁特性。
134 16
探秘Redis分布式锁:实战与注意事项
|
4天前
|
NoSQL Java 大数据
介绍redis分布式锁
分布式锁是解决多进程在分布式环境中争夺资源的问题,与本地锁相似但适用于不同进程。以Redis为例,通过`setIfAbsent`实现占锁,加锁同时设置过期时间避免死锁。然而,获取锁与设置过期时间非原子性可能导致并发问题,解决方案是使用`setIfAbsent`的超时参数。此外,释放锁前需验证归属,防止误删他人锁,可借助Lua脚本确保原子性。实际应用中还有锁续期、重试机制等复杂问题,现成解决方案如RedisLockRegistry和Redisson。
|
4天前
|
缓存 NoSQL 搜索推荐
Redis缓存雪崩穿透等解决方案
本文讨论了缓存使用中的三个问题:缓存穿透、缓存击穿和缓存雪崩。为解决这些问题,提出了相应策略。对于缓存穿透,建议数据校验和缓存空值;缓存击穿可采用监控扩容、服务限流或加锁机制;缓存雪崩则需避免大量缓存同时过期,可设置随机过期时间。此外,文章还介绍了Spring Boot中Redis缓存配置,包括全局设置及自定义缓存过期时间的方法。
|
4天前
|
缓存 NoSQL Java
【亮剑】分布式锁是保证多服务实例同步的关键机制,常用于互斥访问共享资源、控制访问顺序和系统保护,如何使用注解来实现 Redis 分布式锁的功能?
【4月更文挑战第30天】分布式锁是保证多服务实例同步的关键机制,常用于互斥访问共享资源、控制访问顺序和系统保护。基于 Redis 的分布式锁利用 SETNX 或 SET 命令实现,并考虑自动过期、可重入及原子性以确保可靠性。在 Java Spring Boot 中,可通过 `@EnableCaching`、`@Cacheable` 和 `@CacheEvict` 注解轻松实现 Redis 分布式锁功能。
|
4天前
|
NoSQL Java 关系型数据库
【Redis系列笔记】分布式锁
分布式锁:满足分布式系统或集群模式下多进程可见并且互斥的锁。 分布式锁的核心思想就是让大家都使用同一把锁,只要大家使用的是同一把锁,那么我们就能锁住线程,不让线程进行,让程序串行执行,这就是分布式锁的核心思路
131 2