redis分布式锁面临的几个问题及解决方案

本文涉及的产品
云数据库 Tair(兼容Redis),内存型 2GB
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
简介: redis分布式锁面临的几个问题及解决方案

前言

在我们的日常开发过程中,一般都会有一些定时任务,在集群环境中为保证定时任务运行在某一台机器上,这个时候就需要使用到分布式锁;另外在一些第三方框架中也会有分布式锁的应用,比如Seata分布式事务中,AT模式的行锁就是存放在TC服务中,一旦抢占到行锁的服务才能够操作对应的表数据,没拿到行锁的服务只能等待锁释放;

在日常开发中,通常会采用redis作为中间存储层来实现分布式锁。

redis分布式锁的几个问题及对应解决方案

一般我们实现的分布式锁伪代码如下,和jvm内存锁差不多:

try{
  boolean lock = false;
  // 上锁
  if(lock = tryLock()){
    // TODO 执行业务逻辑
  }
}finally{
  if(lock){
    // 解锁
    unlock();
  }
}
复制代码
  • 锁无法释放问题:

一旦抢占到锁的服务在执行业务逻辑时宕机了,那么该分布式锁就无法解除,其他服务就永远无法抢占到分布式锁;

为了解决抢占锁的服务宕机后导致其他服务无法拿到锁的问题,我们可以给分布式锁设置一个过期时间。伪代码如下:

try{
  boolean lock = false;
  // 上锁,过期时间30秒
  if(lock = tryLock(30)){
    // TODO 执行业务逻辑
  }
}finally{
  if(lock){
    // 解锁
    unlock();
  }
}
复制代码
  • 过期时间无法确定

因为我们无法为每个任务提前计算好执行时间,当前我们设置的过期时间是30秒,假如有任何一个任务的执行时间超过了30秒,那么就会导致过期后,有其他的进程抢占了分布式锁,也就意味着同一时间有多个任务在一个分布式锁中,这显然违背了分布式锁的互斥性;

  • 加解锁的同源性

如果任务A执行时间过长,任务还没执行完毕,分布式锁就过期了,那么任务B抢占到分布式锁,当任务A执行完毕后,将执行解锁操作,此刻解除的锁是任务B抢占到的锁;

为了解决上述两个问题,我们需要做以下处理:

1.为了在任务执行期间保证分布式锁不过期,我们需要添加一个定时任务检测分布式锁的剩余时间,当ttl还剩10秒时,我们可以给这个分布式锁续到30秒,直至任务执行完毕,该分布式锁被删除;

2.为了解决加解锁的同源性问题,我们在加锁的时候,需要带上相关的业务标签,比如tryLock(key,taskA,30)表示分布式锁key对应的值是taskA,过期时间为30秒,解锁时unlock(key,taskA)一定要对比此刻锁对应的值一定要时taskA;这样的话,才能保证加解锁的同源性;

所以,我们又可以升级一下我们的伪代码了:

try{
  String key = "myLock"
  String taskName = "taskA";
  boolean lock = false;
  // 上锁,过期时间30秒
  if(lock = tryLock(key,taskName,30)){
    // TODO 执行业务逻辑
  }
}finally{
  if(lock){
    // 解锁
    unlock(key,taskName);
  }
}
复制代码
  • 可重入性

在我们平时使用的jvm锁synchronized中,同一个线程是可以多次获取锁的,这称为锁的重入,那么我们的分布式锁可不可以实现类似的功能呢?

答案是可以的,我们需要修改底层实现分布式锁的的数据结构为HashmyLock:taskA:countmyLock代表分布式锁的key,taskA代表对应的对应的Hash结构的key,count代表锁重入的次数,每次重入加1,解锁就减1;

  • 原子性

我们在加解锁的过程中,必须保证加锁、解锁操作的原子性,所以我们必须通过Lua脚本来实现上述两个方法;

小结

我们通过伪代码一步一步提出redis分布式锁面临的问题,并同时给出了对应的解决方案,我们下面做出以下几点小结:

  1. redis分布式锁的加锁、解锁操作必须通过Lua脚本保证原子性;
  2. 为了保证服务宕机后不会影响其他服务抢占锁,需要设置锁的过期时间;
  3. 锁的过期时间带来两个问题,一个是无法确定任务执行时间;另一个就是过期后有可能导致加解锁不能保证同源性;
  4. 加上watch dog机制保证任务没执行完毕,锁不会过期;
  5. 加锁、解锁都带上对应的值标记,解锁时一定要判断是否和加锁的值一致,保证加解锁的同源性;
  6. 通过redis Hash结构实现分布式锁的重入性;



相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
2月前
|
NoSQL Java Redis
太惨痛: Redis 分布式锁 5个大坑,又大又深, 如何才能 避开 ?
Redis分布式锁在高并发场景下是重要的技术手段,但其实现过程中常遇到五大深坑:**原子性问题**、**连接耗尽问题**、**锁过期问题**、**锁失效问题**以及**锁分段问题**。这些问题不仅影响系统的稳定性和性能,还可能导致数据不一致。尼恩在实际项目中总结了这些坑,并提供了详细的解决方案,包括使用Lua脚本保证原子性、设置合理的锁过期时间和使用看门狗机制、以及通过锁分段提升性能。这些经验和技巧对面试和实际开发都有很大帮助,值得深入学习和实践。
太惨痛: Redis 分布式锁 5个大坑,又大又深, 如何才能 避开 ?
|
23天前
|
存储 NoSQL Java
使用lock4j-redis-template-spring-boot-starter实现redis分布式锁
通过使用 `lock4j-redis-template-spring-boot-starter`,我们可以轻松实现 Redis 分布式锁,从而解决分布式系统中多个实例并发访问共享资源的问题。合理配置和使用分布式锁,可以有效提高系统的稳定性和数据的一致性。希望本文对你在实际项目中使用 Redis 分布式锁有所帮助。
66 5
|
26天前
|
NoSQL Java 数据处理
基于Redis海量数据场景分布式ID架构实践
【11月更文挑战第30天】在现代分布式系统中,生成全局唯一的ID是一个常见且重要的需求。在微服务架构中,各个服务可能需要生成唯一标识符,如用户ID、订单ID等。传统的自增ID已经无法满足在集群环境下保持唯一性的要求,而分布式ID解决方案能够确保即使在多个实例间也能生成全局唯一的标识符。本文将深入探讨如何利用Redis实现分布式ID生成,并通过Java语言展示多个示例,同时分析每个实践方案的优缺点。
58 8
|
29天前
|
消息中间件 监控 NoSQL
Redis脑裂问题详解及解决方案
Redis脑裂问题是分布式系统中常见的复杂问题,合理配置Redis Sentinel、使用保护模式、采用分布式锁机制以及优化网络和客户端连接策略等措施,可以有效预防和解决脑裂问题。通过深入理解Redis脑裂问题的成因和影响,采取相应的解决方案,能够提高系统的可用性和数据一致性,保障Redis集群的稳定运行。希望本文能帮助你更好地理解和应对Redis脑裂问题。
39 2
|
1月前
|
NoSQL Redis
Redis分布式锁如何实现 ?
Redis分布式锁通过SETNX指令实现,确保仅在键不存在时设置值。此机制用于控制多个线程对共享资源的访问,避免并发冲突。然而,实际应用中需解决死锁、锁超时、归一化、可重入及阻塞等问题,以确保系统的稳定性和可靠性。解决方案包括设置锁超时、引入Watch Dog机制、使用ThreadLocal绑定加解锁操作、实现计数器支持可重入锁以及采用自旋锁思想处理阻塞请求。
59 16
|
1月前
|
缓存 NoSQL PHP
Redis作为PHP缓存解决方案的优势、实现方式及注意事项。Redis凭借其高性能、丰富的数据结构、数据持久化和分布式支持等特点,在提升应用响应速度和处理能力方面表现突出
本文深入探讨了Redis作为PHP缓存解决方案的优势、实现方式及注意事项。Redis凭借其高性能、丰富的数据结构、数据持久化和分布式支持等特点,在提升应用响应速度和处理能力方面表现突出。文章还介绍了Redis在页面缓存、数据缓存和会话缓存等应用场景中的使用,并强调了缓存数据一致性、过期时间设置、容量控制和安全问题的重要性。
43 5
|
2月前
|
NoSQL Redis 数据库
计数器 分布式锁 redis实现
【10月更文挑战第5天】
53 1
|
机器学习/深度学习 缓存 NoSQL
|
缓存 NoSQL Java
为什么分布式一定要有redis?
1、为什么使用redis 分析:博主觉得在项目中使用redis,主要是从两个角度去考虑:性能和并发。当然,redis还具备可以做分布式锁等其他功能,但是如果只是为了分布式锁这些其他功能,完全还有其他中间件(如zookpeer等)代替,并不是非要使用redis。
1368 0
|
7天前
|
存储 缓存 NoSQL
解决Redis缓存数据类型丢失问题
解决Redis缓存数据类型丢失问题
128 85