redis分布式锁面临的几个问题及解决方案

本文涉及的产品
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
云数据库 Tair(兼容Redis),内存型 2GB
简介: redis分布式锁面临的几个问题及解决方案

前言

在我们的日常开发过程中,一般都会有一些定时任务,在集群环境中为保证定时任务运行在某一台机器上,这个时候就需要使用到分布式锁;另外在一些第三方框架中也会有分布式锁的应用,比如Seata分布式事务中,AT模式的行锁就是存放在TC服务中,一旦抢占到行锁的服务才能够操作对应的表数据,没拿到行锁的服务只能等待锁释放;

在日常开发中,通常会采用redis作为中间存储层来实现分布式锁。

redis分布式锁的几个问题及对应解决方案

一般我们实现的分布式锁伪代码如下,和jvm内存锁差不多:

try{
  boolean lock = false;
  // 上锁
  if(lock = tryLock()){
    // TODO 执行业务逻辑
  }
}finally{
  if(lock){
    // 解锁
    unlock();
  }
}
复制代码
  • 锁无法释放问题:

一旦抢占到锁的服务在执行业务逻辑时宕机了,那么该分布式锁就无法解除,其他服务就永远无法抢占到分布式锁;

为了解决抢占锁的服务宕机后导致其他服务无法拿到锁的问题,我们可以给分布式锁设置一个过期时间。伪代码如下:

try{
  boolean lock = false;
  // 上锁,过期时间30秒
  if(lock = tryLock(30)){
    // TODO 执行业务逻辑
  }
}finally{
  if(lock){
    // 解锁
    unlock();
  }
}
复制代码
  • 过期时间无法确定

因为我们无法为每个任务提前计算好执行时间,当前我们设置的过期时间是30秒,假如有任何一个任务的执行时间超过了30秒,那么就会导致过期后,有其他的进程抢占了分布式锁,也就意味着同一时间有多个任务在一个分布式锁中,这显然违背了分布式锁的互斥性;

  • 加解锁的同源性

如果任务A执行时间过长,任务还没执行完毕,分布式锁就过期了,那么任务B抢占到分布式锁,当任务A执行完毕后,将执行解锁操作,此刻解除的锁是任务B抢占到的锁;

为了解决上述两个问题,我们需要做以下处理:

1.为了在任务执行期间保证分布式锁不过期,我们需要添加一个定时任务检测分布式锁的剩余时间,当ttl还剩10秒时,我们可以给这个分布式锁续到30秒,直至任务执行完毕,该分布式锁被删除;

2.为了解决加解锁的同源性问题,我们在加锁的时候,需要带上相关的业务标签,比如tryLock(key,taskA,30)表示分布式锁key对应的值是taskA,过期时间为30秒,解锁时unlock(key,taskA)一定要对比此刻锁对应的值一定要时taskA;这样的话,才能保证加解锁的同源性;

所以,我们又可以升级一下我们的伪代码了:

try{
  String key = "myLock"
  String taskName = "taskA";
  boolean lock = false;
  // 上锁,过期时间30秒
  if(lock = tryLock(key,taskName,30)){
    // TODO 执行业务逻辑
  }
}finally{
  if(lock){
    // 解锁
    unlock(key,taskName);
  }
}
复制代码
  • 可重入性

在我们平时使用的jvm锁synchronized中,同一个线程是可以多次获取锁的,这称为锁的重入,那么我们的分布式锁可不可以实现类似的功能呢?

答案是可以的,我们需要修改底层实现分布式锁的的数据结构为HashmyLock:taskA:countmyLock代表分布式锁的key,taskA代表对应的对应的Hash结构的key,count代表锁重入的次数,每次重入加1,解锁就减1;

  • 原子性

我们在加解锁的过程中,必须保证加锁、解锁操作的原子性,所以我们必须通过Lua脚本来实现上述两个方法;

小结

我们通过伪代码一步一步提出redis分布式锁面临的问题,并同时给出了对应的解决方案,我们下面做出以下几点小结:

  1. redis分布式锁的加锁、解锁操作必须通过Lua脚本保证原子性;
  2. 为了保证服务宕机后不会影响其他服务抢占锁,需要设置锁的过期时间;
  3. 锁的过期时间带来两个问题,一个是无法确定任务执行时间;另一个就是过期后有可能导致加解锁不能保证同源性;
  4. 加上watch dog机制保证任务没执行完毕,锁不会过期;
  5. 加锁、解锁都带上对应的值标记,解锁时一定要判断是否和加锁的值一致,保证加解锁的同源性;
  6. 通过redis Hash结构实现分布式锁的重入性;



相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
1月前
|
NoSQL Java Redis
太惨痛: Redis 分布式锁 5个大坑,又大又深, 如何才能 避开 ?
Redis分布式锁在高并发场景下是重要的技术手段,但其实现过程中常遇到五大深坑:**原子性问题**、**连接耗尽问题**、**锁过期问题**、**锁失效问题**以及**锁分段问题**。这些问题不仅影响系统的稳定性和性能,还可能导致数据不一致。尼恩在实际项目中总结了这些坑,并提供了详细的解决方案,包括使用Lua脚本保证原子性、设置合理的锁过期时间和使用看门狗机制、以及通过锁分段提升性能。这些经验和技巧对面试和实际开发都有很大帮助,值得深入学习和实践。
太惨痛: Redis 分布式锁 5个大坑,又大又深, 如何才能 避开 ?
|
11天前
|
NoSQL Redis
Redis分布式锁如何实现 ?
Redis分布式锁通过SETNX指令实现,确保仅在键不存在时设置值。此机制用于控制多个线程对共享资源的访问,避免并发冲突。然而,实际应用中需解决死锁、锁超时、归一化、可重入及阻塞等问题,以确保系统的稳定性和可靠性。解决方案包括设置锁超时、引入Watch Dog机制、使用ThreadLocal绑定加解锁操作、实现计数器支持可重入锁以及采用自旋锁思想处理阻塞请求。
47 16
|
1月前
|
缓存 NoSQL Java
大数据-50 Redis 分布式锁 乐观锁 Watch SETNX Lua Redisson分布式锁 Java实现分布式锁
大数据-50 Redis 分布式锁 乐观锁 Watch SETNX Lua Redisson分布式锁 Java实现分布式锁
61 3
大数据-50 Redis 分布式锁 乐观锁 Watch SETNX Lua Redisson分布式锁 Java实现分布式锁
|
1月前
|
NoSQL Redis 数据库
计数器 分布式锁 redis实现
【10月更文挑战第5天】
48 1
|
1月前
|
NoSQL 算法 关系型数据库
Redis分布式锁
【10月更文挑战第1天】分布式锁用于在多进程环境中保护共享资源,防止并发冲突。通常借助外部系统如Redis或Zookeeper实现。通过`SETNX`命令加锁,并设置过期时间防止死锁。为避免误删他人锁,加锁时附带唯一标识,解锁前验证。面对锁提前过期的问题,可使用守护线程自动续期。在Redis集群中,需考虑主从同步延迟导致的锁丢失问题,Redlock算法可提高锁的可靠性。
76 4
|
1月前
|
缓存 NoSQL Ubuntu
大数据-39 Redis 高并发分布式缓存 Ubuntu源码编译安装 云服务器 启动并测试 redis-server redis-cli
大数据-39 Redis 高并发分布式缓存 Ubuntu源码编译安装 云服务器 启动并测试 redis-server redis-cli
55 3
|
1月前
|
缓存 NoSQL 算法
面试题:Redis如何实现分布式锁!
面试题:Redis如何实现分布式锁!
|
1月前
|
存储 缓存 NoSQL
数据的存储--Redis缓存存储(一)
数据的存储--Redis缓存存储(一)
|
1月前
|
消息中间件 缓存 NoSQL
Redis 是一个高性能的键值对存储系统,常用于缓存、消息队列和会话管理等场景。
【10月更文挑战第4天】Redis 是一个高性能的键值对存储系统,常用于缓存、消息队列和会话管理等场景。随着数据增长,有时需要将 Redis 数据导出以进行分析、备份或迁移。本文详细介绍几种导出方法:1)使用 Redis 命令与重定向;2)利用 Redis 的 RDB 和 AOF 持久化功能;3)借助第三方工具如 `redis-dump`。每种方法均附有示例代码,帮助你轻松完成数据导出任务。无论数据量大小,总有一款适合你。
77 6
|
10天前
|
缓存 NoSQL 关系型数据库
大厂面试高频:如何解决Redis缓存雪崩、缓存穿透、缓存并发等5大难题
本文详解缓存雪崩、缓存穿透、缓存并发及缓存预热等问题,提供高可用解决方案,帮助你在大厂面试和实际工作中应对这些常见并发场景。关注【mikechen的互联网架构】,10年+BAT架构经验倾囊相授。
大厂面试高频:如何解决Redis缓存雪崩、缓存穿透、缓存并发等5大难题
下一篇
无影云桌面