Redis实现分布式锁如何保证公平性?
wptr33 2025-01-12 19:06 47 浏览
Redis分布式锁的公平性是指在多客户端并发请求锁的情况下,能够保证所有请求锁的客户端能够按照一定的顺序依次公平的获取到锁,从而有效的避免了某些客户端由于不断地锁竞争操作而无法获得锁的情况,这种现象也被称为锁饥饿。所以我们需要提供一种相对公平的机制来保证每个客户端请求获取到锁的机会都是一样的避免出现锁饥饿的情况出现。
为什么需要公平性?
??在某些请求处理过程中,如果没有锁的公平性就会导致有些请求较少的客户端永远获取不到锁的情况发生,例如一个客户端的在获取锁的时候发生了故障或者是获取锁较慢,那么后续的性能较好的客户端处理请求的速度和获取锁的速度都比较快,那么就会导致原来的处理较慢的这个客户端一直在尝试获取锁,但是一直获取不到,从而导致业务无法得到有效的处理。
??另外就是如果分布式锁没有公平性,就会导致请求锁的客户端可能无限的被阻塞,引发某个客户端死锁的问题。
??为了避免这些问题的发生,我们就需要保证分布式锁获取的公平性,这样就可以保证所有的客户端可以按照一定的规则顺序的获取锁,确保每个客户端获取到锁的机会都是一样的,这样就可以避免出现死锁、或者是锁饥饿等问题。
??在之前的分享中,我们介绍过在Redis底层命令支持的Redis锁实现过程中,并没有提供内置的锁公平机制,所以为了实现Redis分布式锁公平就需要我们通过自己的逻辑来实现锁公平操作。下面我们就来看看如何在Redis分布式锁中实现锁公平机制。
通过有序集合ZSet来实现锁的公平性
??通过Redis的ZSet集合来实现分布式公平锁是在开发过程中比较常见的一个解决方案,这种数据结构允许元素按照顺序进行存储,每个元素都有一个分数,然后根据分数进行排序,在实现分布式锁的过程中,客户端可以将自己的请求锁的时间戳或者是通过一个有序的递增序列来作为分数,将这个标识存储到有序集合中,然后客户端就可以通过对这个分数的检查来判断自己是否可以获取锁。
??在客户端获取锁的时候,首先检查元素中的顺序是否为最小分数的元素,如果是那么就尝试获取锁,如果获取锁成功,那么就正常执行任务释放锁,如果不是最小的元素,那么就需要继续等待获取锁,这里需要注意,在释放锁之后,需要将自己的标识从有序集合中移除,这样才能保证锁的公平性。
??如下所示,通过一段伪代码来说明获取锁的情况,在客户端尝试获取锁的时候,会将自己和时间戳一起放入到一个Zset集合中,因为时间戳可以保证请求顺序,这里需要注意时钟回拨问题。
import redis
import time
def acquire_lock(client_id):
redis_client = redis.StrictRedis()
timestamp = time.time() # 使用时间戳作为分数
# 将客户端请求加入 ZSet
redis_client.zadd("lock_queue", {client_id: timestamp})
??接下来,客户端会查询自己的排名情况来判断自己是否排在队列的首位尝试获取锁,因为只有排在最前面的客户端才能够尝试获取锁,如下所示。
def check_and_acquire_lock(client_id):
redis_client = redis.StrictRedis()
# 获取当前客户端在 ZSet 中的排名
rank = redis_client.zrank("lock_queue", client_id)
if rank == 0: # 如果自己是 ZSet 中的第一个元素,尝试获取锁
if redis_client.setnx("lock_key", client_id): # 尝试获取锁
return True
return False
??如果客户端排在队首并且成功的获取到了锁,那么就可以执行获取锁之后的对共享资源的操作逻辑,如果获取锁失败了,那么就会继续等待获取锁,如下所示。
def acquire_lock(client_id):
redis_client = redis.StrictRedis()
# 客户端请求锁并加入 ZSet
timestamp = time.time() # 使用时间戳作为分数
redis_client.zadd("lock_queue", {client_id: timestamp})
while True:
# 获取客户端在 ZSet 中的排名
rank = redis_client.zrank("lock_queue", client_id)
if rank == 0: # 如果自己排在最前面
# 尝试通过 SETNX 获取锁
if redis_client.setnx("lock_key", client_id):
# 获取锁成功,执行任务
return True
time.sleep(0.1) # 等待一段时间后再次尝试
??等待客户端正常处理完成共享资源的逻辑之后,客户端就需要尝试释放锁,并且从排序集合中将自己的排队信息进行移除,如下所示。
def release_lock(client_id):
redis_client = redis.StrictRedis()
# 执行完任务后释放锁
redis_client.delete("lock_key")
# 从 ZSet 中删除自己
redis_client.zrem("lock_queue", client_id)
??到这里通过Zset实现锁的公平性的操作就算完成了,但是仔细推敲就会发现,如果按照时间戳进行排序操作的话,如果需要了时钟回拨,那么就会导致锁的公平性被打破的情况,所以在通过这种方式设置分数的时候,需要考虑到时钟回拨业务的处理。
??其实从上面的实现思路我们也可以知道,想要实现一个锁的公平性首先需要保证的就是这些获取锁的客户端能够在一个有序的集合中进行排队等待。那么在Redis中还可以通过List来实现这种排队机制。下面我们就来介绍通过List数据结构来实现分布式锁公平性操作。
通过List来实现Redis分布式锁的公平性
??通过List的方式来实现Redis分布式锁机制其实就是模拟了一个队列,通过LPUSH命令将客户端添加到队列中,然后通过LPOP命令来按照顺序从队列的一端顺序获取客户端请求,这主要就是利用了队列这种数据结构的FIFO的特点,客户端会将自己的请求添加到队列的尾部,在获取锁的时候会检查自己是否是队列的第一个元素,如果是第一个元素那么就会尝试获取锁,如果获取锁成功,那么就可以执行对应的业务逻辑,否则就继续等待,也是同样的机制客户端会定期检查自己是否是队列的第一个元素,同样的在执行完业务逻辑释放锁的时候,需要将客户端从队列中执行出队操作,防止出现死锁问题。
??下面我们就来通过伪代码机制来演示如何通过List数据结构来模拟锁的公平性实现,如下所示。
import redis
import time
def acquire_lock(client_id):
redis_client = redis.StrictRedis()
# 将客户端请求添加到队列末尾
redis_client.rpush("lock_queue", client_id)
while True:
# 获取队首客户端
first_client = redis_client.lindex("lock_queue", 0)
# 如果自己是队首客户端,尝试获取锁
if first_client == client_id.encode(): # 注意:redis存储的是字节编码
if redis_client.setnx("lock_key", client_id):
print(f"客户端 {client_id} 获得锁")
return True
# 如果自己不是第一个客户端,则继续等待
time.sleep(0.1) # 每0.1秒检查一次
def release_lock(client_id):
redis_client = redis.StrictRedis()
# 执行完任务后释放锁
redis_client.delete("lock_key")
# 从队列中移除自己
redis_client.lrem("lock_queue", 0, client_id)
print(f"客户端 {client_id} 释放锁")
??在请求锁的过程中客户端会通过rpush将自己的ID加入到lock_queue列表的尾部,如下所示。
redis_client.rpush("lock_queue", client_id)
??这样这个客户端就会排在队列的尾部,然后客户端会通过lindex命令来获取列表中排在队首的元素,如下所示。
first_client = redis_client.lindex("lock_queue", 0)??如果获取到的客户端的ID与当前获取锁的客户端ID一样,那就说明该客户端可以获取锁并且执行对应的业务逻辑操作。在任务执行完成之后,客户端会通过delete命令释放锁,然后通过lrem命令将自己从排队队列中移除。
redis_client.delete("lock_key")
redis_client.lrem("lock_queue", 0, client_id)总结
??由于Redis本身并没有提供公平锁机制,所以我们需要通过外部辅助数据结构来实现锁的公平性操作,其实从上面的实现原理我们也可以发现,想要实现分布式锁的公平性其实就是需要保证客户端对于获取锁的顺序性,这样就可以保证每个请求锁的客户端获取到锁的机会都是均等的,既然是这样,那么我们通过其他机制能够实现同样的操作的话也可以保证锁的公平性。有兴趣的读者可以自己深入研究一下。
相关推荐
- oracle数据导入导出_oracle数据导入导出工具
-
关于oracle的数据导入导出,这个功能的使用场景,一般是换服务环境,把原先的oracle数据导入到另外一台oracle数据库,或者导出备份使用。只不过oracle的导入导出命令不好记忆,稍稍有点复杂...
- 继续学习Python中的while true/break语句
-
上次讲到if语句的用法,大家在微信公众号问了小编很多问题,那么小编在这几种解决一下,1.else和elif是子模块,不能单独使用2.一个if语句中可以包括很多个elif语句,但结尾只能有一个else解...
- python continue和break的区别_python中break语句和continue语句的区别
-
python中循环语句经常会使用continue和break,那么这2者的区别是?continue是跳出本次循环,进行下一次循环;break是跳出整个循环;例如:...
- 简单学Python——关键字6——break和continue
-
Python退出循环,有break语句和continue语句两种实现方式。break语句和continue语句的区别:break语句作用是终止循环。continue语句作用是跳出本轮循环,继续下一次循...
- 2-1,0基础学Python之 break退出循环、 continue继续循环 多重循
-
用for循环或者while循环时,如果要在循环体内直接退出循环,可以使用break语句。比如计算1至100的整数和,我们用while来实现:sum=0x=1whileTrue...
- Python 中 break 和 continue 傻傻分不清
-
大家好啊,我是大田。今天分享一下break和continue在代码中的执行效果是什么,进一步区分出二者的区别。一、continue例1:当小明3岁时不打印年龄,其余年龄正常循环打印。可以看...
- python中的流程控制语句:continue、break 和 return使用方法
-
Python中,continue、break和return是控制流程的关键语句,用于在循环或函数中提前退出或跳过某些操作。它们的用途和区别如下:1.continue(跳过当前循环的剩余部分,进...
- L017:continue和break - 教程文案
-
continue和break在Python中,continue和break是用于控制循环(如for和while)执行流程的关键字,它们的作用如下:1.continue:跳过当前迭代,...
- 作为前端开发者,你都经历过怎样的面试?
-
已经裸辞1个月了,最近开始投简历找工作,遇到各种各样的面试,今天分享一下。其实在职的时候也做过面试官,面试官时,感觉自己问的问题很难区分候选人的能力,最好的办法就是看看候选人的github上的代码仓库...
- 面试被问 const 是否不可变?这样回答才显功底
-
作为前端开发者,我在学习ES6特性时,总被const的"善变"搞得一头雾水——为什么用const声明的数组还能push元素?为什么基本类型赋值就会报错?直到翻遍MDN文档、对着内存图反...
- 2023金九银十必看前端面试题!2w字精品!
-
导文2023金九银十必看前端面试题!金九银十黄金期来了想要跳槽的小伙伴快来看啊CSS1.请解释CSS的盒模型是什么,并描述其组成部分。答案:CSS的盒模型是用于布局和定位元素的概念。它由内容区域...
- 前端面试总结_前端面试题整理
-
记得当时大二的时候,看到实验室的学长学姐忙于各种春招,有些收获了大厂offer,有些还在苦苦面试,其实那时候的心里还蛮忐忑的,不知道自己大三的时候会是什么样的一个水平,所以从19年的寒假放完,大二下学...
- 由浅入深,66条JavaScript面试知识点(七)
-
作者:JakeZhang转发链接:https://juejin.im/post/5ef8377f6fb9a07e693a6061目录由浅入深,66条JavaScript面试知识点(一)由浅入深,66...
- 2024前端面试真题之—VUE篇_前端面试题vue2020及答案
-
添加图片注释,不超过140字(可选)1.vue的生命周期有哪些及每个生命周期做了什么?beforeCreate是newVue()之后触发的第一个钩子,在当前阶段data、methods、com...
- 今年最常见的前端面试题,你会做几道?
-
在面试或招聘前端开发人员时,期望、现实和需求之间总是存在着巨大差距。面试其实是一个交流想法的地方,挑战人们的思考方式,并客观地分析给定的问题。可以通过面试了解人们如何做出决策,了解一个人对技术和解决问...
- 一周热门
- 最近发表
- 标签列表
-
- git pull (33)
- git fetch (35)
- mysql insert (35)
- mysql distinct (37)
- concat_ws (36)
- java continue (36)
- jenkins官网 (37)
- mysql 子查询 (37)
- python元组 (33)
- mybatis 分页 (35)
- vba split (37)
- redis watch (34)
- python list sort (37)
- nvarchar2 (34)
- mysql not null (36)
- hmset (35)
- python telnet (35)
- python readlines() 方法 (36)
- munmap (35)
- docker network create (35)
- redis 集合 (37)
- python sftp (37)
- setpriority (34)
- c语言 switch (34)
- git commit (34)
