基于redis和zookeeper的分布式锁实现方案

[TOC]

关键字

分布式锁 redis zookeeper


在单机应用中,我们通常可以用synchronizedReentrantLock等去实现资源的索引,从而解决并发竞争问题。
在实际应用中,我们的服务经常是分布式的,那如何管理多台应用机器对竞争资源的访问呢?那就需要用到 分布式锁

分布式锁主要理念是通过第三方独立服务管理和分发需要被锁定的资源数据。一般常见的包括使用redis或者zookeeper来实现分布式锁。

基于redis的分布式锁

我们知道,redis是单线程工作模式。因此可以将分布式应用的并发请求串行化。

加锁: redis是用过setnx命令实现分布式锁。加锁过程为:

setnx(key, value)

setnx 的含义是set if not exist。当命令执行结果返回1,代表key不存在,并且设置获取锁成功。如果返回结果为0,代表key已存在,线程获取锁失败。

释放锁:释放锁,只需要删除对应的key值,就代表释放了相关锁,代码如下:

del(key)

存在的问题

锁无法释放

上边的加锁和解锁过程非原子操作。也就存在可能:一个线程加锁后,没有释放锁。最终导致该所永远无法释放。为了解决该问题,我们在设置锁之后,可以为该锁设置一个自动过期时间:

expire(key, timeout)

然而上述expire和setnx仍然不是原子操作,也就是可能会存在setnx成功后,expire命令未执行。为了解决这种问题,可以使用:

SET key value [EX seconds] [PX milliseconds] [NX|XX]
//EX second :设置键的过期时间为 second 秒。 SET key value EX second 效果等同于 SETEX key second value 。
//PX millisecond :设置键的过期时间为 millisecond 毫秒。 SET key value PX millisecond 效果等同于 PSETEX key millisecond value 。
//NX :只在键不存在时,才对键进行设置操作。 SET key value NX 效果等同于 SETNX key value 。
//XX :只在键已经存在时,才对键进行设置操作。

这样就解决了刚刚提到的非原子问题。

锁错误释放

实际上上述设置超时时间的方式,还可能引发另一种问题。那就是持有锁的线程由于某些原因,执行比较慢,导致在线程未完成的情况下,锁资源由于超时过期而被自动释放。为了解决这类问题,可以做如下操作:

  • 引入守护线程,在线程锁即将过期的时候,重新刷新过期时间,直到线程执行完毕后,主动删除锁并关闭守护线程。
  • 释放锁引入线程ID验证:这个方案主要是为了防止某些情况,当前线程的锁超时被释放,然后被另一个线程持有。如果不做线程ID之类的验证,当前线程就可能错误的释放了其他线程持有的锁,导致出现问题。即在释放前先校验key下的value是否为线程ID,如果是再进行释放,两步操作的原子性可通过lua脚本来实现。

基于zookeeper的分布式锁

Zookeeper实现分布式锁主要用到了一种叫做顺序节点。

假如我们在/lock/目录下创建节3个点,ZooKeeper集群会按照提起创建的顺序来创建节点,节点分别为/lock/0000000001、/lock/0000000002、/lock/0000000003。

ZooKeeper中还有一种名为临时节点的节点,临时节点由某个客户端创建,当客户端与ZooKeeper集群断开连接,则开节点自动被删除。

实现分布式锁的基本逻辑:

  1. 客户端调用create()方法创建名为“locknode/guid-lock-”的节点,需要注意的是,这里节点的创建类型需要设置为临时节点。

  2. 客户端调用getChildren(“locknode”)方法来获取所有已经创建的子节点。

    客户端获取到所有子节点path之后,如果发现自己在步骤1中创建的节点是所有节点中序号最小的,那么就认为这个客户端获得了锁

  3. 如果创建的节点不是所有节点中需要最小的,那么则监视比自己创建节点的序列号小的最大的节点,进入等待。直到下次监视的子节点变更的时候,再进行子节点的获取,判断是否获取锁。

释放锁的过程相对比较简单,就是删除自己创建的那个子节点即可。

参考文献

https://xiaomi-info.github.io/2019/12/17/redis-distributed-lock/

https://zookeeper.apache.org/doc/current/recipes.html#sc_recipes_Locks

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,126评论 6 481
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,254评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 152,445评论 0 341
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,185评论 1 278
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,178评论 5 371
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,970评论 1 284
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,276评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,927评论 0 259
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,400评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,883评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,997评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,646评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,213评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,204评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,423评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,423评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,722评论 2 345