服务器之家:专注于服务器技术及软件下载分享
分类导航

Mysql|Sql Server|Oracle|Redis|MongoDB|PostgreSQL|Sqlite|DB2|mariadb|Access|数据库技术|

服务器之家 - 数据库 - Redis - Redis分布式锁如何自动续期的实现

Redis分布式锁如何自动续期的实现

2022-01-25 17:40一江溪水 Redis

本文主要介绍了Redis分布式锁如何自动续期的实现,文中通过示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下

redis 实现分布式锁

  • 指定一个 key 作为锁标记,存入 redis 中,指定一个 唯一的用户标识作为 value。
  • 当 key 不存在时才能设置值,确保同一时间只有一个客户端进程获得锁,满足互斥性特性。
  • 设置一个过期时间,防止因系统异常导致没能删除这个 key,满足防死锁特性。
  • 当处理完业务之后需要清除这个 key 来释放锁,清除 key 时需要校验 value 值,需要满足只有加锁的人才能释放锁 。

问题

如果这个锁的过期时间是30秒,但是业务运行超过了30秒,比如40秒,当业务运行到30秒的时候,锁过期了,其他客户端拿到了这个锁,怎么办

我们可以设置一个合理的过期时间,让业务能够在这个时间内完成业务逻辑,但locktime的设置原本就很不容易。

  • locktime设置过小,锁自动超时的概率就会增加,锁异常失效的概率也就会增加;
  • locktime设置过大,万一服务出现异常无法正常释放锁,那么出现这种异常锁的时间也就越长。

我们只能通过经验去配置,一个可以接受的值,基本上是这个服务历史上的平均耗时再增加一定的buff。总体来说,设置一个合理的过期时间并不容易

我们也可以不设置过期时间,让业务运行结束后解锁,但是如果客户端出现了异常结束了或宕机了,那么这个锁就无法解锁,变成死锁;

自动续期

我们可以先给锁设置一个locktime,然后启动一个守护线程,让守护线程在一段时间后,重新去设置这个锁的locktime。

看起来很简单,但实现起来并不容易

  • 和释放锁的情况一样,我们需要先判断持有锁客户端是否有变化。否则会造成无论谁持有锁,守护线程都会去重新设置锁的locktime。
  • 守护线程要在合理的时间再去重新设置锁的locktime,否则会造成资源的浪费。不能动不动就去续。
  • 如果持有锁的线程已经处理完业务了,那么守护线程也应该被销毁。不能业务运行结束了,守护者还在那里继续运行,浪费资源。

看门狗

redisson的看门狗机制就是这种机制实现自动续期的

Redis分布式锁如何自动续期的实现

redissson trylock

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
public boolean trylock(long waittime, long leasetime, timeunit unit) throws interruptedexception {
        long time = unit.tomillis(waittime);
        long current = system.currenttimemillis();
        long threadid = thread.currentthread().getid();
        // 1.尝试获取锁
        long ttl = tryacquire(leasetime, unit, threadid);
        // lock acquired
        if (ttl == null) {
            return true;
        }
 
        // 申请锁的耗时如果大于等于最大等待时间,则申请锁失败.
        time -= system.currenttimemillis() - current;
        if (time <= 0) {
            acquirefailed(threadid);
            return false;
        }
 
        current = system.currenttimemillis();
 
        /**
         * 2.订阅锁释放事件,并通过 await 方法阻塞等待锁释放,有效的解决了无效的锁申请浪费资源的问题:
         * 基于信息量,当锁被其它资源占用时,当前线程通过 redis 的 channel 订阅锁的释放事件,一旦锁释放会发消息通知待等待的线程进行竞争.
         *
         * 当 this.await 返回 false,说明等待时间已经超出获取锁最大等待时间,取消订阅并返回获取锁失败.
         * 当 this.await 返回 true,进入循环尝试获取锁.
         */
        rfuture<redissonlockentry> subscribefuture = subscribe(threadid);
        // await 方法内部是用 countdownlatch 来实现阻塞,获取 subscribe 异步执行的结果(应用了 netty 的 future)
        if (!subscribefuture.await(time, timeunit.milliseconds)) {
            if (!subscribefuture.cancel(false)) {
                subscribefuture.oncomplete((res, e) -> {
                    if (e == null) {
                        unsubscribe(subscribefuture, threadid);
                    }
                });
            }
            acquirefailed(threadid);
            return false;
        }
 
        try {
            // 计算获取锁的总耗时,如果大于等于最大等待时间,则获取锁失败.
            time -= system.currenttimemillis() - current;
            if (time <= 0) {
                acquirefailed(threadid);
                return false;
 
              }
 
            /**
             * 3.收到锁释放的信号后,在最大等待时间之内,循环一次接着一次的尝试获取锁
             * 获取锁成功,则立马返回 true,
             * 若在最大等待时间之内还没获取到锁,则认为获取锁失败,返回 false 结束循环
             */
            while (true) {
                long currenttime = system.currenttimemillis();
 
                // 再次尝试获取锁
                ttl = tryacquire(leasetime, unit, threadid);
                // lock acquired
                if (ttl == null) {
                    return true;
                }
                // 超过最大等待时间则返回 false 结束循环,获取锁失败
                time -= system.currenttimemillis() - currenttime;
                if (time <= 0) {
                    acquirefailed(threadid);
                    return false;
                }
 
                /**
                 * 6.阻塞等待锁(通过信号量(共享锁)阻塞,等待解锁消息):
                 */
                currenttime = system.currenttimemillis();
                if (ttl >= 0 && ttl < time) {
                    //如果剩余时间(ttl)小于wait time ,就在 ttl 时间内,从entry的信号量获取一个许可(除非被中断或者一直没有可用的许可)。
                    getentry(threadid).getlatch().tryacquire(ttl, timeunit.milliseconds);
                } else {
                    //则就在wait time 时间范围内等待可以通过信号量
                    getentry(threadid).getlatch().tryacquire(time, timeunit.milliseconds);
                }
 
                // 更新剩余的等待时间(最大等待时间-已经消耗的阻塞时间)
                time -= system.currenttimemillis() - currenttime;
                if (time <= 0) {
                    acquirefailed(threadid);
                    return false;
                }
            }
        } finally {
            // 7.无论是否获得锁,都要取消订阅解锁消息
            unsubscribe(subscribefuture, threadid);
        }
        return get(trylockasync(waittime, leasetime, unit));
    }
  • 尝试获取锁,返回 null 则说明加锁成功,返回一个数值,则说明已经存在该锁,ttl 为锁的剩余存活时间。
  • 如果此时客户端 2 进程获取锁失败,那么使用客户端 2 的线程 id(其实本质上就是进程 id)通过 redis 的 channel 订阅锁释放的事件。如果等待的过程中一直未等到锁的释放事件通知,当超过最大等待时间则获取锁失败,返回 false,也就是第 39 行代码。如果等到了锁的释放事件的通知,则开始进入一个不断重试获取锁的循环。
  • 循环中每次都先试着获取锁,并得到已存在的锁的剩余存活时间。如果在重试中拿到了锁,则直接返回。如果锁当前还是被占用的,那么等待释放锁的消息,具体实现使用了信号量 semaphore 来阻塞线程,当锁释放并发布释放锁的消息后,信号量的 release() 方法会被调用,此时被信号量阻塞的等待队列中的一个线程就可以继续尝试获取锁了。
  • 当锁正在被占用时,等待获取锁的进程并不是通过一个 while(true) 死循环去获取锁,而是利用了 redis 的发布订阅机制,通过 await 方法阻塞等待锁的进程,有效的解决了无效的锁申请浪费资源的问题。

看门狗如何自动续期

redisson看门狗机制, 只要客户端加锁成功,就会启动一个 watch dog。

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
private <t> rfuture<long> tryacquireasync(long leasetime, timeunit unit, long threadid) {
    if (leasetime != -1) {
        return trylockinnerasync(leasetime, unit, threadid, rediscommands.eval_long);
    }
    rfuture<long> ttlremainingfuture = trylockinnerasync(commandexecutor.getconnectionmanager().getcfg().getlockwatchdogtimeout(), timeunit.milliseconds, threadid, rediscommands.eval_long);
    ttlremainingfuture.oncomplete((ttlremaining, e) -> {
        if (e != null) {
            return;
        }
 
        // lock acquired
        if (ttlremaining == null) {
            scheduleexpirationrenewal(threadid);
        }
    });
    return ttlremainingfuture;
}

leasetime 必须是 -1 才会开启 watch dog 机制,如果需要开启 watch dog 机制就必须使用默认的加锁时间为 30s。

如果你自己自定义时间,超过这个时间,锁就会自定释放,并不会自动续期。

续期原理

续期原理其实就是用lua脚本,将锁的时间重置为30s

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
private void scheduleexpirationrenewal(long threadid) {
    expirationentry entry = new expirationentry();
    expirationentry oldentry = expiration_renewal_map.putifabsent(getentryname(), entry);
    if (oldentry != null) {
        oldentry.addthreadid(threadid);
    } else {
        entry.addthreadid(threadid);
        renewexpiration();
    }
}
 
protected rfuture<boolean> renewexpirationasync(long threadid) {
    return commandexecutor.evalwriteasync(getname(), longcodec.instance, rediscommands.eval_boolean,
            "if (redis.call('hexists', keys[1], argv[2]) == 1) then " +
                "redis.call('pexpire', keys[1], argv[1]); " +
                "return 1; " +
            "end; " +
            "return 0;",
        collections.<object>singletonlist(getname()),
        internallockleasetime, getlockname(threadid));
}

watch dog 机制其实就是一个后台定时任务线程,获取锁成功之后,会将持有锁的线程放入到一个 redissonlock.expiration_renewal_map里面,然后每隔 10 秒 (internallockleasetime / 3) 检查一下,如果客户端 还持有锁 key(判断客户端是否还持有 key,其实就是遍历 expiration_renewal_map 里面线程 id 然后根据线程 id 去 redis 中查,如果存在就会延长 key 的时间),那么就会不断的延长锁 key 的生存时间。

如果服务宕机了,watch dog 机制线程也就没有了,此时就不会延长 key 的过期时间,到了 30s 之后就会自动过期了,其他线程就可以获取到锁。

到此这篇关于redis分布式锁如何自动续期的实现的文章就介绍到这了,更多相关redis分布式锁自动续期内容请搜索服务器之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持服务器之家!

原文链接:https://blog.csdn.net/upstream480/article/details/121578638

延伸 · 阅读

精彩推荐
  • Redis关于Redis数据库入门详细介绍

    关于Redis数据库入门详细介绍

    大家好,本篇文章主要讲的是关于Redis数据库入门详细介绍,感兴趣的同学赶快来看一看吧,对你有帮助的话记得收藏一下,方便下次浏览...

    沃尔码6982022-01-24
  • RedisRedis Template实现分布式锁的实例代码

    Redis Template实现分布式锁的实例代码

    这篇文章主要介绍了Redis Template实现分布式锁,需要的朋友可以参考下 ...

    晴天小哥哥2592019-11-18
  • Redisredis缓存存储Session原理机制

    redis缓存存储Session原理机制

    这篇文章主要为大家介绍了redis缓存存储Session原理机制详解,有需要的朋友可以借鉴参考下,希望能够有所帮助,祝大家多多进步,早日升职加薪...

    程序媛张小妍9252021-11-25
  • RedisRedis集群的5种使用方式,各自优缺点分析

    Redis集群的5种使用方式,各自优缺点分析

    Redis 多副本,采用主从(replication)部署结构,相较于单副本而言最大的特点就是主从实例间数据实时同步,并且提供数据持久化和备份策略。...

    优知学院4082021-08-10
  • Redis《面试八股文》之 Redis十六卷

    《面试八股文》之 Redis十六卷

    redis 作为我们最常用的内存数据库,很多地方你都能够发现它的身影,比如说登录信息的存储,分布式锁的使用,其经常被我们当做缓存去使用。...

    moon聊技术8182021-07-26
  • RedisRedis 6.X Cluster 集群搭建

    Redis 6.X Cluster 集群搭建

    码哥带大家完成在 CentOS 7 中安装 Redis 6.x 教程。在学习 Redis Cluster 集群之前,我们需要先搭建一套集群环境。机器有限,实现目标是一台机器上搭建 6 个节...

    码哥字节15752021-04-07
  • Redis如何使用Redis锁处理并发问题详解

    如何使用Redis锁处理并发问题详解

    这篇文章主要给大家介绍了关于如何使用Redis锁处理并发问题的相关资料,文中通过示例代码介绍的非常详细,对大家学习或者使用Redis具有一定的参考学习...

    haofly4522019-11-26
  • Redis详解三分钟快速搭建分布式高可用的Redis集群

    详解三分钟快速搭建分布式高可用的Redis集群

    这篇文章主要介绍了详解三分钟快速搭建分布式高可用的Redis集群,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,...

    万猫学社4502021-07-25