Redis分布式锁解决多进程/多线程下单个进程/单个线程运行

存储 存储软件 分布式 Redis
最近,有两台容器,当程序运行时,会发送多份通知,那么需要保证同一时刻只有一个进程(一台容器)来运行,此时用分布式锁解决该问题。

[[423225]]

1.导语

在业务开发中像订单写入,一般需要单线程来保证订单写入数据库,防止数据多次被插入。

最近,有两台容器,当程序运行时,会发送多份通知,那么需要保证同一时刻只有一个进程(一台容器)来运行,此时用分布式锁解决该问题。

业界也有许多解决这种方案,这里以redis分布式锁来解决。

简单来说就是采用golang redis库实现下面方案即可。

2.redis的分布式锁实现

2.1 setnx+expire

setnx key value,将key设置为value,当键不存在时,才能成功,若键存在,什么也不做,成功返回1,失败返回0。

SETNX实际上就是SET IF NOT Exists的缩写。

 

  1. setnx key val 
  2. expire key seconds 

但是,上述两个操作不具有原子性,如果执行完第一条指令应用异常或者重启了,锁将无法过期。

2.2 lua脚本

既然是原子性无法保证,那就采用执行lua脚本的原子性,将上述两个操作封装到lua脚本中便可以实现。

 

  1. if redis.call('setnx',KEYS[1],ARGV[1]) == 1 then 
  2.    redis.call('expire',KEYS[1],ARGV[2]) 
  3. else 
  4.    return 0 
  5. end

2.3 携带TTL的set

从 Redis 2.6.12 版本开始, SET 命令的行为可以通过一系列参数来修改。

 

  1. SET key value [EX seconds]  
  2. [PX milliseconds] [NX|XX] 

将字符串值 value 关联到 key 。

如果 key 已经持有其他值, SET 就覆写旧值,无视类型。

对于某个原本带有生存时间(TTL)的键来说, 当 SET 命令成功在这个键上执行时, 这个键原有的 TTL 将被清除。

  • EX second :设置键的过期时间为 second 秒。SET key value EX second 效果等同于 SETEX key second value 。
  • PX millisecond :设置键的过期时间为 millisecond 毫秒。SET key value PX millisecond 效果等同于 PSETEX key millisecond value 。
  • NX :只在键不存在时,才对键进行设置操作。SET key value NX 效果等同于 SETNX key value 。
  • XX :只在键已经存在时,才对键进行设置操作。

直接使用可能存在如下问题:

  • 超时解锁导致并发

例如:如果线程 A 成功获取锁并设置过期时间 30 秒,但线程 A 执行时间超过了 30 秒,锁过期自动释放,此时线程 B 获取到了锁,线程 A 和线程 B 并发执行。

A、B 两个线程发生并发显然是不被允许的,一般有两种方式解决该问题:

解决方案:1)确保代码在过期时间之前释放。2)为获取锁的线程增加守护线程,为将要过期但未释放的锁增加有效时间。

锁被别的线程误删除。

例如:如果线程 A 成功获取到了锁,并且设置了过期时间 30 秒,但线程 A 执行时间超过了 30 秒,锁过期自动释放,此时线程 B 获取到了锁;随后 A 执行完成,线程 A 使用 DEL 命令来释放锁,但此时线程 B 加的锁还没有执行完成,线程 A 实际释放的线程 B 加的锁。

解决方案是:通过在 value 中设置当前线程加锁的标识,在删除之前验证 key 对应的 value 判断锁是否是当前线程持有。可生成一个 UUID 标识当前线程,使用 lua 脚本做验证标识和解锁操作。

学习文章:

https://xiaomi-info.github.io/2019/12/17/redis-distributed-lock/

https://zhuanlan.zhihu.com/p/115848078

责任编辑:武晓燕 来源: 光城
相关推荐

2019-02-26 11:15:25

进程多线程多进程

2022-03-09 17:01:32

Python多线程多进程

2023-12-13 09:56:13

​多进程多线程协程

2020-04-07 11:10:30

Python数据线程

2021-06-11 11:28:22

多线程fork单线程

2021-06-11 06:54:35

PythonThreadingMultiproces

2016-10-09 20:15:30

多线程多进程

2021-04-20 12:39:52

Node.js多线程多进程

2021-08-04 23:30:28

Node.js开发线程

2023-12-11 18:18:24

Python编程线程

2010-07-26 09:45:09

Perl多进程

2021-10-26 19:37:15

RedisRedis应用篇

2020-10-13 07:44:45

理解分布式

2019-06-19 15:40:06

分布式锁RedisJava

2023-11-01 11:20:57

2022-05-26 08:31:41

线程Java线程与进程

2013-12-02 17:33:20

Linux进程多线程

2023-11-28 13:52:00

Python多进程多线程

2022-01-04 09:53:37

Python多线程多进程

2019-10-16 17:07:36

Java服务器架构
点赞
收藏

51CTO技术栈公众号