对Redis分布式锁的一点错误理解

本文涉及的产品
云数据库 Redis 版,社区版 2GB
推荐场景:
搭建游戏排行榜
简介: 云栖号资讯:【点击查看更多行业资讯】在这里您可以找到不同行业的第一手的上云资讯,还在等什么,快来! Redis 分布式锁在日常工作中经常用到,面试中也是高频问题,自己在看的时候,发现对于 Redlock 理解有些偏差,主要是 Redlock 是在单实例(单集群)还是多实例(多集群)下实现的。

云栖号资讯:【点击查看更多行业资讯
在这里您可以找到不同行业的第一手的上云资讯,还在等什么,快来!


Redis 分布式锁在日常工作中经常用到,面试中也是高频问题,自己在看的时候,发现对于 Redlock 理解有些偏差,主要是 Redlock 是在单实例(单集群)还是多实例(多集群)下实现的。查资料的时候发现有这个问题的绝不止我一个,甚至很多人理解都是错的还写博客告诉别人。当然如果你已经知道了,看看我走过的弯路或许也会有些收获。

Redis 分布式锁的实现

在介绍 Redlock 之前,先看下一般情况下的实现方式。

加锁:

1

解锁:

2

这是一段 lua 脚本,意思是:当 key 存在并且值恰好等于给定的值时,才删除 key

这里有几个需要注意的点:

  • 用 SET 命令就够了,SETNX 和 EXPIRE 组合使用无法保证原子性。
  • my_random_value,唯一值,配合解锁的 lua 脚本看,用于删除时确保只有加锁成功的客户端才能释放锁。
  • NX:只在 key 不存在时,才设置。不能变
  • PX:过期时间,单位为毫秒。如果改为 EX,单位变为秒。这两个选项无法同时存在。

如果是面试,当你说出是如何实现的,面试官可能就会问这种实现有什么问题。

Redis 分布式锁的问题

首先如果是单节点,节点一挂,锁就没了,等节点再重启,别的客户端就可以获取到锁,也就是两个客户端都有锁了,这就有问题了。

可以添加一个 slave 节点,当 master 节点挂了可以切换到 slave,但是还会有问题,因为 Redis 默认是异步进行主从同步的,比如以下场景:

1.客户端 A 获取 master 中的锁。

2.在将 key 的写入传输到 slave 之前,master 崩溃。

3.slave 晋升为 master

4.客户端 B 获取了客户端 A 已经获取到的锁。

如何解决这种问题呢,Redis 官网有一种算法实现,Redlock。

Redlock

加锁的过程

1.客户端获取当前时间,单位毫秒

2.尝试依次获取 N 个实例中的锁,在所有实例中使用相同的 key 和随机值。在每个实例中设置 key 的时候,客户端会设置一个超时时间,这个超时时间应该小于锁的有效时间,以防节点已经挂掉。例如锁有效时间为 10 秒,则超时时间应该在 5-50 毫秒之间。

3.客户端通过从当前时间中减去在步骤 1 中获得的时间戳,来计算获取锁所花费的时间。当且仅当客户端能够在大多数实例中获得锁(超过一半)且获取锁所花费的总时间少于锁的有效时间,才认为已经获取到锁。

4.如果获取了锁,则将其有效时间视为初始有效时间减去获取锁所使用的时间(步骤 3 计算的结果)。实例中每个 key 的过期时间是初始有效时间,而这一步计算的有效时间只是用于给客户端使用,并不会设置到 redis 中。

5.如果客户端由于某种原因(无法锁定 N / 2 + 1 个实例或有效时间为负)而未能获得该锁,则它将尝试解锁所有实例(即便某些 Redis 实例根本就没有加锁成功,防止某些节点获取到锁但是客户端没有得到响应而导致接下来的一段时间不能被重新获取锁)。

问题就在于,对于 N 个实例的理解,我最开始以为可以是集群中的多个 master 节点,但是问题就来了,如何在同一个集群中多个 master 设置相同的 key。

走了很多弯路,最后发现是多个实例(多集群),也就是这些实例之间并没有任何关系,这样也可以理解为什么可以在每个实例设置相同的 key 以及为什么控制多数加锁成功的判断需要放在客户端了。但是在实际场景中就不大可能会使用,因为实现 Redlock 最少需要三个节点,生产环境基本都是集群,也就是为了加锁就需要至少连接 3 个集群。什么情况下一个服务会连多个 Redis 集群呢,多级缓存?每个 Redis 是不同业务的缓存?我还没了解过。

如果这是面试官期待的基于 Redis 分布式加锁解决方案,我觉得这个面试官可能也理解的有点问题。

奇怪的知识

走弯路的时候也了解了不少新的知识

redis-cli -c 参数

帮助中对于 -c 是这么描述的

3

虽然说是启用集群模式,但并不是服务端分单机模式还是集群模式,只是加了 -c 会自动进行重定向。

4

开始没加 -c 去请求一个不在本节点存储的 key ,会返回重定向信息,而如果加上,会自动进行重定向。

key 所属的哈希槽的计算

集群情况下,key 属于哪个哈希槽是在客户端计算的还是服务端?

服务端肯定是有的,如果只在客户端进行,那就相当于加了一层查询路由,一致性需要由这一层保证,而在服务端没有任何保证,这肯定是不对的。而且像上面给出的重定向信息,说明服务端肯定是计算过的。

客户端一般也会有,只是当作缓存,每次直接选择存放 key 的节点,而不需要频繁的进行重定向。

一般如果是集群的话,最开始客户端就会建立整个集群的拓扑,获取每个节点保存那些槽位,但是后续如果节点和槽位的映射关系变化了,具体的刷新策略就看每个客户端的实现了。

【云栖号在线课堂】每天都有产品技术专家分享!
课程地址:https://yqh.aliyun.com/live

立即加入社群,与专家面对面,及时了解课程最新动态!
【云栖号在线课堂 社群】https://c.tb.cn/F3.Z8gvnK

原文发布时间:2020-04-20
本文作者:憨憨的春天
本文来自:“掘金”,了解相关信息可以关注“掘金”

相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
1月前
|
NoSQL 算法 安全
Redlock 算法-主从redis分布式锁主节点宕机锁丢失的问题
Redlock 算法-主从redis分布式锁主节点宕机锁丢失的问题
153 0
|
1月前
|
NoSQL 关系型数据库 MySQL
分布式锁(redis/mysql)
分布式锁(redis/mysql)
58 1
|
28天前
|
NoSQL Java Redis
如何通俗易懂的理解Redis分布式锁
在多线程并发的情况下,我们如何保证一个代码块在同一时间只能由一个线程访问呢?
37 2
|
1月前
|
人工智能 监控 NoSQL
【万字长文 一文搞定】Redis:从新手村到大师殿堂的奥德赛之旅 9种实现分布式锁的全技术指南
【万字长文 一文搞定】Redis:从新手村到大师殿堂的奥德赛之旅 9种实现分布式锁的全技术指南
81 4
|
1月前
|
消息中间件 存储 NoSQL
【Redis项目实战】使用Springcloud整合Redis分布式锁+RabbitMQ技术实现高并发预约管理处理系统
【Redis项目实战】使用Springcloud整合Redis分布式锁+RabbitMQ技术实现高并发预约管理处理系统
|
1月前
|
NoSQL API Redis
Redis分布式锁实现的三个核心
Redis分布式锁实现的三个核心
|
1月前
|
NoSQL Java Redis
Redis分布式锁和Java锁的区别
Redis分布式锁和Java锁的主要区别在于它们的适用范围和实现机制。
41 2
|
3月前
|
NoSQL Java 测试技术
字节二面:Spring Boot Redis 可重入分布式锁实现原理?
字节二面:Spring Boot Redis 可重入分布式锁实现原理?
161 1
|
3月前
|
存储 缓存 NoSQL
【分布式】Redis与Memcache的对比分析
【1月更文挑战第25天】【分布式】Redis与Memcache的对比分析
|
3月前
|
监控 NoSQL Linux
【分布式】Redis的持久化方案解析
【1月更文挑战第25天】【分布式】Redis的持久化方案解析

热门文章

最新文章