集群环境中使用Redis实现分布式锁两种方式

栏目: 服务器 · 发布时间: 5年前

内容简介:互联网的应用场景中,为了支持高并发的请求,服务都是执行的分布式部署,相同的任务可以在集群中不同的服务器上执行,并且现在的服务容器都是支持多线程,相同的任务也可能会被同一个容器多次执行,都要求执行结果都满足分布式锁,就是为了确保在分布式的环境下,相同任务只会执行成功的执行一次,后续的执行不会对这些已经产生了变化的业务再次产生影响。分布式锁的实现有不少的方式,如:

一、介绍

互联网的应用场景中,为了支持高并发的请求,服务都是执行的分布式部署,相同的任务可以在集群中不同的服务器上执行,并且现在的服务容器都是支持多线程,相同的任务也可能会被同一个容器多次执行,都要求执行结果都满足 幂等性 的设计原则。

分布式锁,就是为了确保在分布式的环境下,相同任务只会执行成功的执行一次,后续的执行不会对这些已经产生了变化的业务再次产生影响。

分布式锁的实现有不少的方式,如:

  1. 使用RDBMS数据库本身的表锁或行锁特性;
  2. 使用 Redis 做为分布式锁;
  3. 使用Zookeeper做为分布式锁;

使用RDBMS数据库做为锁不是笔者要讨论的范畴,因为其本身的特性,不太符合在高并发下锁的应用场景,这里以Redis作为分布式锁做为介绍。

二、Redis

Redis本身有一些命令组支持原子性的操作,如getset、setns,这些命令可以用于分布式锁的场景中。

1、使用getset作为分布式锁控制实现

getSet本身是支持原子性的,在写入新值的同时会返回旧的值,用这个写入新值并获取旧值做为分布式锁的控制实现,如果返回的值不为空,那就说明前面已经有其它线程(这里的其它线程可以指当前容器中当前服务的其它线程,也指由部署在其它服务器上的应用中的线程)修改了该值,则可以认为已经有线程在对该请求正在处理,因而可以放弃后面的处理逻辑。

可以将当前系统的时间作为分布式锁key的值,后续其它线程的请求时,将其请求的时间与获取到的锁对应的key的旧值进行比较,比较是否已经超过了一定的时间控制阀值,如果超过了 则可以认为 (这里存在误判的可能性,因为后续逻辑的数据处理,恰好超过了这个时间比较阀值,就会导致重复执行,因而这里时间控制阀值要设置的比较合理,另外也需要合适的熔断机制用于保证)前面的交易处理失败(如服务恰好在设置了用于分布式锁的key后,立即就挂了,没有执行到后面的删除操作)导致用于分布式锁的key没有被删除掉,可以继续处理该请求的后续交易逻辑。

这个是非常轻量级的事务控制,不会对Redis产生外部事务(应用与Redis之间的交互事务),只是需要对Redis多进一次getset操作,流程图如下:

集群环境中使用Redis实现分布式锁两种方式

其中蓝色部分表示获取锁的逻辑。

Java代码实现如下:

@Resource
private RedisTemplate<String, String> redisTemplate;
// 超时时间,以毫秒为单位
private final long timeout = 2000;

@Test
public void testLock() {
	// 用于判断交易唯一性和合法性的Token,在交易执行之前先保存在服务端,
	// 并且下发给客户端,客户端会在执行交易之前把Token带上,没带Token的
	// 请求、Token不存在的服务端的请求、Token不正确的请求都视为非法请求
	String token = "...";
	String key = MD5Util.md5Of32(token);
	String lockKey = new StringBuilder(key).append("_lock").toString();
	boolean isGetKey = getLock(lockKey);
	if (!isGetKey) {
		log.warn("当前交易正在被处理中");
	}
	boolean handleSuccess = false;
	try {
		log.info("处理交易开始");
		String storedToken = redisTemplate.opsForValue().get(key);
		// 判断Token是否存在且合法
		if (!token.equals(storedToken)) {
			log.warn("指定的Token不存在.");
			return;
		}
		handleSuccess = true;
		log.info("处理交易结束");
	} catch (Exception e) {
		log.info("处理发生异常", e);
	} finally {
		if (handleSuccess) {
			// 限制了单个Token只能够执行一笔记交易,因而执行成功后将其删除
			List<String> keys = new ArrayList<String>();
			keys.add(key);// 限制了单个Token只能够执行一笔记交易,因而执行成功后将其删除
			keys.add(lockKey);// 用于表示锁的key删除,表示释放掉锁
			redisTemplate.delete(keys);
		} else {
			// 删除用于锁定的key
			redisTemplate.delete(lockKey);
		}
	}
}

/**
 * 原理是从redis中获取到的lockKey的值是不是存在,如果不存在表示写入的是当前值,表示锁获取成功;
 * 如果获取到的值存在,再判断是否已经超过了指定的期限,如果超过了指定的期限,则认为锁获取成功,否则认为锁获取失败;
 * 
 * @param lockKey 用于获取锁定的key
 * @return true表示获取到锁,false表示未获取到锁
 */
public boolean getLock(String lockKey) {
	long now = System.currentTimeMillis();
	// Redis的GetSet返回的值必须是字符串,否则会抛异常,因而将其转换为字符串
	String nowTime = String.valueOf(now);
	String oldTime = null;
	// 判断用于锁定的key是否已经被设置了值,如果被设置了值,则用于控制后续的处理逻辑不再进行
	if ((oldTime = redisTemplate.opsForValue().getAndSet(lockKey, nowTime)) != null) {
		// 检查锁lockKey的值是不是超过了设定的时间,如2秒钟,没有超过则返回,不继续处理后续的任务;
		// 注:这个逻辑有个问题,就是客户端在2秒钟之内不停的重试,就永远不会进入到后面的处理环节。
		// 不过针对正常的业务请求这个是可以约定的,针对非正常的请求,被拦截也很正常,所以这个问题不是问题。
		if (now - Long.parseLong(oldTime) < timeout) {
			return false;
		}
		return true;
	}
	return true;
}

2、使用setnx作为分布式锁控制实现

setnx和getset的执行逻辑不同,getset是设置新值并返回旧值,setnx如果存在旧值时可以通过参数控制不设置值并返回0,不存在旧值时才设值并返回1。

二者处理流程上都是相同的,不同之处在于获取锁的实现,setnx的实现逻辑如下:

集群环境中使用Redis实现分布式锁两种方式

其中绿色部分为setnx获取锁的逻辑,这个和getset是不同的实现逻辑。

setnx获取锁的 Java 代码实现如下:

public boolean getLock(String lockKey) {
	RedisConnection connection = redisTemplate.getConnectionFactory().getConnection();
	JedisCommands commands = (JedisCommands) connection.getNativeConnection();
	boolean con = false;
	do {
		long now = System.currentTimeMillis();
		// Redis的GetSet返回的值必须是字符串,否则会抛异常,因而将其转换为字符串
		String nowTime = String.valueOf(now);
		con = false;
		// 返回1表示锁获取成功,返回0表示锁取失败
		String result = commands.set(lockKey, nowTime, "NX", "PX", expire);
		if ("1".equals(result)) {
			return true;
		} else {
			String oldTime = redisTemplate.opsForValue().get(lockKey);
			if (null != oldTime) {
				// 检查锁lockKey的值是不是超过了设定的时间,如2秒钟,如果超过了则继续尝试获取锁,
				// 直到获取到锁,或者数据未超期时退出,循环判断可以解决死锁的问题
				if (now - Long.parseLong(oldTime) >= expire) {// 数据已经过期了
					con = true;
				}
			}
		}
	} while (con);
	return false;
}

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

软件预构艺术(中文版)

软件预构艺术(中文版)

Ken Pugh / O'Reilly Taiwan公司 / 东南大学 / 2010-6 / 26.00元

利用经验累积而得到的洞察力开发新的解决方案被称为预构。透过重构而获得的专业知识也属于这类经验,而预构的词源即重构。重构是修改程序或软件系统内部结构的实践,以此在保留其现有行为的基础上改良设计。重构的原因有多种:方便后期增加功能、提高可维护性、提升性能。 本书作者是经验老道的软件开发人员。书中,作者运用他个人和其他众多开发人员的丰富经验,展示由其推衍而得的各项实践方针。这些方针把优秀的开发人员......一起来看看 《软件预构艺术(中文版)》 这本书的介绍吧!

Base64 编码/解码
Base64 编码/解码

Base64 编码/解码

RGB HSV 转换
RGB HSV 转换

RGB HSV 互转工具

HEX HSV 转换工具
HEX HSV 转换工具

HEX HSV 互换工具