一、前言
关于重复请求，指的是我们服务端接收到很短的时间内的多个相同内容的重复请求。而这样的重复请求如果是幂等的（每次请求的结果都相同，如查询请求），那其实对于我们没有什么影响，但如果是非幂等的（每次请求都会对关键数据造成影响，如删除关系、建立关系等），那就会轻则产生脏数据，重则导致系统错误。
因此，在当前普遍分布式服务的情况下，如何避免和解决重复请求给我们带来的数据异常成为了亟待解决的问题。而避免重复请求，最好的做法是前后端共同去做。
1. 前端或客户端在非幂等的按钮上直接做禁止提交重复请求的操作。
2. 后端在接收到请求时加锁，完成后解锁。
这篇博客主要讲的是在后端基于分布式锁的概念去出一个关于解决重复请求的通用解决方案。
二、正文
为何要使用分布式锁来解决呢？因为我们当前普遍的架构都是分布式的服务端，前端请求通过网关层转发至后端，如下图所示，因此如果只在一个单独的服务器上做限制，就无法在分布式的服务中完成应对高频次的重复请求了。
基本思路
思路基本上是对需要做防止重复请求的接口加上分布式锁，步骤如下：
- 在接收到请求后，根据方法名+参数取md5值，获取该方法及该参数的唯一标识；
- 获取标识后设置分布式锁，并且设置过期时间；
- 在请求结束后，释放分布式锁。
即可完成对当前请求的重复请求禁止。如果想做通用的解决方案，那就需要把上述步骤做出一个小功能出来，由于本人对java、spring框架比较熟悉，就拿这个来做个示例。
基于spring切面、redis的实现
想必一些熟悉spring的同学已经知道我想采用什么方式了，做通用型的，肯定要用到spring的aop特性，注解+切面+md5key+反射+redis实现，具体如下：
- 定义一个分布式锁注解，注解包含过期时间设置、忽略参数；
- 定义一个切面，切点为分布式锁注解，在切面中获取需要使用分布式锁的方法名、参数、过期时间，并且将方法名及未被忽略参数做md5取唯一标识；
- 再根据上述唯一标识设置redsis分布式锁；
- 方法结束后解锁。
代码如下：
注解
定义名称为RepeatOperationLock的注解，参数有锁过期时间及忽略属性（即不参与分布式锁标识MD5计算的属性）。
@Documented
@Inherited
@Retention(RetentionPolicy.RUNTIME)
@Target({ElementType.METHOD})
@Component
public @interface RepeatOperationLock {
/**
* 锁时长，默认500ms
* @return
*/
long timeOut() default 500;
/**
* 忽略上锁参数位置，从0开始
* @return
*/
int[] ignoreIndex();
}
复制代码切面
切点为上述注解，切面中做了以下几件事，获取方法名、获取注解属性（过期时间、忽略属性）、计算方法+属性的md5值、调用外部分布式锁的方法。
@Aspect
@Slf4j
@Component
public class LockAspect {
@Autowired
RepeatLockService repeatLockService;
@Pointcut("@annotation(com.ls.javabase.aspect.annotation.RepeatOperationLock)")
public void serviceAspect() {
}
@Before("serviceAspect()")
public void setLock(JoinPoint point) {
log.info("防止方法重复调用接口锁,上锁,point:{}", point);
Method method = ((MethodSignature) point.getSignature()).getMethod();
RepeatOperationLock repeatOperationLock = method.getAnnotation(RepeatOperationLock.class);
if (Objects.isNull(repeatOperationLock)) {
log.warn("---repeatOperationLock is null---");
return;
}
long timeOut = repeatOperationLock.timeOut();
int [] ignoreIndex = repeatOperationLock.ignoreIndex();
log.info("lockTime——{}", timeOut);
if (Objects.isNull(timeOut)) {
log.warn("---timeOut is null");
return;
}
String methodName = method.getName();
Object[] args = point.getArgs();
repeatLockService.setRepeatLock(methodName, args, timeOut);
}
@After("serviceAspect()")
public void removeLock(JoinPoint point) {
log.info("防止方法重复调用接口锁,解锁,point:{}",point);
Method method = ((MethodSignature) point.getSignature()).getMethod();
RepeatOperationLock repeatOperationLock = method.getAnnotation(RepeatOperationLock.class);
if (Objects.isNull(repeatOperationLock)) {
log.warn("---repeatOperationLock is null---");
return;
}
long timeOut = repeatOperationLock.timeOut();
log.info("lockTime——{}", timeOut);
if (Objects.isNull(timeOut)) {
log.warn("---timeOut is null");
return;
}
String methodName = method.getName();
Object[] args = point.getArgs();
repeatLockService.removeRepeatLock(methodName, args);
}
/**
*
* @param args
* @param ignoreIndex
* @return
*/
private Object [] getEffectiveArgs(Object[] args,int [] ignoreIndex) {
for (int i:ignoreIndex){
args[i] = null;
}
for (Object obj:args){
if (obj==null){
}
}
return args;
}
}
复制代码md5方法
public class Md5Encode {
/**
* constructors
*/
private Md5Encode() {
}
/**
* @param s 需要hash的字符串
* @return hash之后的字符串
*/
public static final String md5(final String s) {
char[] hexDigits = {'0', '1', '2', '3', '4', '5', '6', '7', '8', '9', 'a', 'b', 'c', 'd', 'e', 'f'};
try {
byte[] btInput = s.getBytes(Charset.defaultCharset());
// 获得MD5摘要算法的 MessageDigest 对象
MessageDigest mdInst = MessageDigest.getInstance("MD5");
// 使用指定的字节更新摘要
mdInst.update(btInput);
// 获得密文
byte[] md = mdInst.digest();
// 把密文转换成十六进制的字符串形式
int j = md.length;
char[] str = new char[j * 2];
int k = 0;
for (int i = 0; i < j; i++) {
byte byte0 = md[i];
str[k++] = hexDigits[byte0 >>> 4 & 0xf];
str[k++] = hexDigits[byte0 & 0xf];
}
return new String(str);
} catch (Exception e) {
e.printStackTrace();
return null;
}
}
}
复制代码分布式锁
这里的分布式锁使用redis，但有点问题，是在设置锁以及锁过期时间时不是原子性的，后续会做出改进，实现一个完整的分布式锁方案，写到博客里。
@Slf4j
@Service
public class RepeatLockService {
@Autowired
RepeatRedisUtil repeatRedisUtil;
public void setRepeatLock(String methodName, Object[] args, Long expireTime) {
for (Object obj : args) {
log.info("方法名：{},对象:{}，对象hashcode:{}", methodName, obj, obj.hashCode());
}
Boolean lock = repeatRedisUtil.setRepeatLock(methodName, args, expireTime);
if (!lock) {
log.info("已有相同请求");
}
}
public void removeRepeatLock(String methodName, Object[] args) {
repeatRedisUtil.removeRepeatLock(methodName, args);
}
}
@Component
public class RepeatRedisUtil {
@Autowired
RedisTemplate redisTemplate;
private static final String repeatLockPrefix = "repeat_lock_";
/**
* 设置重复请求锁，这一块的分布式锁的加与释放有问题，后续会专门出个文章总结redis分布式锁
* @param methodName
* @param args
* @param expireTime 过期时间ms
* @return
*/
public boolean setRepeatLock(String methodName, Object[] args,long expireTime) {
String key = getRepeatLockKey(methodName, args);
ValueOperations val = redisTemplate.opsForValue();
Long flag = val.increment(key, 1);
if (flag != 1) {
return false;
}
redisTemplate.expire(key, expireTime, TimeUnit.MILLISECONDS);
return true;
}
/**
* 删除重复请求锁
* @param methodName
* @param args
*/
public void removeRepeatLock(String methodName, Object[] args){
String key = getRepeatLockKey(methodName, args);
redisTemplate.delete(key);
}
/**
* 获取重复请求锁Key
*
* @param methodName
* @param args
* @return
*/
public String getRepeatLockKey(String methodName, Object[] args) {
String repeatLockKey = repeatLockPrefix + methodName;
for (Object obj : args) {
repeatLockKey = repeatLockKey+"_"+ obj.hashCode();
}
return repeatLockKey;
}
}
复制代码测试service接口
即在方法上使用注解即可，代表过期时间为200000ms，忽略第二个参数。
@Slf4j
@Service
public class TestLockService {
@RepeatOperationLock(timeOut = 200000, ignoreIndex = 1)
public void testLock(UserDto userDto,int i){
log.info("service中属性:{},{}",userDto,i);
log.info("service中hashcode,userDto:{},i:{}",userDto.hashCode(),i);
}
}
复制代码结语
这样一个基于spring的通用分布式锁解决方案就分享完毕了，确实还存在着一些瑕疵，在分布式锁的实现上海有一些问题，比如上锁时不是原子性的，解锁时没有判断是否会被误解等等，后续会专门作出分布式锁的总结并改进，上面也只是提出了一个基于分布式锁解决重复请求的思想，也希望能多多交流。