java 高并发下超购问题解决
//@desc:java 高并发下锁机制初探
//@desc:码字不宜,转载请注明出处
//@author:张慧源 <turing_zhy@163.com>
//@date:2021/12/28
1.探究背景
大家可以看到在高并发下导致积分变动错误,所以想了一些办法解决
2.使用乐观锁去解决
a.添加了version字段
b.做了自定义注解去在乐观锁失败的时候进行重试
/**
* 是否进行方法重试注解
*
* @author abner<huiyuan.zhang @ hex-tech.net>
* @date 2021-12-24 19:59:38
*/
@Target({ ElementType.METHOD, ElementType.TYPE })
@Retention(RetentionPolicy.RUNTIME)
public @interface IsTryAgain { }
/**
* 重试切面
*
* @author abner<huiyuan.zhang @ hex-tech.net>
* @date 2021-12-24 20:40:40
*/
@Aspect
@Component
public class TryAgainAspect { /**
* 默认重试几次
*/
private static final int DEFAULT_MAX_RETRIES = 5; private int maxRetries = DEFAULT_MAX_RETRIES; public void setMaxRetries(int maxRetries) {
this.maxRetries = maxRetries;
} @Pointcut("@annotation(cn.hexcloud.m82.points.service.annotation.IsTryAgain)")
public void retryOnOptFailure() {
// pointcut mark
} @Around("retryOnOptFailure()")
@Transactional(rollbackFor = Exception.class)
public Object doConcurrentOperation(ProceedingJoinPoint pjp) throws Throwable {
int numAttempts = 0;
do {
numAttempts++;
try {
//再次执行业务代码
return pjp.proceed();
} catch (TryAgainException ex) {
if (numAttempts > maxRetries) {
//log failure information, and throw exception
// 如果大于 默认的重试机制 次数,我们这回就真正的抛出去了
throw new ApiException(ApiResultEnum.ERROR_TRY_AGAIN_FAILED.getName());
} else {
//如果 没达到最大的重试次数,将再次执行
System.out.println("=====正在重试=====" + numAttempts + "次");
}
}
} while (numAttempts <= this.maxRetries); return null;
}
}
c.到这里也没啥问题,但是我代码里面还有做幂等的校验
//检查幂等
UserPointsDetail idemInfo = iUserPointsDetailService.checkIdem(orderInAddScoreInDto.getOrderNo()); if (idemInfo != null) {
throw new BizException(new RespInfo("该笔积分已经添加过了-idemStr:" + orderInAddScoreInDto.getOrderNo()));
}
这个拦不住,所以我就想直接去加锁
2.1 小插曲,中间还想过用for update这种悲观锁去做解决自测锁表的情况很普遍
建议:如果不带主键,建议不要用for update悲观锁,有主键也慎用!
3.先做一个锁性能对代码并发性的影响探究
提前准备:安装abtest压测工具:https://www.jianshu.com/p/a7ee2ffb5c0f
a.不加锁下的并发
并发 195/s
b.synchronized 锁
并发28/s
c.lock 锁
并发 159/s
遗留问题:需要弄清Lock有哪些,每种的作用是什么
然后发现在集群环境下,这些锁也不能解决问题,需要用redis锁
4.Redis 分布式锁
依赖
<!--redis-->
<dependency>
<groupId>redis.clients</groupId>
<artifactId>jedis</artifactId>
<version>${jedis.version}</version>
</dependency> <!--配置redis client-->
<dependency>
<groupId>org.redisson</groupId>
<artifactId>redisson-spring-boot-starter</artifactId>
<version>${redisson.version}</version>
</dependency>
助手函数
package cn.hexcloud.m82.points.service.utils.redis; import lombok.extern.slf4j.Slf4j;
import org.springframework.data.redis.core.StringRedisTemplate;
import org.springframework.stereotype.Component;
import org.springframework.util.StringUtils; import javax.annotation.Resource; /**
* redis锁助手函数
* @author abner<huiyuan.zhang@hex-tech.net>
* @date 2021-12-29 11:49:34
*/
@Component
@Slf4j
public class RedisLockUtils { /**
* 设置超时时间10秒
*/
public static final int TIMEOUT = 10*1000; @Resource
private StringRedisTemplate stringRedisTemplate; /**
* 获取锁过期时间
* @author abner<huiyuan.zhang@hex-tech.net>
* @date 2021-12-29 12:02:05
* @return 锁过期时间
*/
public Long getLockOverdueTime(){
return System.currentTimeMillis() + TIMEOUT;
} /**
* 加锁
* @author abner<huiyuan.zhang@hex-tech.net>
* @date 2021-12-29 11:50:07
* @param key
* @param value 当前时间+超时时间
* @return
*/
public boolean lock(String key, String value){
if(stringRedisTemplate.opsForValue().setIfAbsent(key, value)){
return true;
}
String currentValue = stringRedisTemplate.opsForValue().get(key);
//如果锁过期
if(!StringUtils.isEmpty(currentValue) && Long.parseLong(currentValue) < System.currentTimeMillis()){
//获取上一个锁的时间
String oldValue = stringRedisTemplate.opsForValue().getAndSet(key, value);
if(!StringUtils.isEmpty(oldValue) && currentValue.equals(oldValue)){
return true;
}
}
return false;
} /**
* 解锁
* @author abner<huiyuan.zhang@hex-tech.net>
* @date 2021-12-29 11:51:04
* @param key
* @param value 当前时间+超时时间
* @return
*/
public void unlock(String key, String value){
try{
String currentValue = stringRedisTemplate.opsForValue().get(key);
if(!StringUtils.isEmpty(currentValue) && currentValue.equals(value)){
stringRedisTemplate.opsForValue().getOperations().delete(key);
}
}catch (Exception e){
log.error("【Redis分布式锁】 解锁异常 {}", e.getMessage());
}
}
}
在impl中使用
Long lockOverdueTime = redisLockUtils.getLockOverdueTime();
String lockKey = Thread.currentThread().getStackTrace()[1].getMethodName() + ":" + partnerId + ":" + userId; boolean isLock = redisLockUtils.lock(lockKey, String.valueOf(lockOverdueTime));
if (!isLock) {
throw new TryAgainException(ApiResultEnum.ERROR_TRY_AGAIN);
} try {
//业务代码 } catch (BizException e) {
throw e;
} finally {
//解锁
redisLockUtils.unlock(lockKey, String.valueOf(lockOverdueTime));
}
redis 锁可以实现很小粒度的锁(我的例子中是租户+用户维度的锁),而且可以解决多节点的并发,是我心头的好!
java 高并发下超购问题解决的更多相关文章
- java高并发下的数据安全
高并发下的数据安全 我们知道在多线程写入同一个文件的时候,会存现“线程安全”的问题(多个线程同时运行同一段代码,如果每次运行结果和单线程运行的结果是一样的,结果和预期相同,就是线程安全的).如果是My ...
- Java高并发下多线程编程
1.创建线程 Java中创建线程主要有三种方式: 继承Thread类创建线程类: 定义Thread类的子类,并重写该类的run方法,该run方法的方法体就代表了线程要完成的任务.因此也把run方法称为 ...
- Java高并发下的 “单例模式”
前言:单例模式大家应该很熟悉了,我在这里就自己总结一下自己这段时间学到的单例相关的知识. 单例模式的目的:保证一个类只有单一的实例,也就是说你无法通过new来创建这个类的一个新实例. 单例模式的意义: ...
- 高并发下的Java数据结构(List、Set、Map、Queue)
由于并行程序与串行程序的不同特点,适用于串行程序的一些数据结构可能无法直接在并发环境下正常工作,这是因为这些数据结构不是线程安全的.本节将着重介绍一些可以用于多线程环境的数据结构,如并发List.并发 ...
- JAVA跨域、RestTemplate高并发下异常与配置、JSON数据Long转String
## 跨域支持 import org.springframework.context.annotation.Bean; import org.springframework.context.annot ...
- Java生鲜电商平台-生鲜电商高并发下的接口幂等性实现与代码讲解
Java生鲜电商平台-生鲜电商高并发下的接口幂等性实现与代码讲解 说明:Java生鲜电商平台-生鲜电商高并发下的接口幂等性实现与代码讲解,实际系统中有很多操作,是不管做多少次,都应该产生一样的效果或返 ...
- PHP+Redis链表解决高并发下商品超卖问题
目录 实现原理 实现步骤 上一篇文章聊了一下使用Redis事务来解决高并发商品超卖问题,今天我们来聊一下使用Redis链表来解决高并发商品超卖问题. 实现原理 使用redis链表来做,因为pop操作是 ...
- EF+MySQL乐观锁控制电商并发下单扣减库存,在高并发下的问题
下订单减库存的方式 现在,连农村的大姐都会用手机上淘宝购物了,相信电商对大家已经非常熟悉了,如果熟悉电商开发的同学,就知道在买家下单购买商品的时候,是需要扣减库存的,当然有2种扣减库存的方式, 一种是 ...
- 【mysql】mysql增加version字段实现乐观锁,实现高并发下的订单库存的并发控制,通过开启多线程同时处理模拟多个请求同时到达的情况 + 同一事务中使用多个乐观锁的情况处理
mysql增加version字段实现乐观锁,实现高并发下的订单库存的并发控制,通过开启多线程同时处理模拟多个请求同时到达的情况 ==================================== ...
- 海量数据和高并发下的 Redis 业务优化实践
本文内容是我在 6 月 23 日参加的深圳 GIAC 技术大会上演讲的文字稿. 观众朋友们,我是来自掌阅的工程师钱文品,掘金小册<Redis 深度历险>的作者.今天我带来的是分享主题是:R ...
随机推荐
- 基础教材系列:Linux原理《趣谈linux》极客时间笔记
1.电脑一通电,先运行主板上ROM(只读存储器)里写死的程序BIOS,BIOS去找要运行什么操作系统,运行操作系统的第一段代码,创建0号进程,它是这次开机所有进程的爹, 2.然后操作系统代码里先初始化 ...
- Oracle 视图创建自增ID
select ROW_NUMBER() over (order by sysdate()) as id
- KingbaseES中查询对象大小的SQL及函数区别
--查看所有数据库大小 select sys_database.datname, sys_size_pretty(sys_database_size(sys_database.datname)) AS ...
- SQLServer递归触发器在KES中的一次改造分析
文章概要: 某项目将数据从 SQLSERVER 迁移到 KES.其中SQLSERVER中触发器用到了 TRIGGER_NESTLEVEL() 函数,KES并不能直接支持该函数. 起初在分析该问题时想复 ...
- KingbaseES kdb_database_link客户端字符集导致的乱码问题
前言 关于我们经常见到的字符集乱码问题,很可能因为数据库服务器端的操作系统字符集和客户端字符集不一致导致的. 当我们通过kdb_database_link插件访问oracle数据库出现乱码,只需要调整 ...
- #分层图最短路,Dijkstra#洛谷 4568 [JLOI2011]飞行路线
题目 一个无向图,每条边都有花费,可以有\(k\)次挑选边去除花费的机会,问从指定起点到指定终点的最小花费 分析 考虑用分层最短路完成,也就是在同一层走需要花费,不同层走不用花费,最终走到最底层,然后 ...
- OpenHarmony 3.2 Beta多媒体系列——音视频播放gstreamer
一. 简介 多媒体播放框架主要的实现在PlayerServer服务中,这个服务提供了媒体播放框架所需要的实现环境,继续跟踪代码分析发现,PlayerServer主要通过gstreamer适配层,对 ...
- Python 学习路线:介绍、基础语法、数据结构、算法、高级主题、框架及异步编程详解
Python 介绍 Python 是一种 高级 的.解释型 的.通用 的编程语言.其设计哲学强调代码的可读性,使用显著的缩进.Python 是 动态类型 和 垃圾收集 的. 基本语法 设置 Pytho ...
- CTFshow命令执行29-123
命令执行 WEB29 eval是php中执行以PHP脚本执行的命令 PHP命令可以执行脚本命令 本题使用方法是先 system(cp f*.php 1.txt) 然后访问1.txt WEB30 在PH ...
- Go 单元测试之mock接口测试
目录 一.gomock 工具介绍 二.安装 三.使用 3.1 指定三个参数 3.2 使用命令为接口生成 mock 实现 3.3 使用make 命令封装处理mock 四.接口单元测试步骤 三.小黄书Se ...