spring boot:使用多个线程池实现实现任务的线程池隔离(spring boot 2.3.2)
一,为什么要使用多个线程池?
使用多个线程池,
把相同的任务放到同一个线程池中,
可以起到隔离的作用,避免有线程出错时影响到其他线程池,
例如只有一个线程池时,
有两种任务,下单,处理图片,
如果线程池被处理图片的任务占满,影响下单任务的进行
说明:刘宏缔的架构森林是一个专注架构的博客,地址:https://www.cnblogs.com/architectforest
对应的源码可以访问这里获取: https://github.com/liuhongdi/
说明:作者:刘宏缔 邮箱: 371125307@qq.com
二,演示项目的相关信息
1,项目地址:
https://github.com/liuhongdi/multithreadpool
2,项目功能说明:
创建了两个线程池,
一个负责发邮件,
另一个负责处理图片
实际演示中都是sleep
3,项目结构:如图:
三,java代码说明:
1,ThreadPoolConfig.java
@Configuration
@EnableAsync
public class ThreadPoolConfig {
//用来生成缩略图的线程池
@Bean(name = "imageThreadPool")
public ThreadPoolTaskExecutor imageThreadPool() {
ThreadPoolTaskExecutor executor = new ThreadPoolTaskExecutor();
// 设置核心线程数,它是可以同时被执行的线程数量
executor.setCorePoolSize(2);
// 设置最大线程数,缓冲队列满了之后会申请超过核心线程数的线程
executor.setMaxPoolSize(10);
// 设置缓冲队列容量,在执行任务之前用于保存任务
executor.setQueueCapacity(50);
// 设置线程生存时间(秒),当超过了核心线程出之外的线程在生存时间到达之后会被销毁
executor.setKeepAliveSeconds(60);
// 设置线程名称前缀
executor.setThreadNamePrefix("imagePool-");
// 设置拒绝策略
executor.setRejectedExecutionHandler(new ThreadPoolExecutor.CallerRunsPolicy());
// 等待所有任务结束后再关闭线程池
executor.setWaitForTasksToCompleteOnShutdown(true);
//初始化
executor.initialize();
return executor;
} //用来发邮件的线程池
@Bean(name = "emailThreadPool")
public ThreadPoolTaskExecutor emailThreadPool() {
ThreadPoolTaskExecutor executor = new ThreadPoolTaskExecutor();
// 设置核心线程数,它是可以同时被执行的线程数量
executor.setCorePoolSize(2);
// 设置最大线程数,缓冲队列满了之后会申请超过核心线程数的线程
executor.setMaxPoolSize(10);
// 设置缓冲队列容量,在执行任务之前用于保存任务
executor.setQueueCapacity(50);
// 设置线程生存时间(秒),当超过了核心线程出之外的线程在生存时间到达之后会被销毁
executor.setKeepAliveSeconds(60);
// 设置线程名称前缀
executor.setThreadNamePrefix("emailPool-");
// 设置拒绝策略
executor.setRejectedExecutionHandler(new ThreadPoolExecutor.CallerRunsPolicy());
// 等待所有任务结束后再关闭线程池
executor.setWaitForTasksToCompleteOnShutdown(true);
//初始化
executor.initialize();
return executor;
}
}
说明:配置要使用的线程池,按业务类型区分开,
注意命名:一个命名为:emailThreadPool
一个命名为:imageThreadPool
另外注意线程池使用了不同的前缀,使实际运行时区分
2,HomeController.java
@RequestMapping("/home")
@Controller
public class HomeController {
@Resource
private MailService mailService; @Resource
private ImageService imageService; @Resource
private ThreadPoolTaskExecutor imageThreadPool; //监控线程池的状态,
//我们得到的数字,只是大体接近,并不是严格的准确数字
@GetMapping("/poolstatus")
@ResponseBody
public String poolstatus() {
String statusStr = "";
int queueSize = imageThreadPool.getThreadPoolExecutor().getQueue().size();
statusStr +="当前排队线程数:" + queueSize;
int activeCount = imageThreadPool.getThreadPoolExecutor().getActiveCount();
statusStr +="当前活动线程数:" + activeCount;
long completedTaskCount = imageThreadPool.getThreadPoolExecutor().getCompletedTaskCount();
statusStr +="执行完成线程数:" + completedTaskCount;
long taskCount = imageThreadPool.getThreadPoolExecutor().getTaskCount();
statusStr +="总线程数:" + taskCount;
return statusStr;
} //异步发送一封注册成功的邮件
@GetMapping("/asyncmail")
@ResponseBody
public String regMail() {
mailService.sendHtmlMail();
return "mail sended";
} //异步执行sleep1秒10次
@GetMapping("/asyncimage")
@ResponseBody
public Map<String, Object> asyncsleep() throws ExecutionException, InterruptedException {
long start = System.currentTimeMillis();
Map<String, Object> map = new HashMap<>();
List<Future<String>> futures = new ArrayList<>();
for (int i = 0; i < 50; i++) {
Future<String> future = imageService.asynctmb(i);
futures.add(future);
}
List<String> response = new ArrayList<>();
for (Future future : futures) {
String string = (String) future.get();
response.add(string);
}
map.put("data", response);
map.put("消耗时间", String.format("任务执行成功,耗时{%s}毫秒", System.currentTimeMillis() - start));
return map;
}
}
3,MailServiceImpl.java
@Service
public class MailServiceImpl implements MailService { private Logger logger= LoggerFactory.getLogger(MailServiceImpl.class); @Resource
private MailUtil mailUtil; //异步发送html格式的邮件,演示时只是sleep1秒
@Async(value="emailThreadPool")
@Override
public void sendHtmlMail() {
logger.info("sendHtmlMail begin");
try {
Thread.sleep(2000); //延时1秒
}
catch(InterruptedException e) {
e.printStackTrace();
}
}
}
说明:Async注解指定线程池的名字是:emailThreadPool
4,ImageServiceImpl.java
@Service
public class ImageServiceImpl implements ImageService { private Logger logger= LoggerFactory.getLogger(MailServiceImpl.class); //演示处理图片,只是sleep1秒
@Async(value="imageThreadPool")
@Override
public Future<String> asynctmb(int i) {
logger.info("asynctmb begin");
String start= TimeUtil.getMilliTimeNow();
try {
Thread.sleep(1000); //延时1秒
}
catch(InterruptedException e) {
e.printStackTrace();
}
//log.info("async function sleep end");
String end=TimeUtil.getMilliTimeNow();
return new AsyncResult<>(String.format("asynctmb方法,第 %s 个线程:开始时间:%s,结束时间:%s",i,start,end));
}
}
说明:Async注解指定线程池的名字是:imageThreadPool
四,测试效果:
1,测试一个线程:访问:
http://127.0.0.1:8080/home/asyncmail
查看控制台:
2020-08-10 14:54:35.671 INFO 2570 --- [ emailPool-1] c.m.demo.service.impl.MailServiceImpl : sendHtmlMail begin
可以看到线程的前缀是emailThreadPool的线程的前缀
2,测试多个线程:访问:
http://127.0.0.1:8080/home/asyncimage
可以看到返回信息:
...
"消耗时间":"任务执行成功,耗时{25052}毫秒"
执行时每次并发的线程数是2,一共创建了50个线程,
每个线程sleep用时1秒
所以共用时25秒,
3,查看线程池状态:访问:
http://127.0.0.1:8080/home/asyncimage
同时访问:
http://127.0.0.1:8080/home/poolstatus
可以看到返回的状态信息:
当前排队线程数:44当前活动线程数:2执行完成线程数:54总线程数:100
说明:ThreadPoolExecutor中的统计信息只是近似值,
不是完全准确的数字
五,查看spring boot的版本
. ____ _ __ _ _
/\\ / ___'_ __ _ _(_)_ __ __ _ \ \ \ \
( ( )\___ | '_ | '_| | '_ \/ _` | \ \ \ \
\\/ ___)| |_)| | | | | || (_| | ) ) ) )
' |____| .__|_| |_|_| |_\__, | / / / /
=========|_|==============|___/=/_/_/_/
:: Spring Boot :: (v2.3.2.RELEASE)
spring boot:使用多个线程池实现实现任务的线程池隔离(spring boot 2.3.2)的更多相关文章
- Spring session(redis存储方式)监听导致创建大量redisMessageListenerContailner-X线程
待解决的问题 Spring session(redis存储方式)监听导致创建大量redisMessageListenerContailner-X线程 解决办法 为spring session添加spr ...
- spring下,druid,c3p0,proxool,dbcp四个数据连接池的使用和配置
由于那天Oracle的数据连接是只能使用dbcp的数据库连接池才连接上了,所以决定试一下当下所有得数据库连接池连接orcale和mysql,先上代码 配置文件的代码 #================ ...
- 【线程池】自己声明临时线程池一定要shutdown!
场景: 某个定时任务需要多线程执行,执行时间较久且每天只跑一次,想单独拉出一个线程池和其他业务隔离开,交给spring会导致核心线程一直存在 浪费线程资源,因此想单独拉一个池子用完就丢,原本想的是,在 ...
- 手写线程池,对照学习ThreadPoolExecutor线程池实现原理!
作者:小傅哥 博客:https://bugstack.cn Github:https://github.com/fuzhengwei/CodeGuide/wiki 沉淀.分享.成长,让自己和他人都能有 ...
- python——有一种线程池叫做自己写的线程池
这周的作业是写一个线程池,python的线程一直被称为鸡肋,所以它也没有亲生的线程池,但是竟然被我发现了野生的线程池,简直不能更幸运~~~于是,我开始啃源码,实在是虐心,在啃源码的过程中,我简略的了解 ...
- 浅谈线程池(中):独立线程池的作用及IO线程池
原文地址:http://blog.zhaojie.me/2009/07/thread-pool-2-dedicate-pool-and-io-pool.html 在上一篇文章中,我们简单讨论了线程池的 ...
- 浅谈线程池(上):线程池的作用及CLR线程池
原文地址:http://blog.zhaojie.me/2009/07/thread-pool-1-the-goal-and-the-clr-thread-pool.html 线程池是一个重要的概念. ...
- Java线程池主线程等待子线程执行完成
今天讨论一个入门级的话题, 不然没东西更新对不起空间和域名~~ 工作总往往会遇到异步去执行某段逻辑, 然后先处理其他事情, 处理完后再把那段逻辑的处理结果进行汇总的产景, 这时候就需要使用线程了. 一 ...
- Sping Boot入门到实战之入门篇(二):第一个Spring Boot应用
该篇为Spring Boot入门到实战系列入门篇的第二篇.介绍创建Spring Boot应用的几种方法. Spring Boot应用可以通过如下三种方法创建: 通过 https://start.spr ...
随机推荐
- python基础:异常捕捉
一.异常 python在程序运行过程中,可能会出现一些错误和异常,导致程序停止运行.我们可以通过捕捉异常,并对异常进行处理,使得程序可以正常运行 异常有很多类型,可以根据类型挨个捕捉.也可统一捕获: ...
- JS红宝书笔记——第一章 JavaScript简介
1.JavaScript简史 Netscape公司决定开发一种客户端语言用来处理浏览器端简单的表单验证. Netscape公司派布兰登·艾奇(BrendanEich)为计划于1995年2月发布的Net ...
- 1. spring5源码 -- Spring整体脉络 IOC加载过程 Bean的生命周期
可以学习到什么? 0. spring整体脉络 1. 描述BeanFactory 2. BeanFactory和ApplicationContext的区别 3. 简述SpringIoC的加载过程 4. ...
- Spring Cloud Alibaba微服务生态的基础实践
目录 一.背景 二.初识Spring Cloud Alibaba 三.Nacos的基础实践 3.1 安装Nacos并启动服务 3.2 建立微服务并向Nacos注册服务 3.3 建立微服务消费者进行服务 ...
- 没使用Spring Cloud的版本管理导致Eureka服务无法注册到Eureka服务注册中心
创建了一个Eureka Server的服务注册集群(两个Eureka服务),都能相互注册,写了一个Eureka客户端服务无法注册到服务发现注册中心 注册中心1: 注册中心2: 服务正常: pom依赖文 ...
- Prometheus Metrics 设计的最佳实践和应用实例,看这篇够了!
Prometheus 是一个开源的监控解决方案,部署简单易使用,难点在于如何设计符合特定需求的 Metrics 去全面高效地反映系统实时状态,以助力故障问题的发现与定位.本文即基于最佳实践的 Metr ...
- k8s通过service访问pod(五)
service 每个 Pod 都有自己的 IP 地址.当 controller 用新 Pod 替代发生故障的 Pod 时,新 Pod 会分配到新的 IP 地址.这样就产生了一个问题: 如果一组 Pod ...
- ribbon源码(1) 概述
ribbon的核心功能是提供客户端在进行网络请求时负载均衡的能力.主要有以下几个模块: 负载均衡器模块 负载均衡器模块提供了负载均衡能力,详细参见ribbon源码之负载均衡器. 配置模块 配置模块管理 ...
- 绝了!一个妹子 rm -rf 把公司整个数据库删没了...
经历了两天不懈努力,终于恢复了一次误操作删除的生产服务器数据.对本次事故过程和解决办法记录在此,警醒自己,也提示别人莫犯此错.也希望遇到问题的朋友能找到一丝灵感解决问题. 01 事故背景 安排一个妹子 ...
- Tomcat 第三篇:总体架构设计
Tomcat 总体架构设计 在开始这篇文章的时候,忽然发现上一篇内容的题目不是很合适,不应该叫启动流程,更确切的应该是叫启动脚本. 在最开始,先介绍下 Tomcat 的总体设计,先有一个大概的印象,对 ...