Java 线程池的原理与实现学习(一)
线程池:
多线程技术主要解决处理器单元内多个线程执行的问题,它可以显著减少处理器单元的闲置时间,增加处理器单元的吞吐能力。
假设一个服务器完成一项任务所需时间为:T1 创建线程时间,T2 在线程中执行任务的时间,T3 销毁线程时间。
如果:T1 + T3 远大于 T2,则可以采用线程池,以提高服务器性能。
一个线程池包括以下四个基本组成部分:
1、线程池管理器(ThreadPool):用于创建并管理线程池,包括 创建线程池,销毁线程池,添加新任务;
2、工作线程(PoolWorker):线程池中线程,在没有任务时处于等待状态,可以循环的执行任务;
3、任务接口(Task):每个任务必须实现的接口,以供工作线程调度任务的执行,它主要规定了任务的入口,任务执行完后的收尾工作,任务的执行状态等;
4、任务队列(taskQueue):用于存放没有处理的任务。提供一种缓冲机制。
线程池技术正是关注如何缩短或调整T1,T3时间的技术,从而提高服务器程序性能的。它把T1,T3分别安排在服务器程序的启动和结束的时间段或者一些空闲的时间段,这样在服务器程序处理客户请求时,不会有T1,T3的开销了。
线程池不仅调整T1,T3产生的时间段,而且它还显著减少了创建线程的数目,看一个例子:
假设一个服务器一天要处理50000个请求,并且每个请求需要一个单独的线程完成。在线程池中,线程数一般是固定的,所以产生线程总数不会超过线程池中线程的数目,而如果服务器不利用线程池来处理这些请求则线程总数为50000。一般线程池大小是远小于50000。所以利用线程池的服务器程序不会为了创建50000而在处理请求时浪费时间,从而提高效率。
例子:ThreadPool类
/**
* @作者 whs
* @创建日期 2015年2月5日
* @版本 V 1.0
*/
package thread.pool; import java.util.Collections;
import java.util.Date;
import java.util.LinkedList;
import java.util.List; import org.apache.log4j.Logger;
/**
* 线程池
* 创建线程池,销毁线程池,添加新任务
*/
public final class ThreadPool {
private static Logger logger = Logger.getLogger(ThreadPool.class.getName());
private static Logger taskLogger = Logger.getLogger("TaskLogger"); private static boolean debug = taskLogger.isDebugEnabled();
// private static boolean debug = taskLogger.isInfoEnabled();
private static ThreadPool instancePool; // 单例 ,懒汉式
public static final int SYSTEM_BUSY_TASK_COUNT = 150;
public static int worker_num = 5; // 默认池中线程数
private static int taskCounter = 0; // 已经处理的任务数
public static boolean systemIsBusy = false; private static List<Task> taskQueue = Collections.synchronizedList(new LinkedList<Task>()); public PoolWorker[] workThrads; // 线程池中的线程数组
//默认构造函数 初始化 线程池中的线程 数目 5个
private ThreadPool() {
workThrads = new PoolWorker[5];
for (int i = 0; i < workThrads.length; i++) {
workThrads[i] = new PoolWorker(i);
}
}
//传参时 构造函数 初始化 线程池中的线程 数目 参数pool_worker_num个
private ThreadPool(int pool_worker_num) {
worker_num = pool_worker_num;
workThrads = new PoolWorker[worker_num];
for (int i = 0; i < workThrads.length; i++) {
workThrads[i] = new PoolWorker(i);
}
}
// 单态模式,获得一个默认线程个数的线程池
public static ThreadPool getInstancePool() {
return getInstancePool(ThreadPool.worker_num);
}
// 单例 ,懒汉式
public static ThreadPool getInstancePool(int worker_num1) {
if (worker_num1 <= 0)
worker_num1 = ThreadPool.worker_num;
if (instancePool == null)
instancePool = new ThreadPool(worker_num1);
return instancePool;
}
/**
* 增加新的任务
* 每增加一个新任务,都要唤醒任务队列
* @param newTask
*/
public void addTask(Task newTask) {
synchronized (taskQueue) {
newTask.setTaskId(++taskCounter); //设定当前数组线程的id号
newTask.setSubmitTime(new Date()); //设定当前线程的启动时间
taskQueue.add(newTask); //将该线程添加到线程队列中去
taskQueue.notifyAll(); //唤醒队列, 开始执行
}
logger.info("Submit Task<" + newTask.getTaskId() + ">: " + newTask.info());
}
/**
* 批量增加新任务
* @param taskes
*/
public void batchAddTask(Task[] taskes) {
if (taskes == null || taskes.length == 0) {
return;
}
synchronized (taskQueue) {
for (int i = 0; i < taskes.length; i++) {
if (taskes[i] == null) {
continue;
}
taskes[i].setTaskId(++taskCounter);
taskes[i].setSubmitTime(new Date());
taskQueue.add(taskes[i]);
}
taskQueue.notifyAll(); //唤醒队列, 开始执行
}
for (int i = 0; i < taskes.length; i++) {
if (taskes[i] == null) {
continue;
}
logger.info("Submit Task<" + taskes[i].getTaskId() + ">: " + taskes[i].info());
}
}
/**
* 获取并输出 线程池信息
*/
public String getInfo() {
StringBuffer sb = new StringBuffer();
sb.append("\nTask Queue Size:" + taskQueue.size());
for (int i = 0; i < workThrads.length; i++) {
sb.append("\nWorker " + i + " is " + ((workThrads[i].isWaiting()) ? "Waiting." : "Running."));
}
return sb.toString();
}
// 销毁线程池,该方法保证在所有任务都完成的情况下才销毁所有线程,否则等待任务完成才销毁
public synchronized void destroy() {
while (!taskQueue.isEmpty()) {// 如果还有任务没执行完成,就先睡会吧
try {
Thread.sleep(10);
} catch (InterruptedException e) {
e.printStackTrace();
}
}
// 工作线程停止工作,且置为null
for (int i = 0; i < worker_num; i++) {
workThrads[i].stopWorker();
workThrads[i] = null;
}
instancePool=null;
taskQueue.clear();// 清空任务队列
}
/**
* 内部类,线程池中的工作线程类
*/
private class PoolWorker extends Thread {
private int index = -1;
private boolean isRunning = true; //该工作线程是否有效, 用于结束该工作线程
private boolean isWaiting = true; //该工作线程是否可以执行新任务
public PoolWorker(int index) {
this.index = index;
start();
}
public void stopWorker() {
this.isRunning = false;
}
public boolean isWaiting() {
return this.isWaiting;
}
/**
* 循环执行任务
* 这也许是线程池的关键所在 如果任务队列不空,则取出任务执行,若任务队列空,则等待
*/
public void run() {
while (isRunning) {
Task r = null;
synchronized (taskQueue) {
while (taskQueue.isEmpty()) {
try {
/* 任务队列为空,则等待有新任务加入从而被唤醒 */
taskQueue.wait(20);
} catch (InterruptedException ie) {
logger.error(ie);
}
}
/* 取出任务执行 */
r = (Task) taskQueue.remove(0);
}
if (r != null) {
isWaiting = false;
try {
if (debug) {
r.setBeginExceuteTime(new Date());
taskLogger.debug("Worker<" + index + "> start execute Task<" + r.getTaskId() + ">");
if (r.getBeginExceuteTime().getTime() - r.getSubmitTime().getTime() > 1000)
taskLogger.debug("longer waiting time. " + r.info() + ",<" + index
+ ">,time: + (r.getFinishTime().getTime() - r.getBeginExceuteTime().getTime())");
}
/* 该任务是否需要立即执行 */
if (r.needExecuteImmediate()) {
new Thread(r).start();
} else {
r.run();
}
if (debug) {
r.setFinishTime(new Date());
taskLogger.debug("Worker<" + index + "> finish task<" + r.getTaskId() + ">");
if (r.getFinishTime().getTime() - r.getBeginExceuteTime().getTime() > 1000)
taskLogger.debug("longer execution time. " + r.info() + ",<" + index + ">,time:"
+ (r.getFinishTime().getTime() - r.getBeginExceuteTime().getTime()));
}
} catch (Exception e) {
e.printStackTrace();
logger.error(e);
}
isWaiting = true;
r = null;
}
}
}
}
}
Task 类
/**
* @作者 whs
* @创建日期 2015年2月5日
* @版本 V 1.0
*/
package thread.pool;
/*
* 所有任务接口
* 其他任务必须继承访类
*/
import java.util.Date; public abstract class Task implements Runnable {
//private static Logger logger = Logger.getLogger(Task.class);
private Date generateTime = null; // 产生时间
private Date submitTime = null; // 提交执行时间
private Date beginExceuteTime = null; // 开始执行时间
private Date finishTime = null; // 执行完成时间
private long taskId;
public Task() {
this.generateTime = new Date();
}
/**
* 任务执行入口
*/
@Override
public void run() {
try {
Thread.sleep(15*1000);
} catch (InterruptedException e) {
e.printStackTrace();
}
System.out.println("任务 " + taskId + " 完成");
/**
* 相关执行代码
* beginTransaction();
* 执行过程中可能产生新的任务 subtask = taskCore();
* commitTransaction();
* 增加新产生的任务 ThreadPool.getInstance().batchAddTask(taskCore());
*/
}
/**
* 所有任务的核心 所以特别的业务逻辑执行之处
* @throws Exception
*/
public abstract Task[] taskCore() throws Exception;
/**
* 是否用到数据库
*/
protected abstract boolean useDb();
/**
* 是否需要立即执行
*/
protected abstract boolean needExecuteImmediate();
/**
* 任务信息
*/
public abstract String info();
public Date getGenerateTime() {
return generateTime;
}
public Date getBeginExceuteTime() {
return beginExceuteTime;
}
public void setBeginExceuteTime(Date beginExceuteTime) {
this.beginExceuteTime = beginExceuteTime;
}
public Date getFinishTime() {
return finishTime;
}
public void setFinishTime(Date finishTime) {
this.finishTime = finishTime;
}
public Date getSubmitTime() {
return submitTime;
}
public void setSubmitTime(Date submitTime) {
this.submitTime = submitTime;
}
public long getTaskId() {
return taskId;
}
public void setTaskId(long taskId) {
this.taskId = taskId;
}
}
TaskA 类
/**
* @作者 whs
* @创建日期 2015年2月6日
* @版本 V 1.0
*/
package thread.pool;
public class TaskA extends Task {
@Override
public Task[] taskCore() throws Exception {
// TODO Auto-generated method stub
return null;
}
@Override
protected boolean useDb() {
// TODO Auto-generated method stub
return false;
}
@Override
protected boolean needExecuteImmediate() {
// TODO Auto-generated method stub
return false;
}
@Override
public String info() {
// TODO Auto-generated method stub
return null;
}
}
TestThreadPool 类
/**
* @作者 whs
* @创建日期 2015年2月6日
* @版本 V 1.0
*/
package thread.pool; public class TestThreadPool {
public static void main(String[] args) {
// 创建线程池,并初始化2个线程工作者
ThreadPool t = ThreadPool.getInstancePool(2);
Task[] tasks = new TaskA[3];
for(int i=0;i<tasks.length;i++){
tasks[i]= new TaskA();
}
t.batchAddTask(tasks);
Task[] tasks2 = new TaskA[3];
for(int i=0;i<tasks2.length;i++){
tasks2[i]= new TaskA();
}
t.batchAddTask(tasks2);
System.out.println(t);
t.destroy();// 所有线程都执行完成才destory
System.out.println(t);
}
}
Java 线程池的原理与实现学习(一)的更多相关文章
- Java 线程池的原理与实现学习(三)
一简介 线程的使用在java中占有极其重要的地位,jdk1.4及其之前的jdk版本,关于线程池的使用是极其简陋的.在jdk1.5之后这一情况有了很大的改观,Jdk1.5之后加入了java.util.c ...
- Java 线程池的原理与实现学习(二)
java类库中提供的线程池简介: java提供的线程池更加强大,相信理解线程池的工作原理,看类库中的线程池就不会感到陌生了. execute(Runnable command):履行Ruannable ...
- Java线程池的原理及几类线程池的介绍
刚刚研究了一下线程池,如果有不足之处,请大家不吝赐教,大家共同学习.共同交流. 在什么情况下使用线程池? 单个任务处理的时间比较短 将需处理的任务的数量大 使用线程池的好处: 减少在创建和销毁线程上所 ...
- Java 线程池的原理与实现 (转)
最近在学习线程池.内存控制等关于提高程序运行性能方面的编程技术,在网上看到有一哥们写得不错,故和大家一起分享. [分享]Java 线程池的原理与实现 这几天主要是狂看源程序,在弥补了一些以前知 ...
- 并发编程(十二)—— Java 线程池 实现原理与源码深度解析 之 submit 方法 (二)
在上一篇<并发编程(十一)—— Java 线程池 实现原理与源码深度解析(一)>中提到了线程池ThreadPoolExecutor的原理以及它的execute方法.这篇文章是接着上一篇文章 ...
- Java线程池实现原理及其在美团业务中的实践
本文转载自Java线程池实现原理及其在美团业务中的实践 导语 随着计算机行业的飞速发展,摩尔定律逐渐失效,多核CPU成为主流.使用多线程并行计算逐渐成为开发人员提升服务器性能的基本武器.J.U.C提供 ...
- 我眼中的java线程池实现原理
最近在看java线程池实现方面的源码,在此做个小结,因为网上关于线程池源码分析的博客挺多的,我也不打算重复造轮子啦,仅仅用纯语言描述的方式做做总结啦! 个人认为要想理解清楚java线程池实现原理,明白 ...
- Java 线程池(ThreadPoolExecutor)原理分析与使用
在我们的开发中"池"的概念并不罕见,有数据库连接池.线程池.对象池.常量池等等.下面我们主要针对线程池来一步一步揭开线程池的面纱. 使用线程池的好处 1.降低资源消耗 可以重复利用 ...
- Java 线程池(ThreadPoolExecutor)原理解析
在我们的开发中“池”的概念并不罕见,有数据库连接池.线程池.对象池.常量池等等.下面我们主要针对线程池来一步一步揭开线程池的面纱. 有关java线程技术文章还可以推荐阅读:<关于java多线程w ...
随机推荐
- SP2-0734: 未知的命令开头 "imp scott/..." - 忽略了剩余的行。
Oracle数据导入报错:SP2-0734: 未知的命令开头 "imp scott/..." - 忽略了剩余的行. 原因:进入sqlplus里是不能执行imp的(sqlplus不认 ...
- Jenkins默认工作空间及更改默认工作空间
1.Jenkins安装到tomcat 需2步: ①官网下载Jenkins(一个war包) ②安装 所谓安装,也有两种形式: 一是在安装了jdk的情况下直接运行:java -jar jenkins.wa ...
- 你不知道的HTTP之首部字段一览
一.HTTP/1.1 首部字段一览 HTTP 首部字段根据实际用途被分为以下 4 种类型: 1.通用首部字段:请求报文和响应报文两方都会使用的首部. 首部字段名 说明 Cache-Control 控制 ...
- codevs 2059 逃出克隆岛
时间限制: 1 s 空间限制: 128000 KB 题目等级 : 黄金 Gold 题目描述 Description oi小组的yh酷爱玩魔兽rpg,每天都会在u9搜索最新的rpg地图. 今天,他 ...
- crop层
A是要进行剪裁的blob,B是参考,C是由A剪裁出来的输出. 模式1和模式2不同在于offset,模式1中每个dimension可以不同,模式2中用一个值表示了所有dimension的值. axis表 ...
- 【转载】WPF DataGrid 性能加载大数据
作者:过客非归 来源:CSDN 原文:https://blog.csdn.net/u010265681/article/details/76651725 WPF(Windows Presentatio ...
- docker-compose volumes指令路径映射问题
背景:最近在自学docker容器知识,在跟着<Docker - 从入门到实践>进行 docker-compose 搭建django/postgreSQL 实例.在搭建过程中由于自己操作失误 ...
- 如何用纯 CSS 创作一个蝴蝶标本展示框
效果预览 在线演示 按下右侧的"点击预览"按钮可以在当前页面预览,点击链接可以全屏预览. https://codepen.io/comehope/pen/xzgZzQ 可交互视频教 ...
- Python语言程序设计之三--列表List常见操作和错误总结
最近在学习列表,在这里卡住了很久,主要是课后习题太多,而且难度也不小.像我看的这本<Python语言程序设计>--梁勇著,列表和多维列表两章课后习题就有93道之多.我的天!但是题目出的非常 ...
- 【实验吧】guess next session&&FALSE&&NSCTF web200&&程序逻辑问题
guess next session源码: <?php session_start(); if (isset ($_GET['password'])) { if ($_GET['passwo ...