Windows 线程池

  • 说起底层的线程操作一般都不会陌生,Windows 提供了 CreateThread 函数来创建线程,为了同步线程的操作,Windows 提供了事件内核对象、互斥量内核对象、关键段、原子操作等等方式,但总体来说操作线程难度还是非常大的,需要考虑到诸多的问题,比如死锁等,能不能建立一种机制即提高性能又方便操作线程呢,正因为有这个需求 Windows 提出了线程池的概念,目前线程池可以做以下四个定制的工作,分别是:(1) 以异步方式调用一个函数 (2) 每隔一段时间调用一个函数 (3) 在内核对象触发时调用一个函数 (4) 在异步 I/O 请求时调用一个函数

0x01 以异步方式调用一个函数

  • 异步方式调用一个函数是所有线程池中最简单的一个操作

  • 来看看执行这个操作需要哪些函数:

    (1)PTP_WORK CreateThreadpoolWork (2)SubmitThreadpoolWork (3)WaitForThreadpoolWorkCallbacks (4)CloseThreadpoolWork (5)VOID CALLBACK WorkCallback(PTP_CALLBACK_INSTANCE Instance, PVOID Context, PTP_WORK Work);
  • 值得注意的是 WaitForThreadpoolWorkCallbacks 函数,想象以下当某一个时刻有 2 个线程正在执行操作,而 3 个线程等待,如果我想等待这 5 个线程都执行完操作,那么向 WaitForThreadpoolWorkCallbacks 的第二个函数中传入 FALSE 即可,如果只等待 2 个线程完成的话传入 TRUE 即可。例子如下:
#include <process.h>
#include <Windows.h>
#include <iostream>
using namespace std; DWORD ThreadPoolTest1(VOID);
VOID CALLBACK WorkCallback(PTP_CALLBACK_INSTANCE Instance, PVOID Context, PTP_WORK Work); int main(int argc, char **argv)
{
ThreadPoolTest1();
return 0;
} DWORD ThreadPoolTest1(VOID)
{
// 创建一个线程池工作项,第三个参数用于定制线程池
PTP_WORK ThreadPool = CreateThreadpoolWork(WorkCallback, NULL, NULL); // 提交 4 次线程池请求,也就是运行 4 次线程池函数
SubmitThreadpoolWork(ThreadPool);
SubmitThreadpoolWork(ThreadPool);
SubmitThreadpoolWork(ThreadPool);
SubmitThreadpoolWork(ThreadPool); // TRUE 为只能取消尚未运行的任务,FALSE 是等待所有的任务完成
WaitForThreadpoolWorkCallbacks(ThreadPool, FALSE); // 销毁线程池工作项
CloseThreadpoolWork(ThreadPool);
return TRUE;
} // 线程池函数原型
VOID CALLBACK WorkCallback(PTP_CALLBACK_INSTANCE Instance, PVOID Context, PTP_WORK Work)
{
// 模拟工作 600 毫秒
cout << "WorkCallback" << endl;
Sleep(600);
}

0x02 每隔一段时间调用一个函数

  • 每个一段时间调用一个函数,稍微复杂一点

  • 看看需要调用哪些函数:

    (1)VOID CALLBACK TimeoutCallback(PTP_CALLBACK_INSTANCE pInstance, PVOID pvContext, PTP_TIMER Work) (2)PTP_TIMER CreateThreadpoolTimer() (3)IsThreadpoolTimerSet() (4)SetThreadpoolTimer() (5)WaitForThreadpoolTimerCallbacks() (6)CloseThreadpoolTimer()
  • 例子如下:
#include <process.h>
#include <Windows.h>
#include <iostream>
using namespace std; DWORD ThreadPoolTest2(VOID);
VOID CALLBACK TimeoutCallback(PTP_CALLBACK_INSTANCE pInstance, PVOID pvContext, PTP_TIMER Work); // 控制线程变量
LONG Statistics; int main(int argc, char **argv)
{
ThreadPoolTest2();
return 0;
} DWORD ThreadPoolTest2(VOID)
{
// 创建一个定时器线程池对象
PTP_TIMER ThreadPoolTimer = CreateThreadpoolTimer(TimeoutCallback, NULL, NULL); // 判断线程池的定时器是否已经被设置过,其实定时器可以多次被设置
if (IsThreadpoolTimerSet(ThreadPoolTimer))
{
cout << "该定时器已经被设置" << endl;
return FALSE;
} // 设置定时器的时间
LARGE_INTEGER time; time.QuadPart = -1; // -1 比较特殊表示立即执行,负数表示相对时间,正数表示绝对时间
FILETIME filetime; filetime.dwLowDateTime = time.LowPart; filetime.dwHighDateTime = time.HighPart;
SetThreadpoolTimer(ThreadPoolTimer, &filetime, 1000, 0); // 等待线程池中的线程操作完成
while (Statistics < 5); Sleep(100);
WaitForThreadpoolTimerCallbacks(ThreadPoolTimer, FALSE); // 销毁定时器线程池对象
CloseThreadpoolTimer(ThreadPoolTimer);
return TRUE;
} // 定时器线程池线程原型
VOID CALLBACK TimeoutCallback(PTP_CALLBACK_INSTANCE pInstance, PVOID pvContext, PTP_TIMER Work)
{
cout << "[*] TimeoutCallback" << endl;
InterlockedExchangeAdd(&Statistics, 1);
}
  • 值得注意的是 WaitForThreadpoolTimerCallbacks 并不具有等待全部的线程池线程操作完成,所以我利用原子操作等待 Statistics 变为 5;SetThreadpoolTimer 的最后一个参数用于将多个计时器分为一组,这个参数用的比较少。运行结果如下:

0x03 在内核对象触发时调用一个函数

  • 什么是内核对象,内核对象就是内核的一个对象,可以被用于完成线程的同步问题。所有的内核对象都有两种状态,一个是触发态一个是非触发态。所以完成这样一个需求的线程池首先需要设置一个非触发态的内核对象,并且和这个线程池相互绑定,等到这个内核对象变为触发状态时该线程池就会调用一个函数来处理接下来的问题

  • 来看看完成这个定制的线程池需要哪些函数:

    (1) CreateThreadpoolWait():创建一个等待内核对象的线程池对象 (2) SetThreadpoolWait():将线程池函数和内核对象绑定 (3) WaitForThreadpoolWaitCallbacks():等待线程池函数操作完成 (4) CloseThreadpoolWait():销毁等待内核对象的线程池对象 (5) VOID CALLBACK WaitCallback(PTP_CALLBACK_INSTANCE pInstance, PVOID Context, PTP_WAIT Wait, TP_WAIT_RESULT WaitResult):线程池函数原型
  • 例子如下:
#include <process.h>
#include <Windows.h>
#include <iostream>
using namespace std; DWORD ThreadPoolTest3(VOID);
VOID CALLBACK WaitCallback(PTP_CALLBACK_INSTANCE pInstance, PVOID Context, PTP_WAIT Wait, TP_WAIT_RESULT WaitResult); // 用于控制线程的计数
LONG ThreadCount; int main(int argc, char **argv)
{
ThreadPoolTest3();
return 0;
} DWORD ThreadPoolTest3(VOID)
{
PTP_WAIT ThreadPool[5]; HANDLE Event; // 创建一个事件内核对象
Event = CreateEvent(NULL, TRUE, FALSE, NULL); for (size_t i = 0; i < 5; i++)
{
// 创建一个等待内核对象为触发状态的线程池,并且将线程池等待对象和事件内核对象相互绑定
ThreadPool[i] = CreateThreadpoolWait(WaitCallback, NULL, NULL);
SetThreadpoolWait(ThreadPool[i], Event, 0);
} // 将内核对象变为触发状态
SetEvent(Event); // 等待操作完成
while (ThreadCount < 5) Sleep(0); // 关闭等待内核对象触发的工作对象
for (size_t i = 0; i < 5; i++)
{
CloseThreadpoolWait(ThreadPool[i]);
}
return TRUE;
} // 完成当内核对象触发线程池的线程函数原型
VOID CALLBACK WaitCallback(PTP_CALLBACK_INSTANCE pInstance, PVOID Context, PTP_WAIT Wait, TP_WAIT_RESULT WaitResult)
{
// SetThreadpoolWait(ThreadWait, Event, NULL);
cout << "WaitCallback" << endl;
InterlockedExchangeAdd(&ThreadCount, 1);
}

0x04 在异步 I/O 请求时调用一个函数

  • 在异步 I/O 完成时调用一个函数,这个实现起来较为复杂

  • 来看看使用这个线程池需要哪些函数

    (1) CreateThreadpoolIo:创建一个等待 I/O 完成的线程池对象 (2) StartThreadpoolIo:完成端口关联,且需要在 ReadFile 和 WriteFile 函数之前调用 (3) WaitForThreadpoolIoCallbacks:等待线程池中的线程操作完成 (4) CloseThreadpoolIo:销毁线程池对象 (5) VOID CALLBACK OverlappedCompletionRoutine(PTP_CALLBACK_INSTANCE pInstance, PVOID pvContext, PVOID pOverlapped, ULONG IoResult, ULONG_PTR NumberOfBytesTransferred, PTP_IO pIo):线程池对象函数原型
  • 例子如下:
#include <process.h>
#include <Windows.h>
#include <iostream>
using namespace std; DWORD ThreadPoolTest4(VOID);
VOID CALLBACK OverlappedCompletionRoutine(PTP_CALLBACK_INSTANCE pInstance, PVOID pvContext, PVOID pOverlapped, ULONG IoResult, ULONG_PTR NumberOfBytesTransferred, PTP_IO pIo); HANDLE file;
DWORD Size;
PBYTE BufferFile; int main(int argc, char **argv)
{
ThreadPoolTest4();
return 0;
} DWORD ThreadPoolTest4(VOID)
{
// D盘 post.txt 打开文件
DWORD LastError;
file = CreateFile(TEXT("D:\\post.txt"), GENERIC_READ, 0, NULL, OPEN_EXISTING, FILE_FLAG_OVERLAPPED, NULL);
LastError = GetLastError(); // 获取文件的大小
LARGE_INTEGER FileSize = { 0 };
GetFileSizeEx(file, &FileSize);
Size = FileSize.LowPart; // 创建一个等待 I/O 完成的线程池对象
PTP_IO ThreadIO = CreateThreadpoolIo(file, OverlappedCompletionRoutine, NULL, NULL);
StartThreadpoolIo(ThreadIO); // 用于 ReadFile 读取文件数据的缓冲区
BufferFile = (PBYTE)malloc(Size);
OVERLAPPED overlapped = { 0 }; overlapped.Offset = 0;
ReadFile(file, BufferFile, Size, NULL, &overlapped); // 等待线程池对象
WaitForThreadpoolIoCallbacks(ThreadIO, FALSE); // 销毁等待 I/O 完成的线程池对象
CloseThreadpoolIo(ThreadIO);
return TRUE;
} // 等待 I/O 完成的线程池对象线程原型
VOID CALLBACK OverlappedCompletionRoutine(PTP_CALLBACK_INSTANCE pInstance, PVOID pvContext, PVOID pOverlapped, ULONG IoResult, ULONG_PTR NumberOfBytesTransferred, PTP_IO pIo)
{
cout << "文件内容" << BufferFile << endl;
}
  • 打印结果如下:

利用 Windows 线程池定制的 4 种方式完成任务(Windows 核心编程)的更多相关文章

  1. 第11章 Windows线程池(1)_传统的Windows线程池

    第11章 Windows线程池 11.1 传统的Windows线程池及API (1)线程池中的几种底层线程 ①可变数量的长任务线程:WT_EXECUTELONGFUNCTION ②Timer线程:调用 ...

  2. (并发编程)进程池线程池--提交任务2种方式+(异步回调)、协程--yield关键字 greenlet ,gevent模块

    一:进程池与线程池(同步,异步+回调函数)先造个池子,然后放任务为什么要用“池”:池子使用来限制并发的任务数目,限制我们的计算机在一个自己可承受的范围内去并发地执行任务池子内什么时候装进程:并发的任务 ...

  3. java中线程池创建的几种方式

    java中创建线程池的方式一般有两种: 通过Executors工厂方法创建 通过new ThreadPoolExecutor(int corePoolSize, int maximumPoolSize ...

  4. windows线程池四种情形(win核心读书笔记)

    windows线程池四种情形(win核心读书笔记) Mircosoft从Windows2000引入线程池API,并在Vista后对线程池重新构架,引入新的线程池API.以下所有线程池函数均适用于Vis ...

  5. 第11章 Windows线程池(2)_Win2008及以上的新线程池

    11.2 Win2008以上的新线程池 (1)传统线程池的优缺点: ①传统Windows线程池调用简单,使用方便(有时只需调用一个API即可) ②这种简单也带来负面问题,如接口过于简单,无法更多去控制 ...

  6. 《Windows核心编程系列》十一谈谈Windows线程池

    Windows线程池 上一篇博文我们介绍了IO完成端口.得知IO完成端口可以非常智能的分派线程.但是IO完成端口仅对等待它的线程进行分派,创建和销毁线程的工作仍然需要我们自己来做. 我们自己也可以创建 ...

  7. Windows核心编程:第11章 Windows线程池

    Github https://github.com/gongluck/Windows-Core-Program.git //第11章 Windows线程池.cpp: 定义应用程序的入口点. // #i ...

  8. 你创建线程池最好分为两种线程池,io密集型线程池,或者cpu密集型线程池

    你创建线程池最好分为两种线程池,io密集型线程池,或者cpu密集型线程池. 否则,如果只用一个线程池的话,不管是iO密集的线程,或者cpu消耗大的都放在同一个线程池的话,会发生线程池被撑满的情况

  9. Java并发编程:线程间协作的两种方式:wait、notify、notifyAll和Condition

    Java并发编程:线程间协作的两种方式:wait.notify.notifyAll和Condition 在前面我们将了很多关于同步的问题,然而在现实中,需要线程之间的协作.比如说最经典的生产者-消费者 ...

随机推荐

  1. 基于角色访问控制RBAC权限模型的动态资源访问权限管理实现

    RBAC权限模型(Role-Based Access Control) 前面主要介绍了元数据管理和业务数据的处理,通常一个系统都会有多个用户,不同用户具有不同的权限,本文主要介绍基于RBAC动态权限管 ...

  2. Nginx重定向到其他端口

    location / { # limit_req zone=test_req burst=5 nodelay; return 302 http://$host:3000/; } # 我这里的端口为30 ...

  3. 统一Java环境变量配置,Java环境如何配置?

    一 JDK下载和安装 Java开发工具包统一下载地址:https://www.hiai.top/archives/268.html 二 java环境变量配置 1.变量名:JAVA_HOME 变量值:你 ...

  4. 从一部电影史上的趣事了解 Spring 中的循环依赖问题

    title: 从一部电影史上的趣事了解 Spring 中的循环依赖问题 date: 2021-03-10 updated: 2021-03-10 categories: Spring tags: Sp ...

  5. 上万字详解Spark Core(建议收藏)

    先来一个问题,也是面试中常问的: Spark为什么会流行? 原因1:优秀的数据模型和丰富计算抽象 Spark 产生之前,已经有MapReduce这类非常成熟的计算系统存在了,并提供了高层次的API(m ...

  6. Python3基础之构建setup.py

    技术背景 在上一篇博客中,我们介绍了如何使用pyinstaller将python项目打包成一个可执行文件,并且放在系统目录下,让系统用户可以直接识别到我们构造的项目.而python项目中常见的setu ...

  7. Python脚本打包成exe执行文件

    需求 一个教辅目录结构检查工具,目录结构是[书籍]-[章节]-[题目|答案]-[*.jpg],后台有个异步处理的服务,需要强依赖这个目录结构. 书籍解析是单独的pipeline,日志对用户不可见,这里 ...

  8. Spring Cloud Alibaba(2)---Nacos概述

    Spring Cloud Alibaba(2)---nacos概述 上一篇博客讲了有关 SpringCloudAlibaba的概述,这篇开始讲SpringCloudAlibaba组件之一---Naco ...

  9. centos 7升级gcc到10.2.0

    安装gcc 由于 Linux 操作系统的自由.开源,在其基础上衍生出了很多不同的 Linux 操作系统,如 CentOS.Ubuntu.Debian 等.这些 Linux 发行版中,大多数都默认装有 ...

  10. keepalived安装及组合nginx配置负载实现高可用

    目录 1. Keepalived安装配置 1.1 官网下载tar包 1.2 上传到指定目录安装 1.3 配置文件 1.4 配置nginx检测脚本文件 1.5 keepalived 启动/重启/停止/查 ...