前段时间在项目中一直使用正常的Quartz突然出现了任务漏跑的情况,由于我以前看过Quartz的内部实现,凭借记忆我觉得是由于Quartz的线程池的使用出现问题导致了故障的发生。为了搞清问题的真相,我又重新看了一下Quartz的代码。 

在看Spring的代码时发现Spring对Quartz封装过以后对Quartz的初始化过程还是比较复杂的,我对比较关键的几点提取出来画出了上面的时序图。大家可以结合代码看上面的时序图应该可以理解Quartz的初始化过程。图中的SpringContext只是用来代表Spring容器,我们在使用Quartz时没有对它进行特殊的配置,因此它各种参数都是默认的。特别是“org.quartz.threadPool.threadCount”这个参数Scheduler中线程池的大小也是使用了Spring的默认值10,这个默认值就有可能是造成我们的系统线上定时任务故障的原因,下面我再详细的解析一下。 
 
QuartzScheduler是整个定时任务框架工作的核心类,上面的类图仅仅展现了QuartzScheduler中几个核心成员。QuartzSchedulerResources可以认为是存放一切配置以及通过配置初始化出来的一些资源的容器,其中包括了存储job定义的jobStore,JobStore可以有多种实现,我们使用的是默认的RAMJobStore;还有一个非常重要的对象就是ThreadPool,这个线程池管理着执行我们定义的Job所需的所有线程。这个线程池的大小配置就是通过我上面提到过的“org.quartz.threadPool.threadCount”进行配置的。QuartzScheduler另一个重要成员就是QuartzSchedulerThread,没有这个线程的话我们所有定义的任务都不会被触发执行,也就是说它是Quartz后台的“守护线程”,它不断的去查找合适的job并触发这些Job执行。下图展现了QuartzSchedulerThread的主要业务逻辑。 
 
上图中有一处肯定引起了大家的注意,那就是判断可用线程数的阻塞方法。这个方法当线程池中可用的连接数小于1的时候会调用Object.wait()方法,让QuartzSchedulerThread线程等待直到线程池中有可用的线程以后才返回结果。这样的话如果遇到在某一时刻并发的任务比较多的情况下就极有可能导致有些任务没有按我们预先设定的时间进行执行。

下面再来看一下我对Quartz进行的一个测试: 
1.在Spring配置文件中配置了13个job,每个Job实现代码都一样具体如下:

  1. public class TestJob1 {
  2. protected int times=0;
  3. public void doJob2(){
  4. times++;
  5. System.out.println(this.getClass().getName()+" start job. times:"+times+" "+new Date());
  6. try {
  7. Thread.sleep(1000L*60L*3L);
  8. } catch (InterruptedException e) {
  9. // TODO Auto-generated catch block
  10. e.printStackTrace();
  11. }
  12. System.out.println(this.getClass().getName()+" end job. times:"+times);
  13. }
  14. }

2.Spring配置中cronExpression如下:

  1. <bean id="testJob1" class="com.xxx.xxxx.test.order.TestJob1"/>
  2. <bean id="testJob1Trigger" class="org.springframework.scheduling.quartz.CronTriggerBean">
  3. <property name="jobDetail">
  4. <bean class="org.springframework.scheduling.quartz.MethodInvokingJobDetailFactoryBean">
  5. <property name="concurrent" value="false"/>
  6. <property name="targetObject" ref="testJob1"/>
  7. <property name="targetMethod" value="doJob2"/>
  8. </bean>
  9. </property>
  10. <property name="cronExpression" value="0 0/1 * * * ? *"/>
  11. </bean>
  12. <bean id="testJob2" class="com.xxx.xxxx.test.order.TestJob2"/>
  13. <bean id="testJob2Trigger" class="org.springframework.scheduling.quartz.CronTriggerBean">
  14. <property name="jobDetail">
  15. <bean class="org.springframework.scheduling.quartz.MethodInvokingJobDetailFactoryBean">
  16. <property name="concurrent" value="false"/>
  17. <property name="targetObject" ref="testJob2"/>
  18. <property name="targetMethod" value="doJob2"/>
  19. </bean>
  20. </property>
  21. <property name="cronExpression" value="0 0/1 * * * ? *"/>
  22. </bean>
  23. <!--这里省略job3-job11的配置,这些JOB的配置同job1,job2-->
  24. <bean id="testJob12" class="com.xxx.xxxx.test.order.TestJob12"/>
  25. <bean id="testJob12Trigger" class="org.springframework.scheduling.quartz.CronTriggerBean">
  26. <property name="jobDetail">
  27. <bean class="org.springframework.scheduling.quartz.MethodInvokingJobDetailFactoryBean">
  28. <property name="concurrent" value="false"/>
  29. <property name="targetObject" ref="testJob12"/>
  30. <property name="targetMethod" value="doJob2"/>
  31. </bean>
  32. </property>
  33. <property name="cronExpression" value="30 0/1 * * * ? *"/>
  34. </bean>
  35. <bean id="testJob13" class="com.xxx.xxxx.test.order.TestJob13"/>
  36. <bean id="testJob13Trigger" class="org.springframework.scheduling.quartz.CronTriggerBean">
  37. <property name="jobDetail">
  38. <bean class="org.springframework.scheduling.quartz.MethodInvokingJobDetailFactoryBean">
  39. <property name="concurrent" value="false"/>
  40. <property name="targetObject" ref="testJob13"/>
  41. <property name="targetMethod" value="doJob2"/>
  42. </bean>
  43. </property>
  44. <property name="cronExpression" value="50 0/1 * * * ? *"/>

也就是说除了testJob12和testJob13是我们期望分别在每分钟的30秒、50秒被触发,其他的job都是每分钟的0秒时被触发 
3.下面我们看一下Quartz的执行结果 
com.xxx.xxxx.test.order.TestJob13 start job. times:1 Wed Jun 02 09:12:51 CST 2010 
com.xxx.xxxx.test.order.TestJob10 start job. times:1 Wed Jun 02 09:13:00 CST 2010 
com.xxx.xxxx.test.order.TestJob11 start job. times:1 Wed Jun 02 09:13:00 CST 2010 
com.xxx.xxxx.test.order.TestJob1 start job. times:1 Wed Jun 02 09:13:00 CST 2010 
com.xxx.xxxx.test.order.TestJob2 start job. times:1 Wed Jun 02 09:13:00 CST 2010 
com.xxx.xxxx.test.order.TestJob3 start job. times:1 Wed Jun 02 09:13:00 CST 2010 
com.xxx.xxxx.test.order.TestJob4 start job. times:1 Wed Jun 02 09:13:00 CST 2010 
com.xxx.xxxx.test.order.TestJob5 start job. times:1 Wed Jun 02 09:13:00 CST 2010 
com.xxx.xxxx.test.order.TestJob6 start job. times:1 Wed Jun 02 09:13:00 CST 2010 
com.xxx.xxxx.test.order.TestJob7 start job. times:1 Wed Jun 02 09:13:00 CST 2010

com.xxx.xxxx.test.order.TestJob13 end job. times:1 
com.xxx.xxxx.test.order.TestJob12 start job. times:1 Wed Jun 02 09:15:51 CST 2010 
com.xxx.xxxx.test.order.TestJob10 end job. times:1 
com.xxx.xxxx.test.order.TestJob13 start job. times:2 Wed Jun 02 09:16:00 CST 2010

com.xxx.xxxx.test.order.TestJob11 end job. times:1 
com.xxx.xxxx.test.order.TestJob1 end job. times:1 
com.xxx.xxxx.test.order.TestJob3 end job. times:1 
com.xxx.xxxx.test.order.TestJob2 end job. times:1 
……

我们可以看到在红色区块里是Quartz第一次调度启动的所有JOB,我们可以看到这个时候只启动了10个JOB,job8,9,12因为线程池无可用线程没有被触发起来。 
我们再看绿色区块由于job13第一次的任务执行结束使得线程池中有了空闲的线程,job12得以被触发但是这里请大家注意一下JOB12的开始时间09:15:51这已经不是我们说期望的每分钟的30秒那一刻开始执行。绿色区块的后面两条日志我们也可以看到由于Job10执行完成JOB13开始了第二次执行09:16:00但是Job13的触发时间也不是我们所期望的每分钟的50秒那一刻开始执行。 
后面的日志我就不再解释从上面的日志我们基本上可以看出来,当Quartz得线程池在某一个时刻被占满的时候,后续的一些job无法保证在我们所期望的时间点被执行. 
   通过这个测试得出了我们使用Quartz时需要注意的几点事项: 
1. 同一个时刻,或者相隔较近的一段时间内不能配置超过Quartz线程池大小的任务数。有时候即使是在某时刻任务数配置的不多但是也要关心一下在它的前面是否有大量的耗时的任务,这样同样会有可能导致你的任务不在你期望的时间点被执行。 
2. 在你的定时任务里不要依赖定时钟的启动时间来做一些操作,比如根据当前时间取一些数据的操作,如果有类似这样的操作当定时钟没有在你期望的时间点被触发的时候极有可能造成数据遗漏之类的问题。

Spring对Quartz的封装实现简单需注意事项的更多相关文章

  1. 基于spring的quartz定时框架,实现简单的定时任务功能

    在项目中,经常会用到定时任务,这就需要使用quartz框架去进行操作. 今天就把我最近做的个人主页项目里面的定时刷新功能分享一下,很简单. 首先需要配置一个配置文件,因为我是基于spring框架的,所 ...

  2. Spring 整合 Quartz 实现动态定时任务

    复制自:https://www.2cto.com/kf/201605/504659.html 最近项目中需要用到定时任务的功能,虽然Spring 也自带了一个轻量级的定时任务实现,但感觉不够灵活,功能 ...

  3. 【转】Spring 整合 Quartz 实现动态定时任务

    http://blog.csdn.net/u014723529/article/details/51291289 最近项目中需要用到定时任务的功能,虽然spring 也自带了一个轻量级的定时任务实现, ...

  4. Spring 整合 Quartz 实现动态定时任务(附demo)

    最近项目中需要用到定时任务的功能,虽然Spring 也自带了一个轻量级的定时任务实现,但感觉不够灵活,功能也不够强大.在考虑之后,决定整合更为专业的Quartz来实现定时任务功能. 普通定时任务 首先 ...

  5. Spring.Scheduling.Quartz的使用

    最近因使用Spring.Net框架而接触.了解到其与Quartz.Net的集成,即Spring.Scheduling.Quartz模块. Spring通过对Quartz.Net的封装,采用了sprin ...

  6. Spring与Quartz的整合

    Quartz Quartz是一个完全由Java编写的开源作业调度框架,为在Java应用程序中进行作业调度提供了简单却强大的机制.Quartz允许开发人员根据时间间隔来调度作业.它实现了作业和触发器的多 ...

  7. Spring 集成Quartz

    在使用jdk的timer时发现无法在指定的日期进行执行任务.这便引入一个优秀的开源任务调度框架“quartz”.这里使用的是quartz-1.8.6版本.Quart的官网:http://www.qua ...

  8. (十七)Spring 集成Quartz

    在使用jdk的timer时发现无法满足这次的开发需求:即无法在指定的日期进行执行任务.这便引入一个优秀的开源任务调度框架“quartz”.这里加入的是quartz-1.8.6版本.Quart的官网:h ...

  9. Spring 整合 Quartz框架(定时任务)

    Maven 无法下载 Quartz 依赖,去官网下载 http://www.quartz-scheduler.org/downloads/ Quartz 官方手册:https://www.w3csch ...

随机推荐

  1. Zxing兼容2.3等低版本

    需要修改的地方 1.InactivityTimer.java public synchronized void onActivity() { ... if (Build.VERSION.SDK_INT ...

  2. Linux中的输入重定向,变量

    1 :分号 格式:命令1:命令2;命令3 说明:命令之间用分号隔开是顺序执行,命令之间没有任何逻辑关系 2  &&  逻辑与 格式:命令1 && 命令2 说明:命令1正 ...

  3. Knockout.Js官网学习(value绑定)

    前言 value绑定是关联DOM元素的值到view model的属性上.主要是用在表单控件<input>,<select>和<textarea>上. 当用户编辑表单 ...

  4. 使用Fiddler针对Android手机网络请求抓包

    本文转载自大牛Trinea的博文:Android利用Fiddler进行网络数据抓包 主要介绍Android及IPhone手机上如何利用Fiddler进行网络数据抓包,比如我们想抓某个应用(微博.微信. ...

  5. 搭建dns域名服务器过程

    在用TCP/IP协议族架设的网络中,每一个节点都有一个唯一的IP地址,用来作为它们唯一的标志.然而,如果让使用者来记住这些毫无记忆规律的IP地址将是不可想象的.人们就需要一种有记忆规律的字符串来作为唯 ...

  6. HTTP协议-----小白

    HTTP是一个属于应用层的面向对象的协议. ***OSI的7层从上到下分别是 7 应用层 6 表示层 5 会话层 4 传输层 3 网络层 2 数据链路层 1 物理层 HTTP协议的主要特点可概括如下: ...

  7. Ajax Step By Step3

    第三[.$.getScript()和$.getJSON()] jQuery 提供了一组用于特定异步加载的方法:$.getScript(),用于加载特定的 JS 文件: $.getJSON(),用于专门 ...

  8. 网站内容禁止复制和粘贴、另存为的js代码(转)

    1.使右键和复制失效 方法1: 在网页中加入以下代码: 代码如下: <script language="Javascript"> document.oncontextm ...

  9. System.Security.SecurityException The source was not found, but some or all event logs could not be searched.Inaccessible logs Security.

    An exception occurred during the Install phase. System.Security.SecurityException The source was not ...

  10. hibernate配置 sqlserver 数据库自动增长

    <id  name="Id" type="integer"> <column name="userid" > < ...