对Item中定时器的理解
一、Diamond介绍
Diamond主要提供持久配置的发布和订阅服务,最大特点是结构简单,稳定可靠。
主要的使用场景:TDDL使用Diamond动态切换数据库,动态扩容等;业务使用Diamond推送系统开关配置。
架构如下:

发布或者更新配置数据时,步骤如下:
- 写入MySql数据库
- 写本地磁盘
- 通知集群其他机器去数据库dump更新的数据
订阅方获取配置数据时,直接读取服务端本地磁盘文件,尽量减少对数据库压力。 这种架构用短暂的延时换取最大的性能和一致性,一些配置不能接受延时的情况下,通过API可以获取数据库中的最新配置。
数据获取模型:
客户端采用推拉结合的策略在长连接和短连接之间取得一个平衡,让服务端不用太关注连接的管理,又可以获得长连接的及时性。
- 客户端发起一个对比请求到服务端,请求中包含客户端订阅的数据的指纹
- 服务端检查客户端的指纹是否与最新数据匹配
- 如果匹配,服务端持有连接
- 如果30秒内没有相关数据变化,服务端持有连接30秒后释放
- 如果30秒内有相关数据变化,服务端立即返回变化数据的ID
- 如果不匹配,立即返回变化数据的ID
- 客户端根据变化数据的ID去服务端获取最新的内容
Diamond通过这种推拉结合的方式,让客户端逻辑尽量简单,而且高效。
二、Diamond和DTS接入
接入步骤:
0.生成dts的groupId
在[国内测试集群] 日常、二套:http://ops.jm.taobao.net/dts-console/中创建dts分组

1.引入diamond-client和dts-client的maven依赖
<dependency>
<groupId>com.taobao.diamond</groupId>
<artifactId>diamond-client</artifactId>
<version>3.6.9.2</version>
</dependency> <dependency>
<groupId>com.alibaba.dts</groupId>
<artifactId>dts-client</artifactId>
<version>0.0.3.9</version>
</dependency>
2.spring中配置Diamond
<bean id="jobSwitch" class="com.taobao.cun.item.diamond.JobSwitch"></bean>
<!-- diamond配置 -->
<bean id="deleteLogConfigManager" class="com.taobao.cun.item.diamond.ConfigManager"
init-method="init">
<property name="dataId" value="cuntaoic-timer-configure"></property>
<property name="groupId" value="timer-group"></property>
<property name="receivers">
<map>
<entry key="allSellerCheckOpen" value-ref="jobSwitch"></entry>
<entry key="pullDownAllProductOpen" value-ref="jobSwitch"></entry>
</map>
</property>
</bean>
初始化SpringContext时,执行ConfigManager的init方法初始化Diamond,通过Diamond.addListener(dataId, groupId, managerListener)注册监听器,监听器的作用是用于监听服务端数据的变化,client端会定时的向服务端检测数据的变化,当数据变化时,会及时返回给client。监听器中,提供了处理新数据的回调方法receiveConfigInfo。
Diamond.addListener(dataId, groupId, new ManagerListener() {
public void receiveConfigInfo(String configInfo) {
try {
processConfig(configInfo);
} catch (IOException e) {
log.error("processConfig error", e);
}
}
public Executor getExecutor() {
return null;
}
});
processConfig(configInfo)方法处理配置服务中心更新的配置信息,这里获取的是作业开关的关闭状态
3.spring中配置DTS任务调度框架
<bean id="dtsClient" class="com.alibaba.dts.client.DtsClient"
init-method="init">
<property name="groupId">
<value>${cuntao.ic.timer.dts.group.id}</value><!--此处填写控制台创建分组后生成的分组ID -->
</property>
</bean>
三、Job任务开发
1.在这里定时钟任务开发只需实现SimpleJobProcessor接口,如下文的删除日志Job
public class DeleteLogJob implements SimpleJobProcessor {
public ProcessResult process(SimpleJobContext context) {
try {
Runtime.getRuntime().exec("rm -rf /home/admin/logs/*.log");
} catch (IOException e) {
e.printStackTrace();
}
return new ProcessResult(true);//true表示执行成功,false表示失败
}
}
2.在后台进行Job配置

在定时表达式中输入:0 0 1 * * ?,这样就可以在每天的凌晨1点执行删除任务了
四、测试与发布
参照杨威的文档cuntaoic定时钟开发规范
对Item中定时器的理解的更多相关文章
- Scrapy基础(十)———同步机制将Item中的数据写在Mysql
前面讲解到将Item中的所有字段都已经填写完成,那么接下来就是将他们存储到mysql数据库中,那就用到了pipeline项目管道了: 对项目管道的理解:做一个比喻,爬取好比是开采石油,Item装 ...
- Scrapy基础(九)————将不定长度的URL进行固定长度写入Item中
前面讲到将每篇文章的URL写入Item,但是每个url的长度是不同的,可以在Item中设置一个字段怎样使得每个URL的长度相同,这就需要对每个URL进行md5运算,使得长度统一,再加入到设定的Item ...
- Java中hashcode的理解
Java中hashcode的理解 原文链接http://blog.csdn.net/chinayuan/article/details/3345559 怎样理解hashCode的作用: 以 java. ...
- Java中定时器Timer致命缺点(附学习方法)
简介 这篇文章我一直在纠结到底要不要写,不想写一来因为定时器用法比较简单,二来是面试中也不常问.后来还是决定写了主要是想把自己分析问题思路分享给大家,让大家在学习过程中能够参考,学习态度我相信大部分人 ...
- Fouandation(NSString ,NSArray,NSDictionary,NSSet) 中常见的理解错误区
Fouandation 中常见的理解错误区 1.NSString //快速创建(实例和类方法) 存放的地址是 常量区 NSString * string1 = [NSString alloc]init ...
- linux中socket的理解
对linux中socket的理解 一.socket 一般来说socket有一个别名也叫做套接字. socket起源于Unix,都可以用“打开open –> 读写write/read –> ...
- Unity3D中定时器的使用
源地址:http://unity3d.9tech.cn/news/2014/0402/40149.html 在游戏设计过程中定时器是必不可少的工具,我们知道update方法是MonoBehavior中 ...
- ListView item 中TextView 如何获取长按事件
昨天晚上小伙伴突然来信, ListView item中嵌套的TextView 无法获取长按事件 从前从来没有仔细留意过, coding后发现...果然没什么动静 而且没有合适的API让我调用获取Tex ...
- 谈谈我对Java中CallBack的理解
谈谈我对Java中CallBack的理解 http://www.cnblogs.com/codingmyworld/archive/2011/07/22/2113514.html CallBack是回 ...
随机推荐
- 关于sys.argv
sys.argv[]用来获取命令行参数,sys.argv[0]表示代码本身的文件路径.比如在命令行输入‘python test.py -version',sys.argv[0]的值即为test.py, ...
- autoconf添加gcc调试选项
autoconf生成的编译选项默认是"-g -O2".这个"-g"选项将我迷惑了,以为生成了GDB调试所需的信息,所以也就没有管后面的"-O2“选 ...
- bat调用kettle的job文件
@bat set /p param=请输入时间:echo %param%F:cd D:/data-integrationecho 正在执行接口call Kitchen.bat/norep /file ...
- hdu2222 Keywords Search(AC自动机初步)
题目大意: 给出多个模式串和一个主串,求多少个模式串在主串中出现过. 传送门 这是一道AC自动机的模板题. 在学习AC自动机之前,首先要学习WA自动机.TLE自动机和MLE自动机(雾 AC自动机是一种 ...
- css 找到隐藏元素个数
<form> <input type="hidden" name="email" /> <input type=" ...
- macaca 测试web(3)
上回书说到 macaca 测试web(2) 使用ddt做参数驱动化, 有些人会说,你好low,我说怎么low呢,他说你看看你的脚本就放在一个文件里,对于我们小白来说,这看起来很乱啊,能不能给我拆分, ...
- django模板(过滤器)
-------------------django内建的过滤器-------------------1.add 使用形式为:{{ value | add: "2"}} 意义:将va ...
- 为测试赋能,腾讯WeTest探索手游AI自动化测试之路
作者:周大军/孙大伟, 腾讯后台开发 高级工程师 商业转载请联系腾讯WeTest获得授权,非商业转载请注明出处. WeTest导读 做好自动化测试从来不件容易的事情,更何况是手游的自动化测试,相比传 ...
- Cython的用法以及填坑姿势
因为项目需要,需要优化已有的Python代码.目前Python代码的执行过程是将Python代码转变成一行行指令,然后解释器解释指令的执行,调用到C代码层.如果去掉指令解释这个阶段,直接进入C代码层, ...
- Flask04 后台获取请求数据、视图函数返回类型、前台接受响应数据
1 后台获取请求数据 1.1 提出问题 前台发送请求的方式有哪些 后台如何获取这些请求的参数 1.2 前台发送请求的方式 GET.POST.AJAX 点睛:如果不指定请求方式,浏览器默认使用GET请求 ...