ZooKeeper与Curator注册和监控
Curator提供了对zookeeper客户端的封装,并监控连接状态和会话session,特别是会话session过期后,curator能够重新连接zookeeper,并且创建一个新的session。
对于zk的使用者来说,session的概念至关重要,如果想了解更多session的说明,请访问:http://zookeeper.apache.org/doc/trunk/zookeeperProgrammers.html
zk客户端和zk服务器间主要可能存在下面几种异常情况:
1. 短暂失去连接:此时客户端检测到与服务端的连接已经断开,但是服务端维护的客户端session尚未过期,之后客户端和服务端重新建立了连接;当客户端重新连接后,由于session没有过期,zookeeper能够保证连接恢复后保持正常服务。
2. 失去连接时间很长:此时服务器相对于客户端的session已经过期了,与先前session相关的watcher和ephemeral的路径和数据都会消失;当Curator重新创建了与zk的连接后,会获取到session expired异常,Curator会销毁先前的session,并且会创建一个新的session,需要注意的是,与之前session相关的watcher和ephemeral类型的路径和数据在新的session中也不会存在,需要开发者在CuratorFramework.getConnectionStateListenable().addListener()中添加状态监听事件,对ConnectionState.LOST事件进行监听,当session过期后,使得之前的session状态得以恢复。对于ephemeral类型,在客户端应该保持数据的状态,以便及时恢复。
3. 客户端重新启动:不论先前的zk session是否已经过期,都需要重新创建临时节点、添加数据和watch事件,先前的session也会在稍后的一段时间内过期。
4. Zk服务器重新启动:由于zk将session信息存放到了硬盘上,因此重启后,先前未过期的session仍然存在,在zk服务器启动后,客户端与zk服务器创建新的连接,并使用先前的session,与1相同。
5. 需要注意的是,当session过期了,在session过期期间另外的客户端修改了zk的值,那么这个修改在客户端重新连接到zk上时,zk客户端不会接收到这个修改的watch事件(尽管添加了watch),如果需要严格的watch逻辑,就需要在curator的状态监控中添加逻辑。
特别提示:watcher仅仅是一次性的,zookeeper通知了watcher事件后,就会将这个watcher从session中删除,因此,如果想继续监控,就要添加新的watcher。
下面提供了对persistent和ephemeral两种类型节点的监控方法,其中get方法说明了persistent节点如何监控,而register方法说明了ephemeral类型的节点如何监控。
public class CuratorTest {
private CuratorFramework zkTools;
private ConcurrentSkipListSet watchers = newConcurrentSkipListSet();
private static Charset charset = Charset.forName("utf-8");
public CuratorTest() {
zkTools = CuratorFrameworkFactory
.builder()
.connectString("10.11.21.78:12306")
.namespace("zk/test")
.retryPolicy(new RetryNTimes(2000,20000))
.build();
zkTools.start();
}
public void addReconnectionWatcher(final String path,final ZookeeperWatcherType watcherType,final CuratorWatcher watcher){
synchronized (this) {
if(!watchers.contains(watcher.toString()))//不要添加重复的监听事件
{
watchers.add(watcher.toString());
System.out.println("add new watcher " + watcher);
zkTools.getConnectionStateListenable().addListener(newConnectionStateListener() {
@Override
public void stateChanged(CuratorFramework client, ConnectionState newState) {
System.out.println(newState);
if(newState == ConnectionState.LOST){//处理session过期
try{
if(watcherType == ZookeeperWatcherType.EXITS){
zkTools.checkExists().usingWatcher(watcher).forPath(path);
}else if(watcherType == ZookeeperWatcherType.GET_CHILDREN){
zkTools.getChildren().usingWatcher(watcher).forPath(path);
}else if(watcherType == ZookeeperWatcherType.GET_DATA){
zkTools.getData().usingWatcher(watcher).forPath(path);
}else if(watcherType == ZookeeperWatcherType.CREATE_ON_NO_EXITS){
//ephemeral类型的节点session过期了,需要重新创建节点,并且注册监听事件,之后监听事件中,
//会处理create事件,将路径值恢复到先前状态
Stat stat =zkTools.checkExists().usingWatcher(watcher).forPath(path);
if(stat == null){
System.err.println("to create");
zkTools.create()
.creatingParentsIfNeeded()
.withMode(CreateMode.EPHEMERAL)
.withACL(ZooDefs.Ids.OPEN_ACL_UNSAFE)
.forPath(path);
}
}
}catch (Exception e) {
e.printStackTrace();
}
}
}
});
}
}
}
public void create() throws Exception{
zkTools.create()//创建一个路径
.creatingParentsIfNeeded()//如果指定的节点的父节点不存在,递归创建父节点
.withMode(CreateMode.PERSISTENT)//存储类型(临时的还是持久的)
.withACL(ZooDefs.Ids.OPEN_ACL_UNSAFE)//访问权限
.forPath("zk/test");//创建的路径
}
public void put() throws Exception{
zkTools.//对路径节点赋值
setData().
forPath("zk/test","hello world".getBytes(Charset.forName("utf-8")));
}
public void get() throws Exception{
String path = "zk/test";
ZKWatch watch = new ZKWatch(path);
byte[] buffer = zkTools.
getData().
usingWatcher(watch).forPath(path);
System.out.println(new String(buffer,charset));
//添加session过期的监控
addReconnectionWatcher(path, ZookeeperWatcherType.GET_DATA, watch);
}
public void register() throws Exception{
String ip = InetAddress.getLocalHost().getHostAddress();
String registeNode = "zk/register/"+ip;//节点路径
byte[] data = "disable".getBytes(charset);//节点值
CuratorWatcher watcher = new ZKWatchRegister(registeNode,data); //创建一个register watcher
Stat stat = zkTools.checkExists().forPath(registeNode);
if(stat != null){
zkTools.delete().forPath(registeNode);
}
zkTools.create()
.creatingParentsIfNeeded() .withMode(CreateMode.EPHEMERAL)
.withACL(ZooDefs.Ids.OPEN_ACL_UNSAFE)
.forPath(registeNode,data);//创建的路径和值
//添加到session过期监控事件中
addReconnectionWatcher(registeNode, ZookeeperWatcherType.CREATE_ON_NO_EXITS,watcher);
data = zkTools.getData().usingWatcher(watcher).forPath(registeNode);
System.out.println("get path form zk : "+registeNode+":"+new String(data,charset));
}
public static void main(String[] args) throws Exception {
CuratorTest test = new CuratorTest();
test.get();
test.register();
Thread.sleep(10000000000L);
}
public class ZKWatch implements CuratorWatcher{
private final String path;
public String getPath() {
return path;
}
public ZKWatch(String path) {
this.path = path;
}
@Override
public void process(WatchedEvent event) throws Exception {
System.out.println(event.getType());
if(event.getType() == EventType.NodeDataChanged){
byte[] data = zkTools.
getData().
usingWatcher(this).forPath(path);
System.out.println(path+":"+new String(data,Charset.forName("utf-8")));
}
}
}
public class ZKWatchRegister implements CuratorWatcher{
private final String path;
private byte[] value;
public String getPath() {
return path;
}
public ZKWatchRegister(String path,byte[] value) {
this.path = path;
this.value = value;
}
@Override
public void process(WatchedEvent event) throws Exception {
System.out.println(event.getType());
if(event.getType() == EventType.NodeDataChanged){
//节点数据改变了,需要记录下来,以便session过期后,能够恢复到先前的数据状态
byte[] data = zkTools.
getData().
usingWatcher(this).forPath(path);
value = data;
System.out.println(path+":"+new String(data,charset));
}else if(event.getType() == EventType.NodeDeleted){
//节点被删除了,需要创建新的节点
System.out.println(path + ":" + path +" has been deleted.");
Stat stat = zkTools.checkExists().usingWatcher(this).forPath(path);
if(stat == null){
zkTools.create()
.creatingParentsIfNeeded()
.withMode(CreateMode.EPHEMERAL)
.withACL(ZooDefs.Ids.OPEN_ACL_UNSAFE)
.forPath(path);
}
}else if(event.getType() == EventType.NodeCreated){
//节点被创建时,需要添加监听事件(创建可能是由于session过期后,curator的状态监听部分触发的)
System.out.println(path + ":" +" has been created!" + "the current data is " +new String(value));
zkTools.setData().forPath(path, value);
zkTools.getData().usingWatcher(this).forPath(path);
}
}
}
public enum ZookeeperWatcherType{
GET_DATA,GET_CHILDREN,EXITS,CREATE_ON_NO_EXITS
}
}
ZooKeeper与Curator注册和监控的更多相关文章
- Zookeeper客户端Curator使用详解
Zookeeper客户端Curator使用详解 前提 最近刚好用到了zookeeper,做了一个基于SpringBoot.Curator.Bootstrap写了一个可视化的Web应用: zookeep ...
- Zookeeper实现分布式集群监控
Zookeeepr实现分布式集群监控 Zookeeper中节点有两种:临时节点和永久节点 从类型上看节点又可以分为四种节点类型:PERSIST,PERSIST_SEQUENTIAL,EPHEMERAL ...
- zookeeper(六):Zookeeper客户端Curator的API使用详解
简介 Curator是Netflix公司开源的一套zookeeper客户端框架,解决了很多Zookeeper客户端非常底层的细节开发工作,包括连接重连.反复注册Watcher和NodeExistsEx ...
- 转:Zookeeper客户端Curator使用详解
原文:https://www.jianshu.com/p/70151fc0ef5d Zookeeper客户端Curator使用详解 前提 最近刚好用到了zookeeper,做了一个基于SpringBo ...
- 【转帖】基于Zookeeper的服务注册与发现
http://www.techweb.com.cn/network/hardware/2015-12-25/2246973.shtml 背景 大多数系统都是从一个单一系统开始起步的,随着公司业务的快速 ...
- ZeroMQ接口函数之 :zmq_socket_monitor - 注册一个监控回调函数
ZeroMQ 官方地址 :http://api.zeromq.org/4-2:zmq-socket-monitor zmq_socket_monitor(3) ØMQ Manual - ØMQ/4.1 ...
- Web Api 基于Zookeeper的服务注册与发现
安装与差异 Zookeeper安装请参考我上篇文章 http://www.cnblogs.com/woxpp/p/7700368.html 基于Nginx的服务提供和消费 基于zookeeper的服务 ...
- 网站集群架构(LVS负载均衡、Nginx代理缓存、Nginx动静分离、Rsync+Inotify全网备份、Zabbix自动注册全网监控)--技术流ken
前言 最近做了一个不大不小的项目,现就删繁就简单独拿出来web集群这一块写一篇博客.数据库集群请参考<MySQL集群架构篇:MHA+MySQL-PROXY+LVS实现MySQL集群架构高可用/高 ...
- window7环境下ZooKeeper的安装运行及监控查看
原文:http://www.cnblogs.com/RainAndWind/p/4668427.html ZooKeeper是一个分布式开源框架,供了协调分布式应用的基本服务.这些天在使用DUBBO, ...
随机推荐
- [chrome插件分享] gitlab-tree 更方便的浏览Gitlab上的代码
说明 经常玩Github的人肯定都知道大名鼎鼎的octotree吧,这款chrome插件可以说是浏览代码的神器,利用左侧的树形菜单可以很方便的打开目录.浏览文件等,加上Github全站本身使用了pja ...
- C语言中的内存分配与释放
C语言中的内存分配与释放 对C语言一直都是抱着学习的态度,很多都不懂,今天突然被问道C语言的内存分配问题,说了一些自己知道的,但感觉回答的并不完善,所以才有这篇笔记,总结一下C语言中内存分配的主要内容 ...
- [BTS] System.Xml.Schema.XmlSchemaException: The complexType has already been declared when generate IDoc schema.
I use wcf-sap adapter for generate the schema of IDoc that named "YHREMPMASTER". but throw ...
- Spring-MVC配置方法
什么是spring-mvc 实现了mvc结构的spring模块,spring-mvc模块封装了web开发中的常用功能,简化了web过程. DispatcherServlet处理浏览器发来的请求 Han ...
- DataGridView列排序混乱的处理方法
在C#程序开发中DataGridView可以说是使用最多的数据呈现控件了,但是在使用的过程中我们会发现当绑定的数据源有较多数据列的时候,DataGridView上显示的列的顺序就会出现混乱的现象. 那 ...
- paip.提升效率--gui 的选择--swing最佳实践swt awt
paip.提升效率--gui 的选择--swing最佳实践swt awt ////////////////弹出消息框. ////////////////myeclipse swing 开发最佳实践.. ...
- CSS实现特殊效果
CSS实现三道杠效果 http://jsbin.com/hocopusuvi/edit?html,css,output CSS实现圆点效果 http://jsbin.com/nojiromaje/ed ...
- bzoj 3517: 翻硬币
3517: 翻硬币 Time Limit: 1 Sec Memory Limit: 128 MB Description 有一个n行n列的棋盘,每个格子上都有一个硬币,且n为偶数.每个硬币要么是正面 ...
- 解决.Net 4.0 A potentially dangerous Request.Form value was detected from the client 异常
在web.config中加入 <httpRuntime maxRequestLength="22000" executionTimeout="43200" ...
- 防止ViewPager中的Fragment被销毁的方法,更加流畅
在使用ViewPager与Fragment的时候,ViewPager会自动缓存1页内的数据,如下图: 当我们当前处在页面2的时候,页面1和页面3的View实际上已经创建好了,所以在我们拖动的时候是可以 ...