一.Master选举 1. master选举原理: 有多个master,每次只能有一个master负责主要的工作,其他的master作为备份,同时对负责工作的master进行监听,一旦负责工作的master挂掉了,其他的master就会收到监听的事件,从而去抢夺负责工作的权利,其他没有争夺到负责主要工作的master转而去监听负责工作的新master. 本质其实是利用zookeeper的临时节点的特性:临时节点随着会话的消亡二消亡,同一个临时节点只能创建一个,创建失败的节点(从master)对创…
Java第五次作业--面向对象高级特性(抽象类与接口) (一)学习总结 1.在上周完成的思维导图基础上,补充本周的学习内容,对Java面向对象编程的知识点做一个全面的总结. 2.汽车租赁公司,出租汽车种类有客车.货车和皮卡三种,每辆汽车除了具有编号.名称.租金三个基本属性之外,客车有载客量,货车有载货量,皮卡则同时具有载客量和载货量.用面向对象编程思想分析上述问题,将其表示成合适的类.抽象类或接口,说明设计思路并画出类图. 2.1设计思路:定义一个父类为Car,里面包括属性number,name…
zookeeper,已经被很多人所熟知,主要应用场景有(数据订阅/发布 ,负载均衡, 命名服务, 分布式协调/通知,集群管理,Master选举,分布式锁,分布式队列). C接口的描述  主要参考 Haippy 的文章 :Zookeeper C API 指南 (感谢大神) 但是网上的C++版 示例代码少之又少,作为一个小白,自己摸索,给大家参考. Master选举的需求主要如下: 1.多台机器同时进行选举,产生唯一的一台机器作为Master,其它的机器作为slave. 2.当Master宕机后,需…
前言:会签和加签是常见审批流程模式,在引擎中,对这两种流程模式做了分别定义和实现,其中也用到了Workflow Pattern的Multiple Instance(多实例) . 1. 会签和加签的定义 会签即当前运行节点有多人进行办理,或者可以说当前节点存在多个办理任务.这些任务可以分为两种情况来运行:一种是按顺序进行办理,即串行会签:一种是同时进行办理,即并行会签. 串行会签和并行会签都可以进行通过率的设置,串行会签和并行会签中通过率是按照通过人数或者百分比进行设置,达到通过人数(或者百分比)…
原生API 增删改查询 public class ZkBaseTest { static final String CONNECT_ADDR = "192.168.0.120"; static final CountDownLatch countDownLatch = new CountDownLatch(1); public static void main(String[] args) throws Exception { // 获取zookeeper对象 ZooKeeper zk…
leader选举算法 zookeeper server内部原理 zookeeper client…
Spark Master主备切换主要有两种机制,之中是基于文件系统,一种是基于Zookeeper.基于文件系统的主备切换机制需要在Active Master挂掉后手动切换到Standby Master上,而基于Zookeeper的主备切换机制可以实现自动切换Master. 切换流程图 流程说明: Standby Master模式 1. 使用持久化引擎读取持久化的storeApps.storeDrivers.storeWorkers,持久化引擎有FileSystemPersistenceEngin…
1.ZK与传统MVC框架的集成 由于ZK应用本质上也是基于标准Web技术Servlet框架,因此与其它MVC框架的集成没有什么特别的, 以一个典型场景为例——为一个现有的Web项目(前端采用WebWork+Freemarker+prototype)引入ZK技术开发新的页面和模块,主要集成工作包括: 页面集成方式1:在freemarker中嵌入iframe指向zul页面: 页面集成方式2:prototype打开新页签时url参数指向zul页面: 参数传递方式1:url后面跟参数: 参数传递方式2:…
一.HDFS的回收站: recyclebin 1.HDFS的回收站默认是关闭的 2.启用回收站:去core-site.xml配置 路径:/root/training/hadoop-2.7.3/etc/hadoop <property> <name>fs.trash.interval</name> <value>1440</value> </property> 3.配置完成后删除目录 hdfs dfs -rmr /folder1 日志:…
一.学习要点 认真看书并查阅相关资料,掌握以下内容: 掌握抽象类的设计 掌握接口的设计 理解简单工厂设计模式 理解抽象类和接口的区别 掌握包装类的应用 掌握对象的比较方法和比较器的使用 学习使用日期操作类 学习匿名内部类的使用 二.作业要求 发布一篇随笔,主要包括以下几部分的内容: (一)学习总结 1.在上周完成的思维导图基础上,补充本周的学习内容,对Java面向对象编程的知识点做一个全面的总结. 参考资料: XMind 2.汽车租赁公司,出租汽车种类有客车.货车和皮卡三种,每辆汽车除了具有编号…