Zookeeper(一)CentOS7.5搭建Zookeeper3.4.12集群与命令行操作
一. 分布式安装部署
1.0 下载地址
官网首页: https://zookeeper.apache.org/
下载地址: http://mirror.bit.edu.cn/apache/zookeeper/
1.1 集群规划
在node21、node22和ode23三个节点上部署Zookeeper,三个节点都已安装jdk。
IP | 节点名称 | Zookeeper | JDK |
192.168.100.21 | node21 | Zookeeper | JDK |
192.168.100.22 | node22 | Zookeeper | JDK |
192.168.100.23 | node23 | Zookeeper | JDk |
1.2 解压安装
(1)解压zookeeper安装包到/opt/module/目录下
[admin@node21 software]$ tar -zxvf zookeeper-3.4.12.tar.gz -C /opt/module/
(2)在/opt/module/zookeeper-3.4.12/这个目录下创建Data
[admin@node21 zookeeper-3.4.12]# sudo mkdir Data
(3)重命名/opt/module/zookeeper-3.4.12/conf这个目录下的zoo_sample.cfg为zoo.cfg
[admin@node21 conf]# mv zoo_sample.cfg zoo.cfg
1.3 配置zoo.cfg文件
具体配置,修改dateDir,添加日志存放目录
dataDir=/opt/module/zookeeper-3.4.12/Data
dataLogDir=/opt/module/zookeeper-3.4.12/logs
末尾增加如下配置
server.1=node21:2888:3888
server.2=node22:2888:3888
server.3=node23:2888:3888
1.4 集群配置
(1)在/opt/module/zookeeper-3.4.12/Data目录下创建一个myid的文件
[admin@node21 Data]# sudo touch myid
(2)编辑myid文件, 在文件中添加与server对应的编号:如 1
[admin@node21 Data]# vi myid
(3)拷贝配置好的zookeeper到其他机器上
[admin@node21 module]# scp -r zookeeper-3.4.12/ admin@node22:/opt/module/
[admin@node21 module]# scp -r zookeeper-3.4.12/ admin@node23:/opt/module/
并分别修改node22,node23中myid文件中内容为2、3
[admin@node22 Data]# echo > myid
[admin@node23 Data]# echo > myid
1.5 启动集群
(1)分别启动zookeeper
[admin@node21 zookeeper-3.4.12]# bin/zkServer.sh start
[admin@node22 zookeeper-3.4.12]# bin/zkServer.sh start
[admin@node23 zookeeper-3.4.12]# bin/zkServer.sh start
(2)查看状态
[admin@node21 zookeeper-3.4.12]# bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /opt/module/zookeeper-3.4.12/bin/../conf/zoo.cfg
Mode: follower
[admin@node22 zookeeper-3.4.12]# bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /opt/module/zookeeper-3.4.12/bin/../conf/zoo.cfg
Mode: follower
[admin@node23 zookeeper-3.4.12]# bin/zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /opt/module/zookeeper-3.4.12/bin/../conf/zoo.cfg
Mode: leader
(3)停止zookeeper
[admin@node21 zookeeper-3.4.]$ bin/zkServer.sh stop
1.6 配置环境变量
[admin@node21 zookeeper-3.4.]$ sudo vi /etc/profile
export ZOOKEEPER_HOME=/opt/module/zookeeper-3.4.
export PATH=$PATH:$ZOOKEEPER_HOME/bin
1.7zoo.cfg配置参数解读
Server.A=B:C:D。
A是一个数字,表示这个是第几号服务器;
B是这个服务器的ip地址;
C是这个服务器与集群中的Leader服务器交换信息的端口;
D是万一集群中的Leader服务器挂了,需要一个端口来重新进行选举,选出一个新的Leader,而这个端口就是用来执行选举时服务器相互通信的端口。
集群模式下配置一个文件myid,这个文件在dataDir目录下,这个文件里面有一个数据就是A的值,Zookeeper启动时读取此文件,拿到里面的数据与zoo.cfg里面的配置信息比较从而判断到底是哪个server。
1)tickTime=2000:通信心跳数
tickTime:通信心跳数,Zookeeper服务器心跳时间,单位毫秒
Zookeeper使用的基本时间,服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是每个tickTime时间就会发送一个心跳,时间单位为毫秒。
它用于心跳机制,并且设置最小的session超时时间为两倍心跳时间。(session的最小超时时间是2*tickTime)
2)initLimit=10:LF初始通信时限
集群中的follower跟随者服务器(F)与leader领导者服务器(L)之间初始连接时能容忍的最多心跳数(tickTime的数量),用它来限定集群中的Zookeeper服务器连接到Leader的时限。
投票选举新leader的初始化时间
Follower在启动过程中,会从Leader同步所有最新数据,然后确定自己能够对外服务的起始状态。
Leader允许F在initLimit时间内完成这个工作。
3)syncLimit=5:LF同步通信时限
集群中Leader与Follower之间的最大响应时间单位,假如响应超过syncLimit * tickTime,
Leader认为Follwer死掉,从服务器列表中删除Follwer。
在运行过程中,Leader负责与ZK集群中所有机器进行通信,例如通过一些心跳检测机制,来检测机器的存活状态。
如果L发出心跳包在syncLimit之后,还没有从F那收到响应,那么就认为这个F已经不在线了。
4)dataDir:数据文件目录+数据持久化路径
保存内存数据库快照信息的位置,如果没有其他说明,更新的事务日志也保存到数据库。
5)clientPort=2181:客户端连接端口
监听客户端连接的端口
二. 客户端命令行操作
1)启动客户端
[admin@node21 zookeeper-3.4.]$ zkCli.sh
2)显示所有操作命令
[zk: localhost:(CONNECTED) ] help
ZooKeeper -server host:port cmd args
stat path [watch]
set path data [version]
ls path [watch]
delquota [-n|-b] path
ls2 path [watch]
setAcl path acl
setquota -n|-b val path
history
redo cmdno
printwatches on|off
delete path [version]
sync path
listquota path
rmr path
get path [watch]
create [-s] [-e] path data acl
addauth scheme auth
quit
getAcl path
close
connect host:port
3)查看当前znode中所包含的内容
[zk: localhost:(CONNECTED) ] ls /
[zookeeper]
4)查看当前节点数据并能看到更新次数等数据
[zk: localhost:(CONNECTED) ] ls2 /
[zookeeper]
cZxid = 0x0
ctime = Wed Dec :: EST
mZxid = 0x0
mtime = Wed Dec :: EST
pZxid = 0x0
cversion = -
dataVersion =
aclVersion =
ephemeralOwner = 0x0
dataLength =
numChildren =
5)创建普通节点
[zk: localhost:(CONNECTED) ] create /opt "aa"
Created /opt
[zk: localhost:(CONNECTED) ] create /opt/module "bb"
Created /opt/module
6)获得节点的值
[zk: localhost:(CONNECTED) ] get /opt
aa
cZxid = 0x4100000004
ctime = Wed Jul :: EDT
mZxid = 0x4100000004
mtime = Wed Jul :: EDT
pZxid = 0x4100000005
cversion =
dataVersion =
aclVersion =
ephemeralOwner = 0x0
dataLength =
numChildren =
[zk: localhost:(CONNECTED) ] get /opt/module
bb
cZxid = 0x4100000005
ctime = Wed Jul :: EDT
mZxid = 0x4100000005
mtime = Wed Jul :: EDT
pZxid = 0x4100000005
cversion =
dataVersion =
aclVersion =
ephemeralOwner = 0x0
dataLength =
numChildren =
7)创建短暂节点
[zk: localhost:(CONNECTED) ] create -e /app
Created /app
(1)在当前客户端是能查看到的
[zk: localhost:(CONNECTED) ] ls /
[app, opt, zookeeper]
(2)退出当前客户端然后再重启启动客户端
[zk: localhost:(CONNECTED) ] quit
[root@node21 zookeeper-3.4.]$ bin/zkCli.sh
(3)再次查看根目录下短暂节点已经删除
[zk: localhost:(CONNECTED) ] ls /
[opt, zookeeper]
8)创建带序号的节点
(1)先创建一个普通的根节点app
[zk: localhost:(CONNECTED) ] create /app "app"
create /app "app"
(2)创建带序号的节点
[zk: localhost:(CONNECTED) ] create -s /app/aa
Created /app/aa0000000000
[zk: localhost:(CONNECTED) ] create -s /app/bb
Created /app/bb0000000001
[zk: localhost:(CONNECTED) ] create -s /app/cc
Created /app/cc0000000002
如果原节点下有1个节点,则再排序时从1开始,以此类推。
[zk: localhost:(CONNECTED) ] create -s /opt/aa
Created /opt/aa0000000001
9)修改节点数据值
[zk: localhost:(CONNECTED) ] set /opt
cZxid = 0x4100000004
ctime = Wed Jul :: EDT
mZxid = 0x410000000e
mtime = Wed Jul :: EDT
pZxid = 0x410000000d
cversion =
dataVersion =
aclVersion =
ephemeralOwner = 0x0
dataLength =
numChildren =
10)节点的值变化监听
(1)在node22主机上注册监听/opt节点数据变化
[admin@node22 ~]$ zkCli.sh
[zk: localhost:(CONNECTED) ] get /opt watch
(2)在node21主机上修改/opt节点的数据
[zk: localhost:(CONNECTED) ] set /opt
(3)观察node22主机收到数据变化的监听
[zk: localhost:(CONNECTED) ]
WATCHER:: WatchedEvent state:SyncConnected type:NodeDataChanged path:/opt
11)节点的子节点变化监听(路径变化)
(1)在node22主机上注册监听/opt节点的子节点变化
[zk: localhost:(CONNECTED) ] ls /opt watch
[aa0000000001, module]
(2)在node21主机/opt节点上创建子节点
[zk: localhost:(CONNECTED) ] create /opt/bb
Created /opt/bb
(3)观察node22主机收到子节点变化的监听
[zk: localhost:(CONNECTED) ]
WATCHER:: WatchedEvent state:SyncConnected type:NodeChildrenChanged path:/opt
12)删除节点
[zk: localhost:(CONNECTED) ] delete /opt/bb
13)递归删除节点
[zk: localhost:(CONNECTED) ] rmr /opt
14)查看节点状态
[zk: localhost:(CONNECTED) ] stat /app
cZxid = 0x4100000009
ctime = Wed Jul :: EDT
mZxid = 0x4100000009
mtime = Wed Jul :: EDT
pZxid = 0x410000000c
cversion =
dataVersion =
aclVersion =
ephemeralOwner = 0x0
dataLength =
numChildren =
15)退出客户端
[zk: localhost:(CONNECTED) ] quit
Zookeeper(一)CentOS7.5搭建Zookeeper3.4.12集群与命令行操作的更多相关文章
- Storm(二)CentOS7.5搭建Storm1.2.2集群
一.Storm的下载 官网下载地址:http://storm.apache.org/downloads.html 这里下载最新的版本storm1.2.2,进入之后选择一个镜像下载 二.Storm伪分布 ...
- HBase(二)CentOS7.5搭建HBase1.2.6HA集群
一.安装前提 1.HBase 依赖于 HDFS 做底层的数据存储 2.HBase 依赖于 MapReduce 做数据计算 3.HBase 依赖于 ZooKeeper 做服务协调 4.HBase源码是j ...
- CentOS7.5搭建spark2.3.1集群
一 下载安装包 1 官方下载 官方下载地址:http://spark.apache.org/downloads.html 2 安装前提 Java8 安装成功 zookeeper 安 ...
- CentOS7.5搭建Solr7.4.0集群服务
一.Solr集群概念 solr单机版搭建参考: https://www.cnblogs.com/frankdeng/p/9615253.html 1.概念 SolrCloud(solr 云)是Solr ...
- centos7安装zookeeper3.4.12集群
zookeeper的三要素: 1.一致,能够保证数据的一致性 2.有头,始终有一个leader,node/2+1个节点有效,就能正常工作 3.数据树,树状结构且每个树必须有数据 1. 环境准备 操作系 ...
- CentOS7.1.x+Druid 0.12 集群配置
原文转载自:https://blog.csdn.net/bigtree_3721/article/details/79583008 先决条件:安装版本列表 本次安装满足下面的条件: CentOS v7 ...
- centos7 下搭建hadoop2.9 分布式集群
首先说明,本文记录的是博主搭建的3节点的完全分布式hadoop集群的过程,环境是centos 7,1个nameNode,2个dataNode,如下: 1.首先,创建好3个Centos7的虚拟机,具体的 ...
- 【更新】搭建 Zookeeper-3.4.11 集群
先准备好三台linux(虚拟机). 1. 先把Java环境配好.我CentOS-7-x86_64-DVD-1708 + jdk1.8.0_161 1.1 先把jdk上传到系统里面(我利用的Filezi ...
- CentOS7.5搭建ELK6.2.4集群及插件安装
一 简介 Elasticsearch是一个高度可扩展的开源全文搜索和分析引擎.它允许您快速,近实时地存储,搜索和分析大量数据.它通常用作支持具有复杂搜索功能和需求的应用程序的底层引擎/技术. 下载地址 ...
随机推荐
- Xml 文件读取
.NET 读取Xml文件,用到XmlDocument类. 1.要获取文档的根: DocumentElement. 2.Attributes :获取 XmlAttributeCollection 包含此 ...
- centos6.9安装crontab
yum install vixie-cron crontabs //安装 chkconfig crond on //开机自启动 service crond start //启动 然后就是执行 cron ...
- mysqlfrm初步使用
这个工具也就是读取frm文件生成建表语句默认的模式是再生个实例,使用--basedir选项或指定--server选项来连接到已经安装的实例.这种过程不会改变原始的.frm文件.该模式也需要指定--po ...
- ROM、PROM、EPROM、EEPROM、FLASH ROM简介
ROM指的是"只读存储器",即Read-Only Memory.这是一种线路最简单半导体电路,通过掩模工艺, 一次性制造,其中的代码与数据将永久保存(除非坏掉),不能进行修改.这玩 ...
- bootstrap的treeview使用方法
首先引入文件: <link href="./css/bootstrap.css" rel="stylesheet"> <script src= ...
- LNMP环境部署
说明: 操作系统:CentOS 5.6 32位 准备篇: 一.配置好IP.DNS .网关,确保使用远程连接工具能够连接服务器 二.配置防火墙,开启80端口.3306端口 vi /etc/sysconf ...
- yun
# Author:zhang# -*- coding:utf-8 -*-"""https://workyun.com/ 云端工作"""imp ...
- SQL Server2008从入门到精通pdf
下载地址:网盘下载 内容介绍 编辑 <SQL Server 从入门到精通>从初学者的角度出发,通过通俗易懂的语言.丰富多彩的实例,详细地介绍了SQLServer2008开发应该掌握的各方面 ...
- Confluence 6 外部小工具在其他应用中设置可信关系
为了在你的 Confluence 中与其他应用建立外部小工具,我们建议你在 2 个应用之间设置 OAuth 或者信任的应用连接关系.在这个例子中,外部应用为小工具的服务器(服务器提供者)和 Confl ...
- leetcode(js)算法之696计数二进制串
给定一个字符串 s,计算具有相同数量0和1的非空(连续)子字符串的数量,并且这些子字符串中的所有0和所有1都是组合在一起的. 重复出现的子串要计算它们出现的次数. 示例: 输入: "0011 ...