1.停掉zookeeper集群

****进程影响******

zkfc：报错无法连接zookeeper.ClientCnxn java.net.connectexception:拒绝连接，但不会shutdown

nn  ：无影响，未发生切换或shutdown

****命令影响******

hdfs haadmin -failover nn2 nn1

失败 报错：因连接zkfc socket timeout导致operation failed，原因：failovercontroller是zkfc的一个模块，zkfc因无法连接zookeeper而无法正常工作

hdfs haadmin -transitionToActive --forceactive --forcemanual nn1

成功 作用：nn1变为active，nn2因为丢失latest epoch而shutdown 结论：transitionToActive/Standby命令与zkfc无关

2.停掉zkfc集群

****进程影响******

zookeeper： 一个候选地址拒绝连接，关闭socket

nn  ：无影响，未发生切换或shutdown

****命令影响******

hdfs haadmin -failover nn2 nn1

失败 报错：因无法连接zkfc（拒绝连接）导致operation failed，原因：failovercontroller是zkfc的一个模块，zkfc shutdown导致无法接收请求

hdfs haadmin -transitionToActive --forceactive --forcemanual nn1   成功 作用：nn1变为active，nn2因为丢失latest epoch而shutdown 结论：transitionToActive/Standby命令与zkfc无关，注：重启nn2后，有时会出现nn1会因不再持有最新epoch而shutdown

3.nn1 nn2均为standby状态

***执行mr操作****

mr客户端 报错：轮流连接两个nn，均返回——operation category read is not supported in state standby

2个nn端  报错：operation journal is not supported in state standby

***执行put操作****

同上

4.nn1 nn2均为active-脑裂

只有transition切换时会出现短暂的脑裂状态，但随后old nn就会因为丢失epoch值而shutdown，目前尝试的方法都无法模拟长时间acitve脑裂的现象

5.接下来需要测试的问题：

短暂脑裂后，旧acitve nn启动后转为standby状态，客户端是否会想两个nn都请求读、写，而standby nn是否还会发出delete要求

关于zookeeper和zkfc的一些测试的更多相关文章

  1. zookeeper部署及集群测试

    zookeeper部署及集群测试 环境 三台测试机 操作系统: centos7 ; hostname: c1 ; ip: 192.168.1.80 操作系统: centos7 ; hostname: ...

  2. 消息中间件kafka+zookeeper集群部署、测试与应用

    业务系统中,通常会遇到这些场景:A系统向B系统主动推送一个处理请求:A系统向B系统发送一个业务处理请求,因为某些原因(断电.宕机..),B业务系统挂机了,A系统发起的请求处理失败:前端应用并发量过大, ...

  3. zookeeper未授权访问渗透测试及修复方法

    zookeeper未授权访问危害 服务器信息泄露.集群被破坏 一. 四字命令未授权使用 1.1 测试 工具:netcat ,Linux或Windows都可以测 命令行输入echo envi | nc ...

  4. zookeeper windows 入门安装和测试

    一.序言       以下是我对zookeeper 的一些理解:       zookeeper 作为一个服务注册信息存储的管理工具,好吧,这样说得很抽象,我们举个“栗子”. 栗子1号: 假设我是一家 ...

  5. zookeeper集群的python代码测试

    上一篇已经讲解了如何安装zookeeper的python客户端,接下来是我在网上搜到的例子,举例应用环境是: 1.当有两个或者多个服务运行,并且同意时间只有一个服务接受请求(工作),其他服务待命. 2 ...

  6. zookeeper集群的搭建以及hadoop ha的相关配置

    1.环境 centos7 hadoop2.6.5 zookeeper3.4.9 jdk1.8 master作为active主机,data1作为standby备用机,三台机器均作为数据节点,yarn资源 ...

  7. hadoop在zookeeper上的高可用HA

    (参考文章:https://www.linuxprobe.com/hadoop-high-available.html) 一.技术背景 影响HDFS集群不可用主要包括以下两种情况:一是NameNode ...

  8. 分布式服务协调技术zookeeper笔记

    本文主要学习ZooKeeper的体系结构.节点类型.节点监听.常用命令等基础知识,最后还学习了ZooKeeper的高可用集群的搭建与测试.希望能给想快速掌握ZooKeeper的同学有所帮助. ZooK ...

  9. zookeeper节点数与watch的性能测试

    zookeeper中节点数量理论上仅受限于内存,但一个节点下的子节点数量受限于request/response 1M数据 (size of data / number of znodes) zooke ...

随机推荐

  1. IDEA hadoop MapReduce 环境配置

    1.下载,安装,配置好Hadoop 2.在IDEA中执行MapReduc 配置: 这里将JAR包加入: JAR包是:/usr/local2/hadoop/share/hadoop 目录下:直接右边+以 ...

  2. 基于Spark和Tensorflow构建DCN模型进行CTR预测

    实验介绍 数据采用Criteo Display Ads.这个数据一共11G,有13个integer features,26个categorical features. Spark 由于数据比较大,且只 ...

  3. jquery easyui 显示和关闭数据加载的遮罩

    $('#yearReportTable').datagrid('loading');//打开等待div $('#yearReportTable').datagrid('loaded');//关闭等待d ...

  4. Python基础类型(一) int 整型

    Python算术运算符 以下假设变量: a=10,b=20: 运算符 描述 实例 + 加 - 两个对象相加 a + b 输出结果 30 - 减 - 得到负数或是一个数减去另一个数 a - b 输出结果 ...

  5. random模块思维导图

  6. python批量删除文件夹

    制作的python程序跑一次就占200多内存在temp下面,关键是还不释放,最开始都没有发现这个问题,知道自己的c盘越来越小才发现问题所在.所以就有了去删除temp下生成的文件 代码如下: impor ...

  7. RaspberryPi cProfile使用

    使用sudo python -m cProfile -o 1.cprof your.py生成cprof文件 windows下安装snakeviz:pip install -i https://pypi ...

  8. ES6:Generator函数(1)

    Generator函数是ES6提供的一种异步编程解决方案.它会返回一个遍历器对象 function* helloWorldGenerator(){ yield “hello”; yield “worl ...

  9. WordPress主题reBorn最新破解版发布

    今天上班的时候,没事浏览网页! 突然之间发现了这么一个标题,顿时让我产生了兴趣. 标题:WordPress主题reBorn最新破解版发布 不知道什么原因,现在原网址打不开了,可能是作者怕骚扰吧. 其实 ...

  10. Asp.net MVC中文件上传的参数转对象的方法

    参照博友的.NET WebApi上传文件接口(带其他参数)实现文件上传并带参数,当需要多个参数时,不想每次都通过HttpContext.Request.Params去取值,就针对HttpRequest ...