kafka分区选主机制
Kafka Partition Leader选主机制
https://blog.csdn.net/qq_27384769/article/details/80115392
kafka leader选举机制原理
https://blog.csdn.net/yanshu2012/article/details/54894629
kafka分区选主机制
https://blog.csdn.net/lixiang987654321/article/details/99674419
-------------------------------------------------------------------Data highway
zkcli -server lnyfxttap2u.nam.nsroot.net:2181
kafka-topics.bat --describe --zookeeper lnyfxttap2u.nam.nsroot.net:2181 --topic icg-170484-tm.discounting-override-input
C:\Users\lt32806\software\kafka_2.10-0.10.2.1\bin\windows>kafka-topics.bat --describe --zookeeper lnyfxttap2u.nam.nsroot.net:2181 --topic icg-170484-tm.discounting-override-input
Topic:icg-170484-tm.discounting-override-input PartitionCount:4 ReplicationFactor:3 Configs:retention.ms=604800000,min.insync.replicas=2,cleanup.policy=delete,retention.bytes=104857600
Topic: icg-170484-tm.discounting-override-input Partition: 0 Leader: 3 Replicas: 3,6,1 Isr: 6,3,1
Topic: icg-170484-tm.discounting-override-input Partition: 1 Leader: 6 Replicas: 6,1,4 Isr: 6,4,1
Topic: icg-170484-tm.discounting-override-input Partition: 2 Leader: 1 Replicas: 1,4,2 Isr: 4,1,2
Topic: icg-170484-tm.discounting-override-input Partition: 3 Leader: 4 Replicas: 4,2,5 Isr: 4,2,5
get /controller
get /brokers/topics/icg-170484-tm.discounting-override-input/partitions/0/state
[zk: lnyfxttap2u.nam.nsroot.net:2181(CONNECTED) 9] get /brokers/topics/icg-170484-tm.discounting-override-input/partitions/0/state
{"controller_epoch":1785,"leader":3,"version":1,"leader_epoch":68,"isr":[6,3,1]}
cZxid = 0x18400008657
ctime = Fri Aug 30 17:29:54 CST 2019
mZxid = 0x1b5000062e5
mtime = Sat Nov 23 00:53:54 CST 2019
pZxid = 0x18400008657
cversion = 0
dataVersion = 122
aclVersion = 25
ephemeralOwner = 0x0
dataLength = 80
numChildren = 0
kafka分区选主机制的更多相关文章
- 聊聊Zookeeper应用场景、架构设计、选主机制
Zookeeper作为一个分布式协调系统提供了一项基本服务:分布式锁服务,分布式锁是分布式协调技术实现的核心内容.像配置管理.任务分发.组服务.分布式消息队列.分布式通知/协调等,这些应用实际上都是基 ...
- ETCD分布式锁实现选主机制(Golang实现)
ETCD分布式锁实现选主机制(Golang) 为什么要写这篇文章 做架构的时候,涉及到系统的一个功能,有一个服务必须在指定的节点执行,并且需要有个节点来做任务分发,想了半天,那就搞个主节点做这事呗,所 ...
- zookeeper curator选主(Leader)
在分布式系统设计中,选主是一个常见的场景.选主是一个这样的过程,通过选主,主节点被选择出来控制其他节点或者是分配任务. 选主算法要满足的几个特征: 1)各个节点均衡的获得成为主节点的权利,一旦主节点被 ...
- kafka Poll轮询机制与消费者组的重平衡分区策略剖析
注意本文采用最新版本进行Kafka的内核原理剖析,新版本每一个Consumer通过独立的线程,来管理多个Socket连接,即同时与多个broker通信实现消息的并行读取.这就是新版的技术革新.类似于L ...
- kafka 数据一致性-leader,follower机制与zookeeper的区别;
我写了另一篇zookeeper选举机制的,可以参考:zookeeper 负载均衡 核心机制 包含ZAB协议(滴滴,阿里面试) 一.zookeeper 与kafka保持数据一致性的不同点: (1)zoo ...
- Kafka消费与心跳机制
1.概述 最近有同学咨询Kafka的消费和心跳机制,今天笔者将通过这篇博客来逐一介绍这些内容. 2.内容 2.1 Kafka消费 首先,我们来看看消费.Kafka提供了非常简单的消费API,使用者只需 ...
- 【转】跟我学Kafka之NIO通信机制
from:云栖社区 玛德,今天又被人打脸了,小看人,艹,确实,相对比起来,在某些方面差一点,,,,该好好捋捋了,强化下短板,规划下日程,,,引以为耻,铭记于心. 跟我学Kafka之NIO通信机制 ...
- kafka分区及副本在broker的分配
kafka分区及副本在broker的分配 部分内容參考自:http://blog.csdn.net/lizhitao/article/details/41778193 以下以一个Kafka集群中4个B ...
- kafka消息的处理机制(五)
这一篇我们不在是探讨kafka的使用,前面几篇基本讲解了工作中的使用方式,基本api的使用还需要更深入的去钻研,多使用才会有提高.今天主要是探讨一下kafka的消息复制以及消息处理机制. 1. bro ...
随机推荐
- OLTP和OLAP区别详解
Oracle属于OLTP类型,而gp数据库属于OLAP类型的.具体了解如下: 数据库系统一般分为两种类型,一种是面向前台应用的,应用比较简单,但是重吞吐和高并发的OLTP类型:一种是重计算的,对大数据 ...
- WTL之手动编写框架窗口
新版博客已经搭建好了,有问题请访问 htt://www.crazydebug.com 本人是一个实践主义者,不罗嗦上一篇工程搭建好以后,这一篇就开始写代码,写之前再说几句,如果你熟悉MFC分析过MFC ...
- bzoj 3696: 化合物
哦,这个困惑了我好久的东西——生成函数(母函数),(然而拿这个东西去向学文化课的同学装逼并不成功...) 生成函数,就是把原来的加法组合变成乘法的指数加法,那么我们要求的值就是相应的指数的系数的值啦, ...
- Oracle SQL触发器
一.触发器 触发器是一个数据库对象,是一个特殊的过程,当特定的时间发生时隐式地执行.比如在一个表中发生插入.更新或删除的时间,或者 CREATE.ALTER 这样的数据定义语句执行时,触发器会隐式执行 ...
- 一百一十五、脱离SAP本体,通过ActiveX读取SAP表中数据
一.Sap自带有客户端,但是非常之臃肿卡顿,可以利用ActiveX的方式,脱离Sap本体,来读取Sap表中的内容进行插入等操作,非常之方便.代码如下: 二.界面如下,输入好相关内容,点击登录,提示登录 ...
- 3.3. Mapping methods with several source parameters(具有多个源参数的映射方法)
3.3. Mapping methods with several source parameters(具有多个源参数的映射方法) MapStruct 还支持具有多个源参数的映射方法.这是比较实用的, ...
- pop3&smtp
pop3&smtp pop3 Post Office Protocol - Version 3 pop3协议是离线邮件协议,是客户端取邮件用的. 默认监听在TCP:110端口. POP3会话有 ...
- 使用apply调用函数
实现函数 calllt,调用之后满足如下条件1.返回的结果为调用fn之后的结果2.fn的调用为calllt的第一个参数之后的全部参数 方法1 使用es6 function calllt(...para ...
- Day 19:Properties配置文件类、打印流(printStream) 、 编码与解码
Properties(配置文件类): 主要用于生产配置文件与读取配置文件的信息. Properties要注意的细节: 1. 如果配置文件的信息一旦使用了中文,那么在使用store方法生成配置文件的时 ...
- HDU - 4430 Yukari's Birthday(二分+枚举)
题意:已知有n个蜡烛,过生日在蛋糕上摆蜡烛,将蜡烛围成同心圆,每圈个数为ki,蛋糕中心最多可摆一个蜡烛,求圈数r和看,条件为r*k尽可能小的情况下,r尽可能小. 分析:n最大为1012,k最少为2,假 ...