安装kafka过程及出现的问题解决
第一步:下载kafka安装包
下载地址:http://kafka.apache.org/downloads

解压 到/usr/local 目录
tar -zxvf kafka_2.12-2.2.0
第二步 下载zookeerper(之所以下载 是因为我使用kafka自带的 会出错)
下载地址:http://zookeeper.apache.org/
第三布:安装 zookeerper
解压 tar -zxvf zookeeper-3.4.13
编辑 conf 下的zoo_sample.cfg 文件
dataDir=/usr/local/zookeeper_data
在 /usr/local 目录下创建zookeeper_data目录
授权 chmod 755 zookeeper_data
将zoo_sample.cfg 重命名 zoo_cfg 不然启动会出错
mv zoo_sample.cfg zoo_cfg
第四步: 启动 zookeerper
bin/zkServer.sh start
查看 启动状态
bin/zkServer.sh status

单机启动
这个时候用window dos命令 telnet 该服务器 2181 端口 会发现已经通了
第五步:安装 kafka
编辑 kafka目录下config文件夹下的server.properties
advertised.listeners 替换为你服务器ip

注意 listeners=PLAINTEXT://localhost:9092 不要修改为你服务器ip 会启动出错
第六步:启动 kafka
由于之前已经启动了zookeeper 所以这个时候启动kafka 时不会再使用kafka自带的zookeeper
启动:bin/kafka-server-start.sh config/server.properties &
一般都会成功!
测试:
打开两个Xshell 端口
一个发送消息:bin/kafka-console-producer.sh --broke-list 47.110.46.94:9092 --topic test

另一个接受消息:bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning

.............................................................................................................................................................
按照过程中出现的问题
本来安装给kafka是件很简单是事情,如果过程中出现一个错误,可能就会浪费你半天甚至一天时间去百度解决,如果找不到答案会很失望。
1、刚开始安装kafka 直接启动 bin/kafka-server-start.sh config/server.properties & 发现2181 这个端口连接不上
在本地window dos命令行用telnet 不通,使用netstat -nltup查看监听状态 发现没有服务监听2181 端口
于是重新去官网下载zookeeper 然后启动zookeeper 这个时候才telnet 通,接下来启动kafka 就顺利启动了。
2、在另一端运行命令bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic test --from-beginning 时候发生错误
consumer zookeeper is not a recognized option
--zookeeper是一个过时的启动方法
正确的启动方式:bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning
安装kafka过程及出现的问题解决的更多相关文章
- CDH安装kafka
摘要:前言其实cloudera已经做了这个事了,只是把kafka的包和cdh的parcel包分离了,只要我们把分离开的kafka的服务描述jar包和服务parcel包下载了,就可以实现完美集成了.具体 ...
- [python] 安装numpy+scipy+matlotlib+scikit-learn及问题解决
这篇文章主要讲述Python如何安装Numpy.Scipy.Matlotlib.Scikit-learn等库的过程及遇到的问题解决方法.最近安装这个真是一把泪啊,各种不兼容问题和报错,希望文章对你有所 ...
- 在Linux下安装PHP过程中,编译时出现错误的解决办法
在Linux下安装PHP过程中,编译时出现configure: error: libjpeg.(a|so) not found 错误的解决办法 configure: error: libjpeg.(a ...
- CentOS 安装 kafka
首先确保JDK已正确安装并设置好环境变量 安装Zookeeper 到官网下载: https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/ zooke ...
- mac环境下使用brew安装kafka
1.安装kafka brew install kafka note: ·kafka使用zookeeper管理,安装过程会自动安装zookeeper ·安装目录:/usr/local/Cellar/ka ...
- linux上安装Kafka
写个一篇kafka文章了.但是那都是针对性能来说的,下面看一下完整的,kafka步骤: 安装单机三个 Broker 的 Kafka 集群,使用 Kafka 集群发布和接收消息.学完本课程,对 Kafk ...
- Window上安装kafka
kafka在windows上的安装.运行 - 进阶者ryan-su - CSDN博客 https://blog.csdn.net/u010283894/article/details/77106159 ...
- helm安装kafka集群并测试其高可用性
介绍 Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写.Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者在网站中的所有动作流数据. 这种动作( ...
- 最详细的linux安装php过程
本文主要和大家分享最详细的linux安装php过程,然后写好了nginx的安装配置,后面就是php的安装和mysql的安装,不过时间有限,而且放篇里也太长,所以都是分开来写,php安装完毕后就是mys ...
随机推荐
- [JSOI2009]密码 [AC自动机]
题面 bzoj luogu 首先看到这题就知道随便暴枚 只要是多项式算法都能过 先常规建AC自动机 注意被别的单词包含的单词没有存在的价值 剩余单词状压 大力dp f[长度][节点编号][状态] \( ...
- 用CNN对CIFAR10进行分类(pytorch)
CIFAR10有60000个\(32*32\)大小的有颜色的图像,一共10种类别,每种类别有6000个. 训练集一共50000个图像,测试集一共10000个图像. 先载入数据集 import nump ...
- CF802C Heidi and Library (hard)
题目描述 你有一个容量为k的空书架,现在共有n个请求,每个请求给定一本书ai,如果你的书架里没有这本书,你就必须以ci的价格购买这本书放入书架.当然,你可以在任何时候丢掉书架里的某本书.请求出完成这n ...
- 观察者模式 vs 发布-订阅模式
我曾经在面试中被问道,_“观察者模式和发布订阅模式的有什么区别?” _我迅速回忆起“Head First设计模式”那本书: 发布 + 订阅 = 观察者模式 “我知道了,我知道了,别想骗我” 我微笑着回 ...
- JS绑定带参数的事件总要执行一次方法,如何避免?
类似这样:function aa(vote){alert(vote);}$(".btnn").bind("click",aa(1)});没有点击就开始执行了.怎 ...
- Exp4 恶意代码分析
一.原理与实践说明 1. 实践目标 1.1 监控你自己系统的运行状态,看有没有可疑的程序在运行. 1.2 分析一个恶意软件,就分析Exp2或Exp3中生成后门软件:分析工具尽量使用原生指令或sysin ...
- 【Unity游戏开发】你真的了解UGUI中的IPointerClickHandler吗?
一.引子 马三在最近的开发工作中遇到了一个比较有意思的bug:“TableViewCell上面的某些自定义UI组件不能响应点击事件,并且它的父容器TableView也不能响应点击事件,但是TableV ...
- HBase RowKey与索引设计
1. HBase的存储形式 hbase的内部使用KeyValue的形式存储,其key时rowKey:family:column:logTime,value是其存储的内容. 其在region内大多以升序 ...
- 11GR2 Oracle数据库的远程投毒VNCR方式修复
[环境介绍] 系统环境:Solaris + Oracle 11GR2 + 单机/RAC [背景描述] 基于集团数据库安全检查项,需要数据库的远程投毒漏洞进行修复. 根据Oracle官方提供的修复文 ...
- jpa Auditor 自动赋值与自定义 @CreatedBy @LastModifiedBy @CreatedDate @LastModifiedDate
在spring jpa audit 中,在字段或者方法上使用注解@CreatedDate.@CreatedBy.@LastModifiedDate.@LastModifiedBy,当进行实体插入或者更 ...