安装kafka过程及出现的问题解决
第一步:下载kafka安装包
下载地址:http://kafka.apache.org/downloads
解压 到/usr/local 目录
tar -zxvf kafka_2.12-2.2.0
第二步 下载zookeerper(之所以下载 是因为我使用kafka自带的 会出错)
下载地址:http://zookeeper.apache.org/
第三布:安装 zookeerper
解压 tar -zxvf zookeeper-3.4.13
编辑 conf 下的zoo_sample.cfg 文件
dataDir=/usr/local/zookeeper_data
在 /usr/local 目录下创建zookeeper_data目录
授权 chmod 755 zookeeper_data
将zoo_sample.cfg 重命名 zoo_cfg 不然启动会出错
mv zoo_sample.cfg zoo_cfg
第四步: 启动 zookeerper
bin/zkServer.sh start
查看 启动状态
bin/zkServer.sh status
单机启动
这个时候用window dos命令 telnet 该服务器 2181 端口 会发现已经通了
第五步:安装 kafka
编辑 kafka目录下config文件夹下的server.properties
advertised.listeners 替换为你服务器ip
注意 listeners=PLAINTEXT://localhost:9092 不要修改为你服务器ip 会启动出错
第六步:启动 kafka
由于之前已经启动了zookeeper 所以这个时候启动kafka 时不会再使用kafka自带的zookeeper
启动:bin/kafka-server-start.sh config/server.properties &
一般都会成功!
测试:
打开两个Xshell 端口
一个发送消息:bin/kafka-console-producer.sh --broke-list 47.110.46.94:9092 --topic test
另一个接受消息:bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning
.............................................................................................................................................................
按照过程中出现的问题
本来安装给kafka是件很简单是事情,如果过程中出现一个错误,可能就会浪费你半天甚至一天时间去百度解决,如果找不到答案会很失望。
1、刚开始安装kafka 直接启动 bin/kafka-server-start.sh config/server.properties & 发现2181 这个端口连接不上
在本地window dos命令行用telnet 不通,使用netstat -nltup查看监听状态 发现没有服务监听2181 端口
于是重新去官网下载zookeeper 然后启动zookeeper 这个时候才telnet 通,接下来启动kafka 就顺利启动了。
2、在另一端运行命令bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic test --from-beginning 时候发生错误
consumer zookeeper is not a recognized option
--zookeeper是一个过时的启动方法
正确的启动方式:bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning
安装kafka过程及出现的问题解决的更多相关文章
- CDH安装kafka
摘要:前言其实cloudera已经做了这个事了,只是把kafka的包和cdh的parcel包分离了,只要我们把分离开的kafka的服务描述jar包和服务parcel包下载了,就可以实现完美集成了.具体 ...
- [python] 安装numpy+scipy+matlotlib+scikit-learn及问题解决
这篇文章主要讲述Python如何安装Numpy.Scipy.Matlotlib.Scikit-learn等库的过程及遇到的问题解决方法.最近安装这个真是一把泪啊,各种不兼容问题和报错,希望文章对你有所 ...
- 在Linux下安装PHP过程中,编译时出现错误的解决办法
在Linux下安装PHP过程中,编译时出现configure: error: libjpeg.(a|so) not found 错误的解决办法 configure: error: libjpeg.(a ...
- CentOS 安装 kafka
首先确保JDK已正确安装并设置好环境变量 安装Zookeeper 到官网下载: https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/ zooke ...
- mac环境下使用brew安装kafka
1.安装kafka brew install kafka note: ·kafka使用zookeeper管理,安装过程会自动安装zookeeper ·安装目录:/usr/local/Cellar/ka ...
- linux上安装Kafka
写个一篇kafka文章了.但是那都是针对性能来说的,下面看一下完整的,kafka步骤: 安装单机三个 Broker 的 Kafka 集群,使用 Kafka 集群发布和接收消息.学完本课程,对 Kafk ...
- Window上安装kafka
kafka在windows上的安装.运行 - 进阶者ryan-su - CSDN博客 https://blog.csdn.net/u010283894/article/details/77106159 ...
- helm安装kafka集群并测试其高可用性
介绍 Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写.Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者在网站中的所有动作流数据. 这种动作( ...
- 最详细的linux安装php过程
本文主要和大家分享最详细的linux安装php过程,然后写好了nginx的安装配置,后面就是php的安装和mysql的安装,不过时间有限,而且放篇里也太长,所以都是分开来写,php安装完毕后就是mys ...
随机推荐
- 在windows环境利用celery实现简单的任务队列
测试使用环境: 1.Python==3.6.1 2.MongoDB==3.6.2 3.celery==4.1.1 4.eventlet==0.23.0 Celery分为3个部分 (1)worker部分 ...
- Url校验正则
最近需要对HTTP请求合法性做一些校验,在网上查找了一些关于URL合法性的正则表达式. 在github上的有个关于weburl匹配的gist: https://gist.github.com/dper ...
- vue.js 列表追加项写法
<ul id="app"> <template v-for="site in sites"> <li>{{ site.nam ...
- 2017年末大总结(by一个软件开发实习生)
时间本是一条连续不断的河流,我们却生造出了一些有头有尾的节点,不知道是不是为了增加一点仪式感呢. 今年最大的变化就是学会了java并找到一份了实习,很幸运能进入这个行业,做一份热爱的工作.从开始自学编 ...
- Python中布尔值是False的所有值
在python中以下都是False:为0的,空集合,空字符串,空值None >>> bool(0) False >>> bool(-0) False >> ...
- Linux-yum只下载不安装
通过yum命令只下载rpm包不安装 经常遇到服务器没有网络的情况下部署环境,或者创建自己的 yum 仓库等.每次都是在网上搜搜搜,都是五花八门,自己整理了下自己用到的以下三种方式,这里没有太多废话,只 ...
- 20165223《网络对抗技术》Exp0 Kali的安装
(1)安装步骤 Kali官网,下载Kali Linux 64 bit版本,按照网上安装教程进行即可 我是直接拷贝了Kali的.vmx文件(Linux 64bit),在上学期已经安装好的VMware中可 ...
- 解决php -v查看到版本与phpinfo()版本不一致问题
安装p7后发现phpinfo的版本是7.2.12,而php -v查看的却是5.4.16 应该是php.ini的配置文件有问题. 查看文件,有两个 查看cli执行的文件是哪一个? 再查看phpinfo用 ...
- python全栈开发中级班全程笔记(第二模块、第四章)(常用模块导入)
python全栈开发笔记第二模块 第四章 :常用模块(第二部分) 一.os 模块的 详解 1.os.getcwd() :得到当前工作目录,即当前python解释器所在目录路径 impor ...
- SQL随记(六)
1.关于dbms_sql包的一些执行语句 cursor_name := DBMS_SQL.OPEN_CURSOR; --打开游标: DBMS_SQL.PARSE(cursor_name, var_dd ...