zookeeper安装

下载地址:https://www.apache.org/dyn/closer.cgi/zookeeper/
我这里下载的是zookeeper-3.4.13版本,下载后解压在E:\wwg\softWares(安装路径)
1、进入zookeeper的相关设置所在的文件目录,例如本文的:E:\wwg\softWares\zookeeper-3.4.13\conf
2、将"zoo_sample.cfg"重命名为"zoo.cfg"
3、打开zoo.cfg并编辑:将dataDir=/tmp/zookeeper 修改为 dataDir=E:/wwg/softWares/zookeeper-3.4.13/data,注意这里的斜杠需用反斜杠,否则生成data文件夹时会出问题
4、环境配置:
打开电脑的环境变量配置:我的电脑-右击->属性->高级系统设置->环境变量
新建环境变量 :ZOOKEEPER_HOME = E:\wwg\softWares\zookeeper-3.4.13(zookeeper的安装目录)
path下添加 %ZOOKEEPER_HOME%\bin;
5、打开cmd(win+R)窗口 运行
zkserver
回车,结果如下(2181为zookeeper的默认端口,可在zoo.cfg中修改)

6、至此,zookeeper安装成功!

Kafka安装

下载地址:http://kafka.apache.org/downloads
要下载Binary downloads这个类型,不要下载源文件,这种方便使用。下载后,解压放在E:\wwg\softWares(安装路径)目录下
1、进入kafka配置文件所在目录,E:\wwg\softWares\kafka_2.12-2.1.1\config

2、编辑文件"server.properties",找到并编辑:
log.dirs=/tmp/kafka-logs 修改为 log.dirs=E:/wwg/softWares/kafka_2.12-2.1.1/kafka-logs 或者 E:\wwg\softWares\kafka_2.12-2.1.1\kafka-logs (同样这里也需要反斜杠,或者双斜杠进行转义)
3、在server.properties文件中,zookeeper.connect=localhost:2181代表kafka所连接的zookeeper所在的服务器IP以及端口,可根据需要更改。本文在同一台机器上使用,故不用修改。

4、kafka会按照默认配置,在9092端口上运行,并连接zookeeper的默认端口2181。

Kafka运行实例

1、在运行Kafka之前需要先运行zookeeper,即在cmd窗口下运行zkserver命令
2、再打开另外一个cmd窗口,输入
cd /d E:\wwg\softWares\kafka_2.12-2.1.1
跳转到Kafka安装目录下,接着运行命令
.\bin\windows\kafka-server-start.bat .\config\server.properties
启动Kafka,运行结果如下:

至此,Kafka和zookeeper均运行成功,都不要关闭!
3、创建主题,我这里命名为“example” replication-factor=1(因为只有一个kafka服务器在运行)。可根据集群中kafka服务器个数来修改replicationfactor的数量,以便提高系统容错性等。
4、打开新的命令行,输入
cd /d E:\wwg\softWares\kafka_2.12-2.1.1\bin\windows
跳转到windows目录下,接着执行命令
kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic example
运行结果如下

该窗口可以关闭。
5、创建生产者producer和消费者consumer
1)同样打开新的的命令行,执行
cd /d E:\wwg\softWares\kafka_2.12-2.1.1\bin\windows
接着输入
kafka-console-producer.bat --broker-list localhost:9092 --topic example
2)再打开新的命令行窗口,执行
cd /d E:\wwg\softWares\kafka_2.12-2.1.1\bin\windows
接着输入
kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic example --from-beginning
3)在producer窗口中输入你想输入的消息,在consumer窗口中就会显示出来,如图所示

4) kafka运行成功

Kafka安装及使用的更多相关文章

  1. hadoop 之 kafka 安装与 flume -> kafka 整合

    62-kafka 安装 : flume 整合 kafka 一.kafka 安装 1.下载 http://kafka.apache.org/downloads.html 2. 解压 tar -zxvf ...

  2. Kafka安装及部署

    安装及部署 一.环境配置 操作系统:Cent OS 7 Kafka版本:0.9.0.0 Kafka官网下载:请点击 JDK版本:1.7.0_51 SSH Secure Shell版本:XShell 5 ...

  3. [Kafka] - Kafka 安装介绍

    Kafka是由LinkedIn公司开发的,之后贡献给Apache基金会,成为Apache的一个顶级项目,开发语言为Scala.提供了各种不同语言的API,具体参考Kafka的cwiki页面: Kafk ...

  4. Kafka 安装配置 windows 下

    Kafka 安装配置 windows 下 标签(空格分隔): Kafka Kafka 内核部分需要安装jdk, zookeeper. 安装JDK 安装JDK就不需要讲解了,安装完配置下JAVA_HOM ...

  5. kafka安装教程

    今天需要在新机器上安装一个kafka集群,其实kafka我已经装了十个不止了,但是没有一个是为生产考虑的,因此比较汗颜,今天好好地把kafka的安装以及配置梳理一下: 1,kafka版本选取: 现在我 ...

  6. Kafka安装及开启SASL_PLAINTEXT认证(用户名和密码认证)

    前些日子要封装一个kafka的客户端驱动,配置了下kafka环境,发现配置复杂度完爆rabbitmq很多倍啊,而且发布订阅模式使用起来也很麻烦,可能就胜在分布式了吧. kafka需要java环境,自行 ...

  7. Kafka安装与配置(windows)

    作者:灬花儿灬 出处:http://www.cnblogs.com/flower1990/ 本文版权归作者和博客园共有,欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文连接,否则 ...

  8. kafka安装步骤

    kafka 安装内存会报不够 https://stackoverflow.com/questions/9350437/incompatible-initial-and-maximum-heap-siz ...

  9. kafka安装与简单使用

    一.kafka安装 安装是非常简单的,现在推荐安装0.8的版本,这个版本是非常稳定的,而且公司里面也多用此版本. 简单的安装: 这个是我使用的版本,kafka_2.11-0.8.2.2.tgz 直接t ...

  10. kafka系列一、kafka安装及部署、集群搭建

    一.环境准备 操作系统:Cent OS 7 Kafka版本:kafka_2.10 Kafka官网下载:请点击 JDK版本:1.8.0_171 zookeeper-3.4.10 二.kafka安装配置 ...

随机推荐

  1. ASP.NET截取网页注释行之间的内容

    这是网友在论坛问到的问题,网友要求:“我想要抓取每一个<!-- 文字新闻spider begin -->开始<!-- 文字新闻spider end -->      结尾的中间 ...

  2. sql 查询结果作为数据进行添加,where in 子查询

    查询结果作为数据进行添加 INSERT INTO a ( Aid, Atitle, Url, Pic1 ) SELECT c Aid,d Atitle,e Url,f Pic1 FROM b 对于大神 ...

  3. Freemarker出现NullNumberException异常

    Spring Boot项目使用了Freemarker模板引擎. 在ftl文件中使用了一些变量,但是一直出现错误,无法正常渲染页面,反复出现的报错是: freemarker.core.NonNumeri ...

  4. 设计模式之观察者模式(Observer)(4)

    简介 观察者模式(Observer)完美的将观察者和被观察的对象分离开.举个例子,用户界面可以作为一个观察者,业务数据是被观察者,用户界面观察业务数据的变化,发现数据变化后,就显示在界面上.面向对象设 ...

  5. [亲测!超级简单] Centos 安装Python3.6环境

    配置好Python3.6和pip3安装EPEL和IUS软件源 yum install epel-release -y yum install https://centos7.iuscommunity. ...

  6. Can’t connect to local MySQL server through socket的解决方法

    http://www.aiezu.com/db/mysql_cant_connect_through_socket.html mysql,mysqldump,php连接mysql服务常会提示下面错误: ...

  7. 排序算法(10)--Distribution Sorting--分布排序[2]--Radix Sort--基数排序

    1.基本思想 基数排序是通过“分配”和“收集”过程来实现排序 2.实现原理 基数排序(以整形为例),将整形10进制按每位拆分,然后从低位到高位依次比较各个位.主要分为两个过程: (1)分配,先从个位开 ...

  8. postman获取全局

    1.获取token接口时,在test里面输入如下语句 postman.clearGlobalVariable("token"); var jsonData = JSON.parse ...

  9. <Android 基础(三十三)> TabHost ~ 仿微信底部菜单

    简介 Container for a tabbed window view. This object holds two children: a set of tab labels that the ...

  10. Python学习笔记之——requests库

    requests库一个优雅而简单的用于Python的HTTP库,可以极大的简化我们发送http请求及获取响应的代码. requests是python的第三方库,所以使用之前需要先安装. 1.安装之后就 ...