Kafka初识

1、概述

　　　　1.1、Apache Kafka是一个   分布式  流处理   平台；

2、Kafka适应于什么场景？

　　　　2.1、构造  实时  流数据管道，在  系统 或 应用之间  可靠地获取数据（相当于message queue）

　　　　2.2、构建  实时  流式应用程序，对这些流数据进行转换或者影响（流处理，Kafka topic与topic之间内部转换）

3、Kafka如何实现？

　　　　3.1、概念

　　　　　　　　3.1.1、Kafka作为一个集群，运行在一台或多台服务器上；

　　　　　　　　3.1.2、Kafka  通过topic  对  存储的流数据  进行分类；

　　　　　　　　3.1.3、每条记录中包含一个key，一个value，一个timestamp（时间戳）；

　　　　3.2、4个核心API

　　　　　　　　3.2.1、Producer API

　　　　　　　　　　　　　　允许一个应用程序   发布  一串流式 的数据  到  一个或多个Kafka topic；

　　　　　　　　3.2.2、Consumer API

　　　　　　　　　　　　　　允许一个应用程序  订阅  一个或多个topic，并且  对发布给他们的流式数据进行处理；

　　　　　　　　3.2.3、Stream API

　　　　　　　　　　　　　　允许一个应用程序  作为  流处理器；

　　　　　　　　　　　　　　消费  一个或多个topic产生的输入流，然后生产一个输出流到一个或多个topic中去，在输入输出流中进行转换；

　　　　　　　　3.2.4、Connector API

　　　　　　　　　　　　　　允许  构建并运行  可重用的生产者、消费者，将Kafka topics  连接到   已存在的应用程序或数据系统；