logstash-配置文件详解

 

• kafka  将 kafka topic 中的数据读取为事件
   

  kafka{

  bootstrap_servers=> "kafka01:9092,kafka02:9092,kafka03:9092"

  topics => ["access_log"]

  group_id => "logstash-file"

  codec => "json"

  }

  kafka{

  bootstrap_servers=> "kafka01:9092,kafka02:9092,kafka03:9092"

  topics => ["weixin_log","user_log"]

  codec => "json"

  }

  # bootstrap_servers 用于建立群集初始连接的Kafka实例的URL列表。

  # topics 要订阅的主题列表，kafka topics

  # group_id 消费者所属组的标识符，默认为logstash。kafka中一个主题的消息将通过相同的方式分发到Logstash的group_id

  # codec 通用选项，用于输入数据的编解码器。