ELK 基本搭建

ELK是一套日志分析系统：

开发人员不能登录线上服务器查看详细日志
各个系统都有日志，日志数据分散难以查找
日志数据量大，查询速度慢，或者数据不够实时
一个调用会设计多个系统，难以在这些系统的日志中快速定位数据

好了 下面这套日志系统 可以解决吗

一.elk套件介绍

ELK 由 ElasticSearch 、 Logstash 和 Kiabana 三个开源工具组成。官方网站： https://www.elastic.co/products

Elasticsearch 是个开源分布式搜索引擎，它的特点有：分布式，零配置，自动发现，索引自动分片，索引副本机制， restful 风格接口，多数据源，自动搜索负载等。

Logstash 是一个完全开源的工具，他可以对你的日志进行收集、分析，并将其存储供以后使用（如，搜索）。

kibana 也是一个开源和免费的工具，他 Kibana 可以为 Logstash 和 ElasticSearch 提供的日志分析友好的 Web 界面，可以帮助您汇总、分析和搜索重要数据日志。

二 系统基本设置

1 更改主机名

[root@elasticsearch1 ~]# hostname elasticsearch1

2 关闭防火墙及Selinux（两台同样执行）

[root@elasticsearch1 ~]# service iptables stop
[root@elasticsearch1 ~]# cat /etc/selinux/config

　　　　SELINUX=disabled

三 部署流程

1，查看系统内核信息

[root@elasticsearch1 ~]# cat /etc/redhat-release
　　CentOS release 6.6 (Final)
[root@elasticsearch1 ~]# uname -r
　　2.6.32-504.el6.x86_64

2 安装依赖jdk

根据版本需求选择jdk版本  我们这边安装的是elastic2.4.2的版本  jdk我们选择1.8.111

jdk-8u111-linux-x64.gz

#上传jdk到/usr/local/src
# cd /usr/local/src
# tar zxf jdk-8u111-linux-x64.gz -C /usr/local/
# ln -s /usr/local/jdk1.8.0_111 /usr/local/jdk

　#vi /etc/profile

　#加入以下几行

　　export JAVA_HOME=/usr/local/jdk

　　export CLASSPATH=$JAVA_HOME/lib

　　export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$PATH

# source /etc/profile

　#查看版本号

　　# java -version

'java version "1.8.0_111"
Java(TM) SE Runtime Environment (build 1.8.0_111-b14)
Java HotSpot(TM) 64-Bit Server VM (build 25.111-b14, mixed mode)

　　

3 Elastic安装（解压就可以直接用了）

# tar zxf elasticsearch-.tar.gz -C /usr/local/

由于2.4版本 不能使用root用户启动 我们需要创建普通用户

# groupadd es
# useradd -r -g es -s /bin/bash es
# chown -hR es:es /usr/local/elasticsearch-/

4 启动服务

#cd /usr/local/elasticsearch-/bin
#./elasticsearch

注1 ：后台启动方法：bin/elasticsearch -d

注2 :  这里绑定了两个端口

               9200：默认的Http端口，用于Restful API的调用

               9300：默认TCP端口，用户ES Node 之间的通讯，以及TCP 基本调用 Restful API ， Java API TransportClient 需要连接该端口才能访问

注3：默认绑定127.0.0.1 本机访问，

               远程访问需修改 ${ES_HOME}/config/elasticsearch.yml 的 network.host绑定指定的IP

更改配置文件

#vim /usr/local/elasticsearch-/config/elasticsearch.yml
network.host: 0.0.0.0

后台启动

#./elasticsearch -d

5 测试访问

http://192.168.56.11:9200/
{
  "name" : "Victorius",
  "cluster_name" : "elasticsearch",
  "cluster_uuid" : "53q0quijTji0LhVYGvXHog",
  "version" : {
    "number" : "2.4.2",
    "build_hash" : "161c65a337d4b422ac0c805f284565cf2014bb84",
    "build_timestamp" : "2016-11-17T11:51:03Z",
    "build_snapshot" : false,
    "lucene_version" : "5.5.2"
  },
  "tagline" : "You Know, for Search"
}