es 下载地址:wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.1.0-linux-x86_64.tar.gz kibana下载地址:wget https://artifacts.elastic.co/downloads/kibana/kibana-7.1.0-linux-x86_64.tar.gz logstash下载地址: wget https://artifacts.elastic.co/d…

Hbase单机安装部署 http://blogxinxiucan.sh1.newtouch.com/2017/07/27/Hbase单机安装部署/ 下载Hbase Hbase官网下载地址 http://www.apache.org/dyn/closer.cgi/hbase/ 解压 tar -zvxf hbase-0.94.27.tar.gz cd hbase-0.94.27 配置 cd conf/ vi hbase-site.xml <configuration> <property&g…

Elk日志安装文档 需要用到有三个软件包 和redis 分布式部署:已上图就是分布式部署的架构图 Logstash :    是部署在前台的应用上,收集数据的 和部署在redis和elasticsearch中间充当索引 Elasticsearch: 部署在logstash之后的,将logsstash收集的数据存储 Kibana     : 部署在最后,经elasticsearch收集的数据通过页面展现出来(默认端口号:5601) 我这里部署的logstash  elasticsearch   k…

一.前言 ​ 日志主要包括系统日志和应用程序日志,运维和开发人员可以通过日志了解服务器中软硬件的信息,检查应用程序或系统的故障,了解故障出现的原因,以便解决问题.分析日志可以更清楚的了解服务器的状态和系统安全状况,从而可以维护服务器稳定运行. ​ 但是日志通常都是存储在各自的服务器中.如果管理数十台服务器, 查阅日志需要依次登陆不同的服务器,查看过程就会很繁琐从而导致工作效率低下.虽然可以使用 rsyslog 服务将日志汇总.但是统计一些日志中的数据或者检索也是很麻烦的,一般使用grep.awk…

技术交流群:233513714 这几天研究了kafka的安装及使用,在网上找了很多教程但是均以失败告终,直到最后想起网络方面的问题最终才安装部署成功,下面就介绍一下kafka的安装部署及代码实现 一.关闭防火墙 重要的事情说100遍,关闭防火墙...(如果不关闭防火墙就会出现Exception in thread "main" kafka.common.FailedToSendMessageException: Failed to send messages after 3 tries…

一.ELK 背景 通常,日志被分散的储存不同的设备上.如果你管理数十上百台服务器,你还在使用依次登录每台机器的传统方法查阅日志.这样是不是感觉很繁琐和效率低下.当务之急我们使用集中化的日志管理,例如:ELK中的logstash,将所有服务器上的日志收集汇总. 集中化管理日志后,日志的统计和检索又成为一件比较麻烦的事情,一般我们使用grep.awk和wc等Linux命令能实现检索和统计,但是对于要求更高的查询.排序和统计等要求和庞大的机器数量依然使用这样的方法难免有点力不从心,这里我们使用ELK中…

在上篇博客中简单介绍了Zookeeper的特点和应用场景,详情可参考:<Zookeeper简介(一)>,那么这篇博客我们介绍一下关于Zookeeper的单机模式安装步骤与配置. 环境准备 (1)操作系统 笔者的操作环境基于CentOS系统来进行操作,Linux环境是在VMware Workstation中搭建的虚拟机系统. (2)Java环境 Zookeeper是在Java运行环境下运行,确保在JDK1.6及以上版本,笔者使用JDK1.7. JDK安装 由于笔者完全从一个新的虚拟机开始搭建环境…

系统环境: Ubuntu 16.04.2 LTS 软件环境: Docker 1.12.6 Go 1.8.3 Etcd 3.1.8 Flannel 0.7.1 Kubernetes master 1.7.0-alpha 安装步骤: 1 安装Docker 1) apt-get update 2) apt-get upgrade 3) apt-get install docker.io 4) service docker restart 5) docker run hello-world 6) doc…

环境:ubuntu 14.04 server 64版本 hadoop 2.5.1 jdk 1.6 部署的步骤主要参考了http://blog.csdn.net/greensurfer/article/details/39450369这篇文章. 1 安装java,配置好环境变量 JAVA_HOME CLASSPATH 具体步骤参考网上linux安装jdk 2 配置信任关系 ssh-keygen 一直回车就好了 然后将~/.ssh/id_rsa.pub文件拷贝到需要无密码登录的机器用户下 是在不会,…

1.下载: redis-4.0.8.tar.gz,存放至/data/tools下,解压: # wget http://download.redis.io/releases/redis-4.0.8.tar.gz # tar -zxvf redis-4.0.8.tar.gz 2.安装:进入解压后的文件夹redis-4.0.8.tar.gz下,安装Redis: # cd redis-4.0.8 # make && install 3.安装完成后,修改/root/tools/redis-4.0.8…