ElasticSearch--一、使用场景以及对应软件配置安装
废话不多说,直接来硬的!我在使用的时候使用的是mysql数据库。
一、ElasticSearch概念和使用场景
1.当我们需要搜索海量数据的时候,就可能会用到。以下使用的场景有哪些呢?
- 搜索海量数据
- 分布式(单点、或多节点使用)
- 全文检索
- 实时快速
- Restful
2.默认端口9200和9300,安装后默认试用双端口下面说区别:
- 9200 端口是ES节点与外部通讯使用的端口。它是http协议的RESTful接口(各种CRUD操作都是走的该端口,如查询:http://localhost:9200/testes/_search)。
- 9300端口是ES节点之间通讯使用的端口。它是tcp通讯端口,集群间和TCPclient都走的它。(java程序中使用ES时,在配置文件中要配置该端口)
3.安装方式elastic官网下载,解压文件夹,点击bin文件夹中的elasticsearch.bat文件
4.中文分词插件
- standard
- simple
- whitespace:
- lauguage
- ik(全拼:elasticsearch-analysis-ik,重点说这个,主要是分词效果比较好)
ik分词器下载地址:https://github.com/medcl/elasticsearch-analysis-ik/tags 版本对应es版本,下载后在解压目录下创建plugins文件夹解压放置 如:D:\elasticsearch\elasticsearch-6.3.2\plugins
二、数据同步工具logstash(elastic官网工具)
简单的说就是利用logstash把数据从mysql同步到es,然后根据业务场景直接从es中查询数据。
开源中间件常见哪些:阿里的mysql-binlog / siddontang / go-mysql-elasticsearch,下面重点说logstash。
- logstash
1.解决哪些问题?
数据同步(全量,增量)
全量:第一次建立后全量同步到es
增量:新增、修改老数据、删除老数据
2.下载地址:elastic官网(对应版本)
3.配置方式
1.把mysql-connector-java.jar文件放进根目录下
2.在安装目录下config文件夹中添加mysql.conf文件。配置如下:
1 input{
2 jdbc {
3 jdbc_driver_library => "D:\\logstash-6.3.2\\logstash-6.3.2\\mysql-connector-java-5.1.8.jar"
4 jdbc_driver_class => "com.mysql.jdbc.Driver"
5 jdbc_connection_string => "jdbc:mysql://127.0.0.1:3306/testes" //此处的testes为创建的索引名称
6 jdbc_user => "testes" //mysql username
7 jdbc_password => "testes" //mysql密码
8 schedule => "* * * * *"
9 clean_run => true
10 statement => "select * from t_blog where update_time > :sql_last_value and update_time < now() order by update_time desc" //此处的sql为同步的sql
11 }
12 }
13
14 output {
15 elasticsearch {
16 hosts => ["127.0.0.1:9200"]
17 index => "testes" //索引名称
18 document_id => "%{id}" //此处不用替换,id默认指的就是表中的id
19 }
20 #stdout {
21 #codec => json_lines
22 #}
23 }
3.在安装目录下bin文件夹下执行cmd命令:
logstash -f ../config/mysql.conf
三、kibana工具(elastic官网工具)
用途查询数据,以及数据可视化分析。(同样也可用postman)
下载地址:elastic官网
使用方法:直接解压,执行目录下bin文件夹kibana.bat文件。默认端口为5601,直接在浏览器输入:localhost:5601
四、检验是否成功
1.首先执行elasticSearch.bat文件,然后执行logstash和kibana.
2.在kibana页面执行
POST /testes/_search
{
}

既成功!!!
ElasticSearch--一、使用场景以及对应软件配置安装的更多相关文章
- ElasticSearch入坑指南之概述及安装
---恢复内容开始--- ElasticSearch入坑指南之概述及安装 了解ElasticSearch ElasticSearch(简称ES)基于Lucene的分布式全文检索引擎.使用ES可以实现近 ...
- elastic-search单机部署以及中文分词IKAnalyzer安装
前提条件 elasticsearch使用版本5.6.3,需要jdk版本1.8,低于该版本不能使用 下载 https://artifacts.elastic.co/downloads/elasticse ...
- ELK 架构之 Elasticsearch、Kibana、Logstash 和 Filebeat 安装配置汇总(6.2.4 版本)
相关文章: ELK 架构之 Elasticsearch 和 Kibana 安装配置 ELK 架构之 Logstash 和 Filebeat 安装配置 ELK 架构之 Logstash 和 Filebe ...
- ElasticSearch入门 第一篇:Windows下安装ElasticSearch
这是ElasticSearch 2.4 版本系列的第一篇: ElasticSearch入门 第一篇:Windows下安装ElasticSearch ElasticSearch入门 第二篇:集群配置 E ...
- Elasticsearch 在 windows 和 ubuntu 下详细安装过程
1. 前言 作为一名 .NET 平台开发者,选择开发框架时总会面临更多的局限性,不过对于搜索这种刚需服务来说,开源框架可供选择的余地还是比较大的.笔者之前用的是 Lucene.net ,现在深感其使用 ...
- Elasticsearch.Net搜索引擎初使用【客户端安装】
下载windows客户端 官方文档地址:https://www.elastic.co/guide/en/elasticsearch/client/net-api/6.x/introduction.ht ...
- 原创 | 手摸手带您学会 Elasticsearch 单机、集群、插件安装(图文教程)
欢迎关注笔者的公众号: 小哈学Java, 每日推送 Java 领域干货文章,关注即免费无套路附送 100G 海量学习.面试资源哟!! 个人网站: https://www.exception.site/ ...
- elasticsearch + kibana + x-pack + logstash_集群部署安装
elasticsearch 部分总体描述: 1.elasticsearch 的概念及特点.概念:elasticsearch 是一个基于 lucene 的搜索服务器.lucene 是全文搜索的一个框架. ...
- 七个生产案例告诉你BATJ为何选择ElasticSearch!应用场景和优势!
本文来源于公众号[胖滚猪学编程],转载请注明出处. 从今天开始,想和你一起死磕ElasticSearch,学习分布式搜索引擎,跟着胖滚猪就对了! 既然是ES的第一课,那么最重要的是让你爱上它!不想说那 ...
随机推荐
- PyQt(Python+Qt)学习随笔:Designer中不能编辑信号和槽的问题
新建了一个窗口部件,在窗口上添加了相关布局,再设置窗口窗口的布局为垂直布局,窗口设计好界面后如图所示: 可以看到窗口是QWidget类,窗口上从上到下有三个布局,窗口自身的布局为垂直布局,布局名为ve ...
- bugkuctf 这 是 一 个 神 奇 的 登 录 界 面
首先结合源码可以看出这是一道sql注入题. 然后开始萌新的日常操作,尝试单引号闭合,可是并没有用,而且因为单引号注入的题太多,导致并没有立刻开始尝试双引号,之后想起双引号(对,双引号木得牌面)得到如下 ...
- 性能测试基础——(MEN)
关于内存在一块其实我并不是很想拿出来说,一般情况下内存这一块都是可优化的,可以通过硬件资源或者调整一些系统或者应用系统的参数配置来进行优化. 很多同僚问到了"内存泄漏"和" ...
- LeetCode初级算法之数组:1 两数之和
两数之和 题目地址:https://leetcode-cn.com/problems/two-sum/ 给定一个整数数组 nums 和一个目标值 target,请你在该数组中找出和为目标值的那 两个整 ...
- 【学习笔记】最小直径生成树(MDST)
简介 无向图中某一点(可以在顶点上或边上),这个点到所有点的最短距离的最大值最小,那么这个点就是 图的绝对中心. 无向图所有生成树中,直径最小的一个,被称为 最小直径生成树. 图的绝对中心的求法 下文 ...
- Rest vs Soap 比较
一.前言 昨天为止,政府的一个公共部门的项目顺利结束,就系统间消息传输这个点,知识点总结一下.本文主要参考octoperf的文章,链接见文末参考资料. 系统中用到的是SOAP协议进行传输数据,有人会立 ...
- 解决Linux所有命令不能使用的问题
解决Linux所有命令不能使用的问题 出现这个问题说明你的 /etc/profile 配置出现了问题,一般是因为path配置出现了问题.排除添加内容中的错误,然后重启一个新窗口执行执行 source ...
- js上 二.JavaScript基本语法
1.JavaScript词法结构 所谓词法结构是指一套基础性规则,用来描述如何使用这门语言来编写程序,包括如下几项: ü 字符集unicode ü 区分大小写 (true和TRUE) ü 忽略空白字符 ...
- [打基础]luogu1957口算练习题——字符串基本操作
题意:第一行给出数据组数n,之后n行每行给出三个或两个数据,若给三个数据,则第一个数据用单个字符a/b/c分别表示+/-/*运算,后两个数表示参与运算的数字,若给两个数据延续之前的运算 要求对每行数据 ...
- 前端Firebug常见错误:SyntaxError:missing variable nam
出现上面那个问题应该是 某个地方,分号写错了 检查一下是否由于应该写分号的地方写成了其他符号.