连续加班近一个多月,项目终于告一段落了,也腾出时间写一写项目中用到的东西。在这个项目中,我负责的主要是多种业务场景下的数据查询和搜索,其中搜索用到了ElasticSearch搜索引擎。下面主要围绕ElasticSearch的安装、项目中的使用方式以及踩过的一些坑进行总结。(本博客主要针对ElasticSearch的使用,对一些原理不做过多解释)

1.ElasticSearch是什么

  ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口。说的通俗一点,就是是一个比较好、用起来也比较方便的搜索服务器。一般项目中如果用到关键字搜索,就可以将数据存入到ElasticSearch,搜索效率比较高。(下面ElasticSearch简称ES)

  在关系型数据库中,一般有数据库、表、行、和列的概念。在ES中有:  

    索引index(类似于数据库)

    类型type(类似于表的概念,在ES7之后,就没有了type)、

    document(类似于一行记录)

    feild字段,每个document的内容都是一些字段及对应的值。(字段相当于数据库的列)

  对于存入ES的数据,ES会进行分词(字段是否分词,采用什么分词器分词在添加映射的时候——也就是创建type结构的时候指定)。

2.ElasticSearch安装

  首先说明:

    在安装ES的时候,首先强调一点,ES启动的时候不能使用root用户启动,如果拿root用户启动失败了,则删除logs目录,在重新切换到普通用户启动即可。下面会强调这个问题。

      此外,ES是Java开发的时候,所以安装ES之前,需要先安装JDK。

  (1)下载安装包

  在官网下载ES的安装包:https://www.elastic.co/downloads/elasticsearch

  将安装包放在linux下的一个目录下进行解压,我选择的是opt目录:

  tar -zxvf elasticsearch-7.0.0-linux-x86_64.tar.gz

  cd elasticsearch-7.0.0

  cd config

  (2)编辑config目录下的elasticsearch.yml

  修改以下几个选项:

  cluster.name: study-es

  node.name:  node01

  network.host: 192.168.1.8

  http.port: 9200

  discovery.zen.ping.timeout:120s #设置集群中自动发现其他节点时ping连接的超时时间

  discovery.zen.ping.multicast.enabled:false #设置是否打开多播发现节点

  discovery.zen.ping.unicast.hosts:["192.168.1.8:9200","192.168.1.9:9200","192.168.1.10:9200"]

  (3)将配置分发到其他节点.

  scp -r elasticsearch-7.0.0/ root@192.168.1.9:`pwd`

  scp -r elasticsearch-7.0.0/ root@192.168.1.10:`pwd`

  分发之后,去对应的节点修改个别配置

  (4)普通用户启动es

  如果是root用户对ES进行的安装和配置,那么切换到普通用户启动ES一般没有权限,所以需要将ES相关的文件给普通用户授权。

  • ll命令查看ES,结果如下:

  

    它和它下面的文件夹和目录都属于root用户和root用户组。

  • 在root登录的情况下改变es文件夹和它下面的文件的属主和属组,以便普通用户有执行权限

    我的linux上有test用户,test用户也属于test用户组。

    chown -R test:test elasticsearch-7.0.0/

  ll命令查看:

su test  //切换到test用户
cd bin
./elasticsearch

  在浏览器查看,输入地址192.168.1.8:9200

3.中文分词插件的安装

  下载分词zip包,如果下载源码包还需要自己安装,下载地址:https://github.com/medcl/elasticsearch-analysis-ik/releases

  (1)进入elasticsearch安装目录下的plugins目录,创建ik目录

cd elasticsearch-7.0.0/plugins/
mkdir ik

  (2)解压分词包,并拷贝到ik目录下

unzip elasticsearch-analysis-ik-7.0..zip  #解压出来的目录叫elasticsearch
cd elasticsearch #进入刚刚解压出来的elasticsearch目录
cp -r ./* /opt/elasticsearch-7.0.0/plugins/ik/ #拷贝当前目录所有子目录和文件到elasticsearch的ik目录下

  (3)重新启动ES

  分词器安装可参考链接:https://www.jianshu.com/p/1c4d489f18fe

ES安装先说到这。后面会对 ElasticSearch的使用(包括restful api 、Java API、ElasticSearch-Sql)以及踩过的一些坑进行总结。这些坑包括下面几个问题,暂时只想起来这么多:

  搜索时的大小写问题

  wildcard模糊查询:*和?

  sql语句的and or 等的优先级问题

  post请求中文查询乱码问题

  分页查询的时候,如果页数特别大,查询效率会很低的问题

ElasticSearch从不懂到会用1—安装篇的更多相关文章

  1. WordPress安装篇(1):使用PHPStudy安装WordPress

    我是"小白",既不会编程也不懂CSS能自己搭建网站吗?可以的!只要你会用鼠标,懂打字就能搭建出属于你自己的网站.要怎么样才能做到昵?让我们一起来看看如何实现的吧.在Windows环 ...

  2. k8s入门系列之扩展组件(一)DNS安装篇

    DNS (domain name system),提供域名解析服务,解决了难于记忆的IP地址问题,以更人性可读可记忆可标识的方式映射对应IP地址. Cluster DNS扩展插件用于支持k8s集群系统 ...

  3. 【elasticsearch】(3)centos7 安装中文分词插件elasticsearch-analyzer-ik

    前言 elasticsearch(下面简称ES,安装ES点击这里)的自带standard分词只能把汉语分割成一个个字,而不能分词.分段,这就是我们需要分析器ik的地方了. 一.下载ik的相应版本 查看 ...

  4. Linux负载均衡软件LVS之二(安装篇)[转]

    Linux负载均衡软件LVS之二(安装篇) 2011-04-26 16:01:47 标签:lvs安装配置 linux lvs 休闲 linux高可用 原创作品,允许转载,转载时请务必以超链接形式标明文 ...

  5. 开源文档管理系统LogicalDOC测试报告---安装篇

    开源文档管理系统LogicalDOC测试报告---安装篇 分类: Linux2011-06-22 15:40 7436人阅读 评论(3) 收藏 举报 文档管理测试mysql数据库installerja ...

  6. MongoDB安装篇-Win7 X64

    介绍 MongoDB是一个基于分布式文件存储的数据库.由C++语言编写.旨在为WEB应用提供可扩展的高性能数据存储解决方案. MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库 ...

  7. Flow简易教程——安装篇

    .mydoc_h1{ margin: 0 0 1em; } .mydoc_h1_a{ color: #2c3e50; text-decoration: none; font-size: 2em; } ...

  8. Ubuntu 16.04 RabbitMq 安装与运行(安装篇)

    Ubuntu 16.04 RabbitMq 安装与运行(安装篇) 2018年08月15日 15:05:24 我跟吴彦祖四六开 阅读数:1966   前言 目前公司用阿里云 + redis 的方式实现的 ...

  9. Elastic 安装篇(1)

    1.Elasticsearch下载安装 https://www.elastic.co/cn/downloads/elasticsearch 解压: 2.安装head https://github.co ...

随机推荐

  1. 【eclipse】解决:eclipse或STS运行maven工程出现Missing artifact jdk.tools:jdk.tools:jar:1.7问题

    eclipse或STS运行maven工程出现Missing artifact jdk.tools:jdk.tools:jar:1.7问题 最近项目中使用到大数据平台,代码中应用了hbase-clien ...

  2. 【GDOI2017 day1】取石子游戏 线段树+区间合并

    题面 如果给你一棵有根树,树根为 1,并且树的每个结点上有一个权值,现在我想知道每个点,除它所在子树以外的结点权值集合的 mex,怎么做呢? 在这里,mex 是定义在集合上的函数,mex(S) 表示 ...

  3. hive拉链表取数

    例如,一个借款用户在hive上的拉链表.(end_dt存放逻辑与普通介绍的拉链表不一致) 需要拉去它在2019-05-01日的状态, 取数逻辑是: select * from tb where sta ...

  4. Ubuntu查找通过apt命令已安装软件

    方法一 apt list --installed 方法二 dpkg -l

  5. Duplicate a whole line in Vim

    yy or Y to copy the line or dd to delete (cutting) the line then p to paste the copied or deleted te ...

  6. PHPCMS快速建站系列之getcache()的用法

    /** * 读取缓存,默认为文件缓存,不加载缓存配置. * @param string $name 缓存名称 * @param $filepath 数据路径(模块名称) caches/cache_$f ...

  7. dingo/api 使用 知识

    Dingo 能为Laravel提供一整套包括从路由,到认证的RESTful API开发工具 Laravel & Lumen RESTFul API 扩展包:Dingo API(一) —— 安装 ...

  8. V8引擎实现标准ECMA-262(三)

    推荐英文原址ECMA-262 3.构造函数 构造函数除了通过指定的模式创建对象以外,还有另外一个好处--它能够自动设置新创建对象的原型对象,这个原型对象存储在构造函数的Prototype属性中. 例如 ...

  9. 一.JDBC学习入门

    一.JDBC相关概念介绍 1.1.数据库驱动 这里的驱动的概念和平时听到的那种驱动的概念是一样的,比如平时购买的声卡,网卡直接插到计算机上面是不能用的,必须要安装相应的驱动程序之后才能够使用声卡和网卡 ...

  10. 【风马一族_php】NO2_php基础知识

    原文来自:http://www.cnblogs.com/sows/p/5995763.html (博客园的)风马一族 侵犯版本,后果自负 回顾 什么是php以及php的发展史 搭建web服务器 apa ...