写在前面的话:读书破万卷,编码如有神
--------------------------------------------------------------------

参考内容:

  《Elasticsearch顶尖高手系列-快速入门篇》,中华石杉

--------------------------------------------------------------------

主要内容包括:

  • es的document数据格式和数据库的关系型数据格式的区别
  • 简单的集群管理
  • 电商网站商品管理案例背景介绍
  • 商品的CRUD操作(document 的CRUD操作 )

--------------------------------------------------------------------

1、es的document数据格式和数据库的关系型数据格式的区别

比如有如下的json:

 {
"email":"zhangsan@sina.com",
"first_name":"san",
"last_name":"zhang",
"info":{
"bio":"curious and modest",
"age":30,
"interests":["bike","climb"]
"join_date":"2017/01/01"
}
}

es的docuement可以直接用上面的json数据格式来表达。

但是在java中需要两个类来表达:

 public class Employee {

   private String email;
private String firstName;
private String lastName;
private EmployeeInfo info; } private class EmployeeInfo { private String bio; // 性格
private Integer age;
private String[] interests; // 兴趣爱好
private Date joinDate;
}

可以看出employee对象里面包含了Employee类自己的属性,而且还有一个EmployeeInfo对象。

在数据库中的话,就需要两张表:employee表、employee_info表,将employee对象的数据重新拆开来,变成Employee数据和EmployeeInfo数据

employee表:email,first_name,last_name,join_date,4个字段
employee_info表:bio,age,interests,3个字段;此外还有一个外键字段,比如employee_id,关联着employee表。

我们就明白了es的document数据格式和数据库的关系型数据格式的区别:

  • 应用系统的数据结构都是面向对象的,复杂的
  • 对象数据存储到数据库中,只能拆解开来,变为扁平的多张表,每次查询的时候还得还原回对象格式,相当麻烦
  • ES是面向文档的,文档中存储的数据结构,与面向对象的数据结构是一样的,基于这种文档数据结构,es可以提供复杂的索引、全文检索、分析聚合等功能
  • es的document用json数据格式来表达

--------------------------------------------------------------------

2、简单的集群管理

(2.1)快速检查集群的健康状况

在Kibana中执行如下命令:  GET _cat/health?v

 epoch      timestamp cluster                 status node.total node.data shards pri relo init unassign pending_tasks max_task_wait_time active_shards_percent
1518657893 09:24:53 huobaopaocai-es-cluster yellow 1 1 1 1 0 0 1 0 - 50.0%

如何快速的了解集群的健康状态? green、yellow、red

  • green: 每个索引的primary shard和replica shard都是active状态
  • yellow: 每个索引的primary shard都是active状态,但是部分replica shard不是active状态,处于不可用状态
  • red: 不是所有索引的primary shard都是active状态的,部分索引有数据丢失

为什么现在我们的是处于yellow状态?

  我们现在就一个笔记本电脑,就启动了一个es进程,相当于就只有一个node。现在es中有一个index,就是kibana自己内置建立的index。由于默认的配置是给每个index分配5个primary shard和5个replica shard,而且primary shard和replica shard不能在同一台机器上(为了容错)。现在kibana自己建立的index是1个primary shard和1个replica shard。当前就一个node,所以只有1个primary shard被分配了和启动了,但是一个replica shard没有第二台机器去启动。

(2.2)快速查看集群中有些索引

在Kibana中执行如下命令:  GET _cat/indices?v

 health status index   uuid                   pri rep docs.count docs.deleted store.size pri.store.size
yellow open .kibana CaxZ5uJGSJy3rCzv_3RIzQ 1 1 1 0 3.1kb 3.1kb

(2.3)简单的索引操作

创建索引: PUT /test_index?pretty

 {
"acknowledged": true,
"shards_acknowledged": true
}

再次查看索引:

 GET _cat/indices?v

 health status index      uuid                   pri rep docs.count docs.deleted store.size pri.store.size
yellow open .kibana CaxZ5uJGSJy3rCzv_3RIzQ 1 1 1 0 3.1kb 3.1kb
yellow open test_index i2LdlSIqRXCZQCLauVBiRw 5 1 0 0 650b 650b

删除索引: DELETE /test_index?pretty

{
"acknowledged": true
}

再次查看索引:

 GET _cat/indices?v

 health status index   uuid                   pri rep docs.count docs.deleted store.size pri.store.size
yellow open .kibana CaxZ5uJGSJy3rCzv_3RIzQ 1 1 1 0 3.1kb 3.1kb

--------------------------------------------------------------------

3、电商网站商品管理案例背景介绍

有一个电商网站,需要为其基于ES构建一个后台系统,提供以下功能:

  • 对商品信息进行CRUD操作
  • 执行简单的结构化查询
  • 可以执行简单的全文检索,以及复杂的phrase(短语)检索
  • 对于全文检索的结果,可以进行高亮显示
  • 对数据进行简单的聚合分析

--------------------------------------------------------------------

4、商品的CRUD操作(document 的CRUD操作 )

(4.1)新增商品:新增文档、建立索引

基本语法格式:

 PUT /index/type/id
{
"json数据"
}

准备三条数据:

 PUT /ecommerce/product/1
{
"name" : "gaolujie yagao",
"desc" : "gaoxiao meibai",
"price" : 30,
"producer" : "gaolujie producer",
"tags": [ "meibai", "fangzhu" ]
} PUT /ecommerce/product/2
{
"name" : "jiajieshi yagao",
"desc" : "youxiao fangzhu",
"price" : 25,
"producer" : "jiajieshi producer",
"tags": [ "fangzhu" ]
} PUT /ecommerce/product/3
{
"name" : "zhonghua yagao",
"desc" : "caoben zhiwu",
"price" : 40,
"producer" : "zhonghua producer",
"tags": [ "qingxin" ]
}

执行每条新增语句的结果:

 {
"_index": "ecommerce",
"_type": "product",
"_id": "1",
"_version": 1,
"result": "created",
"_shards": {
"total": 2,
"successful": 1,
"failed": 0
},
"created": true
}

(ps:es会自动建立index和type,不需要提前创建,而且es默认会对document每个field建立倒排索引,让其可以被搜索。)

用java来实现往es中添加docuemnt操作

Elasticsearch - java客户端连接

    @Autowired
private ElasticsearchConstant elasticsearchConstant; /**
* 新增es的docuemnt
*/
@Test
public void createDocumentTest() throws IOException {
TransportClient client = elasticsearchConstant.getClient();
IndexResponse response = client.prepareIndex(elasticsearchConstant.getEsIndex(), elasticsearchConstant.getEsType(),"1")
.setSource(XContentFactory.jsonBuilder()
.startObject()
.field("name","gaolujie yagao")
.field("desc", "gaoxiao meibai")
.field("price", 30)
.field("producer", "gaolujie producer")
.endObject())
.get();
LOG.info(String.format("新增es的docuemnt结果: %s",response.toString()));
} 执行结果:
2018-02-15 11:37:24 INFO [main] (EcommerceTest.java:56) createDocumentTest - 新增es的docuemnt结果: IndexResponse[index=ecommerce,type=product,id=1,version=1,result=created,shards={"total":2,"successful":1,"failed":0}]

(4.2)检索索引:检索文档

基本语法格式:

 GET /index/type/id

用java来实现查询es中docuemnt操作

Elasticsearch - java客户端连接

 @Autowired
private ElasticsearchConstant elasticsearchConstant; /**
* 查询es的document
*/
@Test
public void getDocumentTest() throws IOException{
TransportClient client = elasticsearchConstant.getClient();
GetResponse response = client.prepareGet(elasticsearchConstant.getEsIndex(), elasticsearchConstant.getEsType(), "1").get();
LOG.info(String.format("查询es的docuemnt结果: %s",response.toString()));
} 执行结果:
2018-02-15 11:42:19 INFO [main] (EcommerceTest.java:68) getDocumentTest - 查询es的docuemnt结果: {"_index":"ecommerce","_type":"product","_id":"1","_version":1,"found":true,"_source":{"name":"gaolujie yagao","desc":"gaoxiao meibai","price":30,"producer":"gaolujie producer"}}

(4.3)修改商品:替换文档

(ps:替换方式有一个不好:必须带上所有的field才能去进行信息的修改。)

(4.4)修改商品:更新文档

用java来实现编辑es中的docuement:

Elasticsearch - java客户端连接

 @Autowired
private ElasticsearchConstant elasticsearchConstant; /**
* 更新es的docuemnt
* @throws IOException
*/
@Test
public void updateDocument() throws IOException {
TransportClient client = elasticsearchConstant.getClient();
UpdateResponse updateResponse = client.prepareUpdate(elasticsearchConstant.getEsIndex(), elasticsearchConstant.getEsType(), "1")
.setDoc(jsonBuilder()
.startObject()
.field("name", "jiaqiang gaolujie yagao")
.endObject())
.get();
LOG.info(String.format("更新es的docuemnt结果: %s",updateResponse.toString()));
} 运行结果:
2018-02-15 15:55:13 INFO [main] (EcommerceTest.java:73) updateDocument - 更新es的docuemnt结果: UpdateResponse[index=ecommerce,type=product,id=1,version=2,result=updated,shards=ShardInfo{total=2, successful=1, failures=[]}]

(4.5)删除商品:删除文档

用java来实现删除es中的docuement:

Elasticsearch - java客户端连接

 @Autowired
private ElasticsearchConstant elasticsearchConstant; /**
* 删除es中的document
*/
@Test
public void deleteDocument(){
TransportClient client = elasticsearchConstant.getClient();
DeleteResponse response = client.prepareDelete(elasticsearchConstant.getEsIndex(), elasticsearchConstant.getEsType(), "1").get();
LOG.info(String.format("删除es的docuemnt结果: %s",response.toString()));
} 运行结果:
2018-02-15 16:00:04 INFO [main] (EcommerceTest.java:84) deleteDocument - 删除es的docuemnt结果: DeleteResponse[index=ecommerce,type=product,id=1,version=3,result=deleted,shards=ShardInfo{total=2, successful=1, failures=[]}]

Elasticsearch快速入门案例的更多相关文章

  1. Part1-HttpClient快速入门案例

    前言 最近这段时间在学习爬虫方面的知识,接触了几个优秀的爬虫框架,也爬取了一些自己喜欢网站的信息.通过官网学习HttpClient的过程中,希望通过写此博客来巩固自己的学习,也为有需要的人提供学习帮助 ...

  2. Elasticsearch快速入门和环境搭建

    内容概述 什么是Elasticsearch,为什么要使用它? 基础概念简介 节点(node) 索引(index) 类型映射(mapping) 文档(doc) 本地环境搭建,创建第一个index 常用R ...

  3. Elasticsearch学习之快速入门案例

    1. document数据格式 面向文档的搜索分析引擎 (1)应用系统的数据结构都是面向对象的,复杂的(2)对象数据存储到数据库中,只能拆解开来,变为扁平的多张表,每次查询的时候还得还原回对象格式,相 ...

  4. ElasticSearch快速入门

    知识储备 学习ElasticSearch之前可以先了解一下lucene,这里是我整理的一篇关于lucene的笔记(传送门),对搜索框架有兴趣的还可以了解一下另一款企业级搜索应用服务器---solr(传 ...

  5. Elasticsearch - 快速入门

    Elasticsearch是基于Apache 2.0开源的实时.分布式.分析搜索引擎,相比Lucene,Elasticsearch的上手比较容易,这篇文章主要纪录Elasticsearch的基本概念和 ...

  6. Elasticsearch 快速入门教程

    面向文档 应用中的对象很少只是简单的键值列表,更多时候它拥有复杂的数据结构,比如包含日期.地理位置.另一个对象或者数组. 总有一天你会想到把这些对象存储到数据库中.将这些数据保存到由行和列组成的关系数 ...

  7. javaWeb el表达式和jstl快速入门案例

    <%@page import="de.bvb.domain.Person"%> <%@page import="de.bvb.domain.Addres ...

  8. 3.1_springboot2.x检索之elasticsearch安装&快速入门

    1.elasticsearch简介&安装 1.1.1.elasticsearch介绍 ​ 我们的应用经常需要添加检索功能,开源的 ElasticSearch 是目前全文搜索引擎的首选.他可以快 ...

  9. SpringBoot整合ActiveMQ快速入门

    Spring Boot 具有如下特性: 为基于 Spring 的开发提供更快的入门体验 开箱即用,没有代码生成,也无需 XML 配置.同时也可以修改默认值来满足特定的需求. 提供了一些大型项目中常见的 ...

随机推荐

  1. 查看linux服务器内存信息

    查看服务器内存信息 dmidecode|grep -P -A5 "Memory\s+Device"|grep Size [root@localhost home]# dmideco ...

  2. IIS错误:在唯一密钥属性“fileExtension”设置为“.mp4”时,无法添加类型为“mimeMap”的重复集合项

    之前的IIS配置中,.mp4类型的文件默认无法访问,所以个人在IIS7.5的mime类型中增加了.mp4的类型的支持,但问题是需要每台机器中增加这些设置,不利于团队协作,于是,只好将这些修改体现在代码 ...

  3. liunx系统top命令详解

    ps: 1.按1可以进行 CPU各个和总CPU汇总的切换2.cpu0是最关键的,总控管理各个CPU 3.默认情况下仅显示比较重要的 PID.USER.PR.NI.VIRT.RES.SHR.S.%CPU ...

  4. Python_oldboy_自动化运维之路_全栈考试(五)

    1.执行 Python 脚本的两种方式 [root@localhost tmp]# cat a.py #!/usr/bin/python # -*- coding: UTF-8 -*- print & ...

  5. day09作业

    一.填空题 1.方法 2.堆内存 3.构造方法 4.this 5.this 6.static 7.使用类名进行访问 8.package import class 9.关键字 10.lang 二.选择题 ...

  6. 【oracle】入门学习(二)

    oracle登录身份有三种:normal 普通身份sysdba 系统管理员身份sysoper 系统操作员身份每种身份对应不同的权限 sysdba权限:●启动和关闭操作●更改数据库状态为打开/装载/备份 ...

  7. Ubuntu 搭建docker registry 私有仓库

    一.为什么要搭建 docker 私有仓库 原因有几个: 项目需要,不希望将项目放到 docker hub 上. 环境需求,考虑网络.效率的问题,希望在私有服务器上建立自用的仓库,提高便利性和访问速度. ...

  8. C语言:凯撒密码的实现

    凯撒密码的实现(10分)题目内容: 凯撒密码(caeser)是罗马扩张时期朱利斯?凯撒(Julius Caesar)创造的,用于加密通过信使传递的作战命令.它将字母表中的字母移动一定位置而实现加密. ...

  9. box-sizing定义的盒模型之间的区别

  10. Codeforces Round #207 (Div. 1) D - Bags and Coins 构造 + bitset优化dp + 分段查找优化空间

    D - Bags and Coins 思路:我们可以这样构造,最大的那个肯定是作为以一个树根,所以我们只要找到一个序列a1 + a2 + a3 .... + ak 并且ak为 所有点中最大的那个,那么 ...