分布式搜索ElasticSearch构建集群与简单搜索实例应用

关于ElasticSearch不介绍了,直接说应用.

分布式ElasticSearch集群构建的方法.

1.通过在程序中创建一个嵌入es节点(Node),使之成为es集群的一部分,然后通过这个节点来与es集群通信.

/**在运行该测试实例时,已经在本地建立了对应的索引库datum*/
public static void main(String[] args) { //当你启动一个节点,它会自动加入同网段的es集群,一个前提就是es的集群名(cluster.name)这个参数要设置一致。
String clusterName = "elasticsearch_pudp"; //集群结点名称 /**
* 默认的话启动一个节点,es集群会自动给它分配一些索引的分片,如果你想这个节点仅仅作为一个客户端而不去保存数据,
* 你就可以设置把node.data设置成false或 node.client设置成true。
*/
Node node = NodeBuilder.nodeBuilder().clusterName(clusterName).client(true).node(); //启动结点,加入到指定集群
node.start(); //获取节点搜索端,使用prepareGet搜索datum索引库中 索引类型为datum,的索引记录唯一id值为150得记录
GetResponse response = node.client().prepareGet("datum", "datum", ""+150).execute().actionGet(); //对象映射模型
ObjectMapper mapper = new ObjectMapper();
//将搜索结果response中的值转换成指定的对象模型,Datum是自己建立的一个咨询Model对象
Datum datum= mapper.convertValue(response.getSource(), Datum.class); //打印检索结果中获取的对象相应的属性
System.out.println("资讯标题:"+datum.getTitle() ); //关闭结点
node.close();
}

程序运行结果:

资讯标题:波立维与泰嘉片哪个治疗血栓病效果更好呢

还有一种情况是你并不想把节点加入集群,只想用它进行单元测试时,就要启动一个”本地”的es,这里“本地”指的是在jvm的级别下运行,即两个不同的es节点运行在同一个JVM中时会组成一个集群。它需要把节点的local参数设置成true

Node node = NodeBuilder.nodeBuilder().local(true).node(); 

2.用TransportClient这个接口和es集群通信.

集群中绑定结点

通过TransportClient这个接口,我们可以不启动节点就可以和es集群进行通信,它需要指定es集群中其中一台或多台机的ip地址和端口

        Client client = new TransportClient()
.addTransportAddress(new InetSocketTransportAddress("192.168.0.149", 9300))
.addTransportAddress(new InetSocketTransportAddress("192.168.0.162", 9300)); client.close();

集群名称如果我们不更改,默认的为elasticsearch,在ElasticSearch对应的目录elasticsearch\config\下的elasticsearch.yml文件中.如下位置

################################### Cluster ###################################

# Cluster name identifies your cluster for auto-discovery. If you're running
# multiple clusters on the same network, make sure you're using unique names.
#
cluster.name: elasticsearch

程序中自定义集群结点名称

    /**在运行该测试实例时,已经在本地建立了对应的索引库datum*/
public static void main(String[] args) { //自定义集群结点名称
String clusterName = "elasticsearch_pudongping"; //程序中更改集群结点名称
Settings settings = ImmutableSettings.settingsBuilder()
.put("cluster.name", clusterName).build(); //创建集群,绑定集群内的机器
TransportClient client = new TransportClient(settings);
client.addTransportAddress(new InetSocketTransportAddress("192.168.0.149", 9300));
client.addTransportAddress(new InetSocketTransportAddress("192.168.0.162", 9300)); //搜索
GetResponse response = client.prepareGet("datum", "datum", ""+130)
.execute()
.actionGet(); ObjectMapper mapper = new ObjectMapper();
Datum datum= mapper.convertValue(response.getSource(), Datum.class); System.out.println("资讯标题:"+datum.getTitle() ); //关闭结点
client.close();
}

程序运行结果:

资讯标题:捷诺维主要成份有哪些 疗效怎么样

设置属性使客户端去嗅探整个集群的状态

可以设置client.transport.sniff为true来使客户端去嗅探整个集群的状态

        /**
* 可以设置client.transport.sniff为true来使客户端去嗅探整个集群的状态,
* 把集群中其它机器的ip地址加到客户端中,这样做的好处是一般你不用手动设置集群里所有集群的ip到连接客户端,
* 它会自动帮你添加,并且自动发现新加入集群的机器。
*/
Settings settings = ImmutableSettings.settingsBuilder()
.put("client.transport.sniff", true).build();
TransportClient client = new TransportClient(settings);

实例应用:

使用TransportClient初始化客户端并执行简单搜索:

package com.bbf.client;

import java.util.ArrayList;
import java.util.List; import org.codehaus.jackson.map.ObjectMapper;
import org.elasticsearch.action.get.GetResponse;
import org.elasticsearch.action.index.IndexResponse;
import org.elasticsearch.action.search.SearchResponse;
import org.elasticsearch.client.transport.TransportClient;
import org.elasticsearch.common.settings.ImmutableSettings;
import org.elasticsearch.common.settings.Settings;
import org.elasticsearch.common.transport.InetSocketTransportAddress;
import org.elasticsearch.index.query.QueryBuilder;
import org.elasticsearch.index.query.QueryBuilders;
import org.elasticsearch.search.SearchHit;
import org.elasticsearch.search.SearchHits;
import com.bbf.search.model.Datum; /**
* description:
*
* @author <a href='mailto:dennisit@163.com'> Cn.pudp (En.dennisit)</a> Copy Right since 2013-9-29
*
* com.bbf.client.ESClient.java
*
*/ public class ESClient { /**在运行该测试实例时,已经在本地建立了对应的索引库datum*/
public static void main(String[] args) { //自定义集群结点名称
String clusterName = "elasticsearch_pudongping"; //程序中更改集群结点名称 并且设置client.transport.sniff为true来使客户端去嗅探整个集群的状态
Settings settings = ImmutableSettings.settingsBuilder()
.put("cluster.name", clusterName).put("client.transport.sniff", true).build(); //创建客户端对象
TransportClient client = new TransportClient(settings); //客户端对象初始化集群内结点,绑定多个ip
//client.addTransportAddress(new InetSocketTransportAddress("192.168.0.149", 9300));
client.addTransportAddress(new InetSocketTransportAddress("192.168.0.162", 9300)); //搜索,根据Id查询
GetResponse response = client.prepareGet("datum", "datum", ""+130)
.execute()
.actionGet(); //查询结果映射成对象类
ObjectMapper mapper = new ObjectMapper();
Datum datum= mapper.convertValue(response.getSource(), Datum.class); System.out.println("资讯编号:" + datum.getId() +"\t资讯标题:"+datum.getTitle() ); //构造查询器查询,第一个参数为要查询的关键字,第二个参数为要检索的索引库中的对应索引类型的域
QueryBuilder query = QueryBuilders.multiMatchQuery("恩必普", "keyword");
//第一个参数datum表示索引库,第二个参数datum表示索引类型,from表示开始的位置 size表示查询的条数 ,类似mysql中的limit3,5
SearchResponse searchResponse = client.prepareSearch("datum").setTypes("datum").setQuery(query).setFrom(3).setSize(5).execute().actionGet(); //将搜索结果转换为list集合对象
List<Datum> lists = getBeans(searchResponse); System.out.println("查询出来的结果数:" + lists.size());
for(Datum dtm: lists){
System.out.println("资讯编号:" + dtm.getId() +"\t资讯标题:"+dtm.getTitle());
} //关闭客户端
client.close(); } /**
* 从查询到的记录中获取json串值,转换成<code>Datum</code>对象
*
* @author <a href='mailto:dennisit@163.com'> Cn.pudp (En.dennisit)</a> Copy Right since 2013-9-24 下午09:24:29
*
* @param response
* 查询结果集<code>GetResponse</code>
* @return
* 返回<code>Datum</code>对象
*/
public static Datum getResponseToObject(GetResponse response){
ObjectMapper mapper = new ObjectMapper();
return mapper.convertValue(response.getSource(), Datum.class);
} /**
* 将查询到的对象集合封装成List集合
*
* @author <a href='mailto:dennisit@163.com'>Cn.pudp(En.dennisit)</a> Copy Right since 2013-9-27 下午02:31:26
*
* @param response
* @return
*/
public static List<Datum> getBeans(SearchResponse response) {
SearchHits hits = response.getHits();
ObjectMapper mapper = new ObjectMapper();
List<Datum> datumList = new ArrayList<Datum>();
for (SearchHit hit : hits) {
String json = hit.getSourceAsString();
Datum dtm = new Datum(); try {
dtm = mapper.readValue(json, Datum.class);
datumList.add(dtm);
} catch (Exception e) {
e.printStackTrace();
} }
return datumList;
} }

程序运行结果:

资讯编号:130    资讯标题:捷诺维主要成份有哪些 疗效怎么样
查询出来的结果数:5
资讯编号:16 资讯标题:恩必普是不是医保药 可以报销吗
资讯编号:11 资讯标题:恩必普的治疗范围 有什么优势
资讯编号:17 资讯标题:恩必普的作用机制是什么
资讯编号:12 资讯标题:恩必普服用有什么禁忌 注意事项哪些
资讯编号:20 资讯标题:中风可以用恩必普吗

转载请注明出处:[http://www.cnblogs.com/dennisit/p/3346228.html]

热爱生活,热爱Coding,敢于挑战,用于探索 ...
 
标签: ElasticSearch

当前标签: ElasticSearch

 
苏若年 2013-09-29 18:52 阅读:200 评论:2
 

分布式搜索ElasticSearch构建集群与简单搜索实例应用的更多相关文章

  1. Docker 0x13: Docker 构建集群/服务/Compose/分布式服务栈

    目录 Docker 构建集群/服务/Compose/分布式服务栈 集群 初始化集群服务 安装docker-machine 管理节点和工作节点 docker集群构建完成 集群中部署应用 集群服务访问特性 ...

  2. Elasticsearch跨集群搜索(Cross Cluster Search)

    1.简介 Elasticsearch在5.3版本中引入了Cross Cluster Search(CCS 跨集群搜索)功能,用来替换掉要被废弃的Tribe Node.类似Tribe Node,Cros ...

  3. PB级数据实时查询,滴滴Elasticsearch多集群架构实践

    PB级数据实时查询,滴滴Elasticsearch多集群架构实践  mp.weixin.qq.com 点击上方"IT牧场",选择"设为星标"技术干货每日送达 点 ...

  4. Elasticsearch之集群

    ElasticSearch集群 ES集群是一个 P2P类型(使用 gossip 协议)的分布式系统,除了集群状态管理以外,其他所有的请求都可以发送到集群内任意一台节点上,这个节点可以自己找到需要转发给 ...

  5. 谈一谈Elasticsearch的集群部署

      Elasticsearch天生就支持分布式部署,通过集群部署可以提高系统的可用性.本文重点谈一谈Elasticsearch的集群节点相关问题,搞清楚这些是进行Elasticsearch集群部署和拓 ...

  6. ES 30 - Elasticsearch生产集群的配置建议

    目录 1 服务器的内存 2 服务器的CPU 3 服务器的磁盘 4 集群的网络 5 集群的节点个数 6 JVM的参数设置 7 集群的数据量 8 总结 在生产环境中, 要保证服务在各种极限情况下的稳定和高 ...

  7. 分布式架构学习-Consul集群配置

    简介 之前公司用的是Consul进行服务发现以及服务管理,自己一直以来只是用一下,但是没有具体的深入,觉得学习不可以这样,所以稍微研究了一下. 网上有很多关于Consul的介绍和对比,我这里也不献丑了 ...

  8. Graylog+elasticsearch+mongodb集群+nginx负载均衡前端

    网上有张图画的很好,搜索有关它的配置文章,google里有几篇英文的,都是依靠haproxy等或别的什么实现,没有纯粹的Graylog+elasticsearch+mongodb集群,项目需要,只有自 ...

  9. Elasticsearch 使用集群 - 创建和查询文档

    章节 Elasticsearch 基本概念 Elasticsearch 安装 Elasticsearch 使用集群 Elasticsearch 健康检查 Elasticsearch 列出索引 Elas ...

随机推荐

  1. Cocos2d-x 3.0final 终结者系列教程14-L新abel-Cocos2d-x公文

    目 录 新文本标签类Label 其它文本标签 字体制作工具使用介绍 小结 https://github.com/chukong/cocos-docs/blob/master/manual/framew ...

  2. C#二维码生成与解码

    [窗体效果图] [程序源代码] using System; using System.Collections.Generic; using System.ComponentModel; using S ...

  3. Git@OSC & SSH配置

    #### [ 导入外部Git仓库到中国源代码托管平台(Git@OSC)] 免费代码托管 您可以通过SSH或者HTTP的方式提交和管理代码,也可以通过Web的方式在线阅读,编辑代码与Team@OSC的集 ...

  4. STL慎重选择删除元素的

     一.要删除容器中有特定值的全部对象 1.假设容器是vector.string或deque.则使用erase-remove习惯使用方法.比如: vector<int> c; c.era ...

  5. C++11 virtual函数学习笔记

    #include<iostream> #include<string> using namespace std; class Base { public: Base(){} ~ ...

  6. HammerDB数据库压力工具使用简略步骤

    欢迎转载,转载请标明出处:http://blog.csdn.net/notbaron/article/details/38879681 HammerDB数据库压力工具使用简略步骤 尽管没有图,可是文字 ...

  7. 网站静态化处理—web前端优化—中(12)

    网站静态化处理—web前端优化—中(12) Web前端很多优化原则都是从如何提升网络通讯效率的角度提出的,但是这些原则使用的时候还是有很多陷阱在里面,如果我们不能深入理解这些优化原则背后所隐藏的技术原 ...

  8. php中utf8 与utf-8

    原文:php中utf8 与utf-8 相信很多程序员刚开始也会有这样的疑惑,如题,我也是.    其实,他们可以这样来区分.    一.在php和html中设置编码,请尽量统一写成“UTF-8”,这才 ...

  9. Installshield在安装结束时刷新系统

    原文:Installshield在安装结束时刷新系统 在OnEnd里添加代码,两种解决方案 群友kevin的解决方案 #include "ifx.h"  //Call to Win ...

  10. HEAP CORRUPTION DETECTED

    发生主要是由于这个问题给写入超出预分配的空间,注意检查越界情况 版权声明:本文博客原创文章,博客,未经同意,不得转载.