Solr Cloud搭建
1:搭建tomcat
- 配置connector:
- server.xm文件中:
<Connector port="8080"
maxThreads="200" connectionTimeout="20000" acceptCount="400"
redirectPort="8443" minSpareThreads="10"
protocol="org.apache.coyote.http11.Http11NioProtocol"/>
- connector属性注释:
- maxThreads:最大线程数。
- acceptCount:请求入队列,队列的大小。当线程全部busy,queue满的时候,新请求将被抛弃。
- minSpareThreads:初始启动的线程数。
- maxSpareThreads:tomcat7版本中没有这个属性了,删除。
- 去掉Servlet Auto-Reloading:
server.xml 文件中
<Host name="localhost" appBase="webapps" unpackWARs="true" autoDeploy="false">
配置autoDeploy="false"。
- Disabling DNS Lookups
- server.xml 文件中
<Connector port="8080"
maxThreads="200" connectionTimeout="20000" acceptCount="400"
redirectPort="8443" enableLookups="false" minSpareThreads="10" maxSpareThreads="150"
protocol="org.apache.coyote.http11.Http11NioProtocol"/>- 配置autoDeploy="false"
- 修改jvm参数:
- 在$TOMCAT_HOME/bin目录下创建setenv.sh
- JAVA_OPTS="-XX:+PrintGCDateStamps -XX:+PrintGCTimeStamps -XX:+PrintGCDetails -Xms4g -Xmx4g -Xmn256m -XX:SurvivorRatio=6 -XX:+UseConcMarkSweepGC -XX:+UseCMSInitiatingOccupancyOnly -XX:CMSInitiatingOccupancyFraction=68 -XX:+ExplicitGCInvokesConcurrent -XX:+CMSParallelRemarkEnabled -XX:+UseCMSCompactAtFullCollection -XX:CMSFullGCsBeforeCompaction=10 -XX:+UseFastAccessorMethods -Xloggc:/export/grid/01/hadoop/gclog/rs-gc.log "
- 修改tomcat的log的输出路径
- 修改conf/logging.properties
- 将${catalina.base}/logs 修改为存储log的路径
2:搭建zookeeper
3: solr搭建到tomcat中
- 添加JAVA_OPTS
- 在$TOMCAT_HOME/bin/setenv.sh中添加
- JAVA_OPTS=$JAVA_OPTS" -Dcollection.configName=collection1 "
JAVA_OPTS=$JAVA_OPTS" -DnumShards=1 "
JAVA_OPTS=$JAVA_OPTS" -DzkHost=metadata-jrdata-03.pekdc1.jdfin.local:2182,metadata-jrdata-03.pekdc1.jdfin.local:2183,metadata-jrdata-03.pekdc1.jdfin.local:2184/solrcloud "
JAVA_OPTS=$JAVA_OPTS" -Dbootstrap_confdir=/soft/server/solr-4.10.0/example/solr/collection1/conf "
JAVA_OPTS=$JAVA_OPTS" -Dsolr.solr.home=/soft/server/solr-4.10.0/example/solr "
JAVA_OPTS=$JAVA_OPTS" -Dsolr.hdfs.home=/solrcloud/collection1 "
JAVA_OPTS=$JAVA_OPTS" -Dsolr.directoryFactory=HdfsDirectoryFactory "
JAVA_OPTS=$JAVA_OPTS" -Dsolr.lock.type=hdfs "
JAVA_OPTS=$JAVA_OPTS" -Dsolr.hdfs.confdir=/soft/conf/ "
JAVA_OPTS=$JAVA_OPTS" -DzkClientTimeout=30000 " - 其他机器不需要配置:-Dcollection.configName,-DnumShards, -Dbootstrap_confdir。
- 修改solr的配置文件,solr.solr.home/solr.xml
<str name="host">${host:hbase-jrdata-01.pekdc1.jdfin.local}</str>
<int name="hostPort">${jetty.port:60030}</int>
- 修改HdfsDirectoryFactory 的属性,solrconfig.xml文件中:
- <str name="solr.hdfs.blockcache.global">${solr.hdfs.blockcache.global:true}</str>
- 使用blockcache.write容易出现bug,solr的log中warn信息中显示的。
- 修改solr的cache属性,solrconfig.xml文件中:
<filterCache class="solr.FastLRUCache"
size="50000"
initialSize="512"
autowarmCount="256"/><queryResultCache class="solr.FastLRUCache"
size="50000"
initialSize="512"
autowarmCount="256"/><documentCache class="solr.FastLRUCache"
size="50000"
initialSize="512"
autowarmCount="0"/>
- 修改tomcat的log问题:
- 将solr/example/lib/ext下所有的jar包拷贝到Tomcat Lib下。
- 配置/solr访问目录:
- TOMCAT/conf/Catalina/localhost/路径下,创建solr.xml文件如下:
<Context path="/solr" docBase="/soft/server/solr-4.10.0/dist/solr.war" debug="0" crossContext="true">
</Context>
- 配置solr的log输出:
- solr.war 装载后 在 webapps/下生成 solr的文件夹 ,把 log4j.properties 放到 WEB-INF/classes 中。没有 classes 创建一个。
log4j.properties在example/resources/路径下。 - 注意修改solr.log=logs/,指定log的输出地址。注意将CONSOLE去掉,有CONSOLE的话,tomcat的catalina.out也会输出一份solr的log,这样就重复输出日志了。
- solr.war 装载后 在 webapps/下生成 solr的文件夹 ,把 log4j.properties 放到 WEB-INF/classes 中。没有 classes 创建一个。
Solr Cloud搭建的更多相关文章
- Solr Cloud的搭建使用
Solr的安装下载http://archive.apache.org/dist/lucene/solr/6.4.0/或者直接去官网下载最新版本网页指导 https://cwiki.apache.org ...
- Solr Cloud - SolrCloud
关于 Solr Cloud Zookeeper 入门,介绍 原理 原封不动转自 http://wiki.apache.org/solr/SolrCloud/ ,文章的内存有些过时,但是了解原理. Th ...
- 使用Spring Cloud搭建高可用服务注册中心
我们需要的,不仅仅是一个服务注册中心而已,而是一个高可用服务注册中心. 上篇博客[使用Spring Cloud搭建服务注册中心]中我们介绍了如何使用Spring Cloud搭建一个服务注册中心,但是搭 ...
- 【微服务】使用spring cloud搭建微服务框架,整理学习资料
写在前面 使用spring cloud搭建微服务框架,是我最近最主要的工作之一,一开始我使用bubbo加zookeeper制作了一个基于dubbo的微服务框架,然后被架构师否了,架构师曰:此物过时.随 ...
- HBase + Solr Cloud实现HBase二级索引
1. 执行流程 2. Solr Cloud实现 http://blog.csdn.net/u011462328/article/details/53008344 3. HBase实现 1) 自定义Ob ...
- Spring Cloud搭建微服务架构----文章汇总
Spring Cloud搭建微服务架构----前言 原文地址:https://my.oschina.net/u/1000241/blog/882929 Spring Cloud搭建微服务架构----使 ...
- 第04项目:淘淘商城(SpringMVC+Spring+Mybatis)【第八天】(solr服务器搭建、搜索功能实现)
https://pan.baidu.com/s/1bptYGAb#list/path=%2F&parentPath=%2Fsharelink389619878-229862621083040 ...
- [精华]Hadoop,HBase分布式集群和solr环境搭建
1. 机器准备(这里做測试用,目的准备5台CentOS的linux系统) 1.1 准备了2台机器,安装win7系统(64位) 两台windows物理主机: 192.168.131.44 adminis ...
- Solr环境搭建过程中遇到的问题
Solr下载地址:http://www.apache.org/dyn/closer.lua/lucene/solr/6.3.0 Solr搭建步骤转自:http://blog.csdn.net/wbcg ...
随机推荐
- Android 学习第2课,下载 eclipse 工具
可以到http://www.ddooo.com/softdown/61745.htm 下载下来是32位与64位都有的 而且是汉化的,经测试成功,还可以,不错!
- fastqc, Per Base Sequence Content
Per Base Sequence Content对所有reads的每一个位置,统计ATCG四种碱基(正常情况)的分布: 横轴为位置,纵轴为百分比. 正常情况下四种碱基的出现频率应该是接近的,而且没有 ...
- setsockopt 设置 SO_LINGER 选项
setsockopt 设置 SO_LINGER 选项 最近和后台的server通信 server发现在读数据的时候 客户端已经关闭连接 ,也就是 没有等服务器读完数据,客户端已经fclose了, 联 ...
- nginx配置rewrite
1. uri 和 url读取区别 区别就是URI定义资源,而URL不单定义这个资源,还定义了如何找到这个资源. 比如说,一个服务器上,到一个文件夹/网页的绝对地址(absolute path)就是U ...
- Spring MVC 4.2 增加 CORS 支持 Cross-Origin
基于XML的配置: <mvc:cors> <mvc:mapping path="/api/**" allowed-origins="http://dom ...
- access数据库select查询top时无效的解决办法
access数据库select查询top时有时无效,原因就是在使用Order by时,且排序的条件中数据有重复的. 比如:select top 10 * from table1 order by cd ...
- error while loading shared libraries:错误的原因和解决方法
原因有两个: 1.操作系统没有改共享库 2.安装了该共享库,但是执行外部程序调用该共享库的时候,程序按照默认路径(/usr/lib./lib)找不到该共享库文件 解决方法: ubuntu系统的共享库一 ...
- hadoop实战之分布式模式
环境 192.168.1.101 host101 192.168.1.102 host102 1.安装配置host101 [root@host101 ~]# cat /etc/hosts |grep ...
- makefile自动生成依赖关系
手工编写依赖关系不仅工作量大而且极易出现遗漏,更新也很难及时,修改源或头文件后makefile可能忘记修改.为了解决这个问题,可以用gcc的-M选项自动生成目标文件和源文件的依赖关系.-M选项会把包含 ...
- ASP.NET MVC+EF5 开发常用代码
Asp.Net Mvc,EF 技术常用点总结 1.Asp.Net MVC a)获得当前控制器名和当前操作的名称(action) 1.Action 中 RouteData.Values[" ...