Solr集群环境搭建

一、准备工作

首先保证已经安装JDK工具包：

[root@localhost opt]# java -version

java version "1.8.0_144"

Java(TM) SE Runtime Environment (build 1.8.0_144-b01)

Java HotSpot(TM) 64-Bit Server VM (build 25.144-b01, mixed mode)

本文目的在演示solr集群环境的搭建过程，由于资源的限制这里是伪集群。

使用版本如下：

solr-8.2.0
zookeeper-3.4.14

这里有个坑，本来是使用zookeeper-3.5.5.tar.gz的，但是不知道为什么搭建集群的时候zookeeper节点就是无法正常启动，没办法就只好降低版本使用了3.4.14，再然后在StackOverflow网站上找到答案要使用3.5.5-bin.tar.gz，但是我并没有试过，有空再鼓捣下吧。

二、zookeeper集群

依照个人习惯，下载zookeeper到/opt目录下，为了阅读更直观，以下所有命令都在/opt目录下进行。

解压：

wget https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/zookeeper-3.4.14/zookeeper-3.4.14.tar.gz

tar -zxvf zookeeper-3.4.14.tar.gz -C .

在/opt/下创建目录solr-cluster，将zookeeper-3.4.14复制三份到solr-cluster目录下，作为3个节点：

cp -r zookeeper-3.4.14 solr-cluster/zookeeper1

cp -r zookeeper-3.4.14 solr-cluster/zookeeper2

cp -r zookeeper-3.4.14 solr-cluster/zookeeper3

在每个zookeeper目录下都创建一个data目录作为数据存储目录：

mkdir solr-cluster/zookeeper1/data

mkdir solr-cluster/zookeeper2/data

mkdir solr-cluster/zookeeper3/data

在data目录下创建一个myid文件，文件内容表示每个实例的id

echo 1 >> solr-cluster/zookeeper1/data/myid

echo 2 >> solr-cluster/zookeeper2/data/myid

echo 3 >> solr-cluster/zookeeper3/data/myid

复制zookeeper/conf下的zoo_sample.cfg，设置新文件名为zoo.cfg

cp solr-cluster/zookeeper1/conf/zoo_sample.cfg solr-cluster/zookeeper1/conf/zoo.cfg

cp solr-cluster/zookeeper2/conf/zoo_sample.cfg solr-cluster/zookeeper2/conf/zoo.cfg

cp solr-cluster/zookeeper3/conf/zoo_sample.cfg solr-cluster/zookeeper3/conf/zoo.cfg

修改zoo.cfg配置文件，以zookeeper1为例：

dataDir=/opt/solr-cluster/zookeeper1/data

clientPort=2181

dataDir表示zookeeper实例保存数据的目录，clientPort表示客户端连接zookeeper的端口号。

末尾添加如下配置，要注意的是ip后的两个端口号不能冲突：

server.1=192.168.56.99:3181:4881

server.2=192.168.56.99:3182:4882

server.3=192.168.56.99:3183:4883

1,2,3表示节点id，即myid中的内容；3xxx端口号表示zookeeper内部通讯的端口号；4xxx端口号表示zookeeper选举投票端口号。

zookeeper2、zookeeper3以同样的方式分别指定自己的data目录，分别设置clientPort为2182，2183以及添加集群节点列表配置。

启动zookeeper节点：

./solr-cluster/zookeeper1/bin/zkServer.sh start

./solr-cluster/zookeeper2/bin/zkServer.sh start

./solr-cluster/zookeeper3/bin/zkServer.sh start

查看zookeeper状态:

./solr-cluster/zookeeper1/bin/zkServer.sh status

./solr-cluster/zookeeper2/bin/zkServer.sh status

./solr-cluster/zookeeper3/bin/zkServer.sh status

正常情况下，应该出现一个leader，两个follwer。

三、solr集群

复制tomcat到上述solr-cluster目录中，这里创建3个节点：

cp -r apache-tomcat-8.5.47/ solr-cluster/tomcat1

cp -r apache-tomcat-8.5.47/ solr-cluster/tomcat2

cp -r apache-tomcat-8.5.47/ solr-cluster/tomcat3

修改每个节点server.xml文件，这里以tomcat1节点为例：

<!-- 默认为8005 -->

<Server port="8105" shutdown="SHUTDOWN">

  <Listener className="org.apache.catalina.startup.VersionLoggerListener" />

...

 <!-- 默认为8080 -->

 <Connector port="8180" protocol="HTTP/1.1"

               connectionTimeout="20000"

               redirectPort="8443" />

...

<!-- 默认为8109 -->

<Connector port="8109" protocol="AJP/1.3" redirectPort="8443" />

以同样方式修改为tomcat2，tomcat3，分别为82xx，83xx。

把Solr单机环境搭建及配置IK分词器中搭建好的solr复制到tomcat里：

cp solr/tomcat8/webapps/solr/ solr-cluster/tomcat1/webapps/

cp solr/tomcat8/webapps/solr/ solr-cluster/tomcat2/webapps/

cp solr/tomcat8/webapps/solr/ solr-cluster/tomcat3/webapps/

为每一个solr接点创建solrhome，直接复制单机版的solrhome即可。

cp -r solr/solrhome/ solr-cluster/solrhome1

cp -r solr/solrhome/ solr-cluster/solrhome2

cp -r solr/solrhome/ solr-cluster/solrhome3

修改solrhome下的solr.xml配置文件，以下以solrhome1为例：

<solrcloud>

    <str name="host">192.168.56.99</str>

    <int name="hostPort">8180</int>

    <str name="hostContext">${hostContext:solr}</str>

...

host表示tomcat服务节点ip，hostPort表示solr服务端口号。

修改solr服务web.xml配置，将web服务于solrhome目录联系起来，以tomcat1为例：

vim solr-cluster/tomcat1/webapps/solr/WEB-INF/web.xml

<env-entry>

       <env-entry-name>solr/home</env-entry-name>

       <env-entry-value>/opt/solr-cluster/solrhome1</env-entry-value>

       <env-entry-type>java.lang.String</env-entry-type>

</env-entry>

tomcat2、tomcat3相似。

接下来，需要使用zookeeper集中管理solr的配置文件，将solr配置文件上传到zookeeper：

./solr-8.2.0/server/scripts/cloud-scripts/zkcli.sh -zkhost 192.168.56.99:2181,192.168.56.99:2182,192.168.56.99:2183 -cmd upconfig -confdir /opt/solr-cluster/solrhome1/configsets/sample_techproducts_configs/conf -confname solr-cluster-conf

192.168.56.99:2181,192.168.56.99:2182,192.168.56.99:2183表示zookeeper节点列表
-cmd upconfig 执行操作
/opt/solr-cluster/solrhome1/configsets/sample_techproducts_configs/conf 要上传的配置文件目录，其实主要是managed-schema、solrconfig.xml两个文件
-confname solr-cluster-conf 给上传的配置文件起个名儿，这里是solr-cluster-conf

检查上传是否成功：

./solr-8.2.0/server/scripts/cloud-scripts/zkcli.sh

ls /configs

修改tomcat/bin下的catalina.sh，关联solr和zookeeper

#JAVA_OPTS="$JAVA_OPTS -Dorg.apache.catalina.security.SecurityListener.UMASK=`umask`"

JAVA_OPTS="-DzkHost=192.168.56.99:2181,192.168.56.99:2182,192.168.56.99:2183"

这样每个solr实例和zookeeper建立了联系，solr会将自己状态及时发送给zookeeper。

启动tomcat实例，访问管理界面，这个和单机没啥区别。