Redis的集群搭建

一.集群的搭建

1.准备工作

　　（1）安装ruby环境

　　　　redis集群管理工具redis-trib.rb依赖ruby环境，首先需要安装ruby环境：

　　　　　　yum -y install ruby

　　　　　　yum -y install rubygems

　　（2）安装ruby和redis的接口程序

　　　　拷贝redis-3.0.0.gem至/usr/local下；

　　　　执行安装：

　　　　　　gem install /usr/local/redis-3.0.0.gem

2.集群规划

　　（1）Redis集群最少需要6个节点，可以分布在一台或者多台主机上。在教案在一台主机上创建伪分布式集群，不同的端口表示不同的redis节点，如下：

　　　　主节点：192.168.56.3:7001 192.168.56.3:7002 192.168.56.3:7003

　　　　从节点：192.168.56.3:7004 192.168.56.3:7005 192.168.56.3:7006

　　（2）在/usr/local/redis下创建redis-cluster目录，其下创建7001、7002。。7006目录，如下：

　　（3）将redis解压路径下的配置文件redis.conf，依次拷贝到每个700X目录内，并修改每个700X目录下的redis.conf配置文件：

　　　　port 700X

　　　　bind 192.168.56.3

　　　　cluster-enabled yes

　　　　建议配置：开启后台模式  daemonized  yes

　　　　指定日志输出的文件    logfile  /usr/local/redis/redis-cluster/7001/node1.log

3.启动每个结点redis服务

　　依次以700X下的redis.conf，启动redis节点。（必须指定redis.conf文件）

　　./redis-server /../700X/redis.conf

　

4.执行创建集群命令

　　进入到redis源码存放目录/home/redis/redis-4.10.3/src下，执行redis-trib.rb，此脚本是ruby脚本，它依赖ruby环境。

./redis-trib.rb create --replicas 1 192.168.4.253:7001 192.168.4.253:7002 192.168.4.253:7003 192.168.4.253:7004 192.168.4.253:7005  192.168.4.253:7006

5.查询集群信息

　　集群创建成功登陆任意redis结点查询集群中的节点情况。

　　./redis-cli -c -h 192.168.56.3 -p 7001

　　说明：

　　　　./redis-cli -c -h 192.168.56.3 -p 7001 ，其中:

　　　　-c表示以集群方式连接redis，

　　　　-h指定ip地址，

　　　　-p指定端口号

　　　　cluster nodes 查询集群结点信息；

　　　　cluster info 查询集群状态信。

二.添加主节点

1.节点规划

　　　集群创建成功后可以向集群中添加节点，下面是添加一个master主节点

　　　添加7007节点，参考集群结点规划章节添加一个“7007”目录作为新节点。

　　　添加节点，执行下边命令：

　　　./redis-trib.rb add-node  192.168.23.20:7007 192.168.23.20:7001

　　查看集群结点发现7007已添加到集群中：

2.hash槽重新分配

　　添加完新的主节点后，需要对主节点进行hash槽分配，这样该主节才可以存储数据。

　　redis集群有16384个槽，被所有的主节点共同分配，通过查看集群结点可以看到槽占用情况。

　　给刚添加的7007结点分配槽：

　　第一步：连接上集群

　　./redis-trib.rb reshard 192.168.23.20:7001（连接集群中任意一个可用节点都行）

　　第二步：输入要分配的槽数量

　　输入 500表示要分配500个槽

　　第三步：输入接收槽的结点id

　　这里准备给7007分配槽，通过cluster nodes查看7007结点id为79bbb30bba66b4997b9360dd09849c67d2d02bb9

　　输入：79bbb30bba66b4997b9360dd09849c67d2d02bb9

　　第四步：输入源结点id

　　这里输入all

　　第五步：输入yes开始移动槽到目标结点id

3.添加从节点

　　集群创建成功后可以向集群中添加节点，下面是添加一个slave从节点。

　　添加7008从结点，将7008作为7007的从结点。

新增从节点命令格式：

　　   ./redis-trib.rb add-node --slave --master-id masterID newNodIP:port MasterIP:port

　　　　masterID       主节点id，从cluster  nodes信息中查看

　　　　newNodIP:port     新增节点的ip：端口

　　　　MasterIP:port        主节点的ip：端口

　　执行如下命令：

　　　　./redis-trib.rb add-node --slave --master-id 909c349f5f2d4db015101fb7c4e3c227a74ad382 192.168.4.253:7008 192.168.4.253:7007

　　　　79bbb30bba66b4997b9360dd09849c67d2d02bb9  是7007结点的id，可通过cluster nodes查看。

　　注意：

　　　　如果原来该结点在集群中的配置信息已经生成cluster-config-file指定的配置文件中（如果cluster-config-file没有指定则默认为nodes.conf），这时可能会报错：

　　　　[ERR] Node XXXXXX is not empty. Either the node already knows other nodes (check with CLUSTER NODES) or contains some key in database 0

　　　　解决方法：

　　　　删除生成的配置文件nodes.conf，删除后再执行./redis-trib.rb add-node指令。

　　查看集群中的结点，刚添加的7008为7007的从节点：

4.删除结点

　　删除节点命令格式：

　　./redis-trib.rb del-node nodeIP:port nodeID

　　nodeIP:port    待删除节点的ip:端口

　　nodeID             待删除节点的id，从cluster node中查看

　　删除已经占有hash槽的结点会失败，报错如下：

　　[ERR] Node 127.0.0.1:7005 is not empty! Reshard data away and try again.

　　需要将该结点占用的hash槽分配出去（参考hash槽重新分配）。