Update(stage3)：第1节 redis组件：10、redis集群

10、redis集群

1、redis集群的介绍

Redis 集群是一个提供在多个Redis节点之间共享数据的程序集。

Redis 集群并不支持同时处理多个键的 Redis 命令，因为这需要在多个节点间移动数据，这样会降低redis集群的性能，在高负载的情况下可能会导致不可预料的错误。

Redis 集群通过分区来提供一定程度的可用性，即使集群中有一部分节点失效或者无法进行通讯， 集群也可以继续处理命令请求。

Redis 集群的优势:

1.缓存永不宕机：启动集群，永远让集群的一部分起作用。主节点失效了子节点能迅速改变角色成为主节点，整个集群的部分节点失败或者不可达的情况下能够继续处理命令；

2.迅速恢复数据：持久化数据，能在宕机后迅速解决数据丢失的问题；

3.Redis可以使用所有机器的内存，变相扩展性能；

4.使Redis的计算能力通过简单地增加服务器得到成倍提升,Redis的网络带宽也会随着计算机和网卡的增加而成倍增长；

5.Redis集群没有中心节点，不会因为某个节点成为整个集群的性能瓶颈;

6.异步处理数据，实现快速读写。

2、redis集群环境搭建

由于redis集群当中最少需要三个主节点，每个主节点，最少需要一个对应的从节点，所以搭建redis集群最少需要三主三从的配置，所以redis集群最少需要6台redis的实例，我们这里使用三台机器，每台服务器上面运行两个redis的实例。我们这里使用node01服务器，通过配置不同的端口，实现redis集群的环境搭建

第一步：node01服务器解压redis压缩包

node01执行以下命令重新解压redis压缩包到/export路径下

cd /export/softwares/

tar -zxf redis-3.2.8.tar.gz -C /export/

第二步：安装redis必须依赖环境并进行编译

node01执行以下命令安装redis的依赖环境

yum -y install gcc-c++ tcl

对redis进行编译

cd /export/redis-3.2.8

make && make install

第三步：创建redis不同实例的配置文件夹

创建文件夹，并将redis的配置文件拷贝到以下这些目录

cd /export/redis-3.2.8

mkdir -p /export/redis-3.2.8/clusters/7001

mkdir -p /export/redis-3.2.8/clusters/7002

mkdir -p /export/redis-3.2.8/clusters/7003

mkdir -p /export/redis-3.2.8/clusters/7004

mkdir -p /export/redis-3.2.8/clusters/7005

mkdir -p /export/redis-3.2.8/clusters/7006

第四步：修改redis的六个配置文件

node01执行以下命令修改redis的配置文件

mkdir -p /export/redis-3.2.8/logs

mkdir -p /export/redis-3.2.8/redisdata/7001

mkdir -p /export/redis-3.2.8/redisdata/7002

mkdir -p /export/redis-3.2.8/redisdata/7003

mkdir -p /export/redis-3.2.8/redisdata/7004

mkdir -p /export/redis-3.2.8/redisdata/7005

mkdir -p /export/redis-3.2.8/redisdata/7006

第一个配置文件修改

vim  /export/redis-3.2.8/redis.conf

bind node01

port 7001

cluster-enabled yes

cluster-config-file nodes-7001.conf

cluster-node-timeout 5000

appendonly yes

daemonize yes

pidfile /var/run/redis_7001.pid

logfile "/export/redis-3.2.8/logs/7001.log"

dir /export/redis-3.2.8/redisdata/7001

将修改后的文件拷贝到对应的文件夹下面去

cp /export/redis-3.2.8/redis.conf /export/redis-3.2.8/clusters/7001

第二个配置文件修改

cp /export/redis-3.2.8/redis.conf /export/redis-3.2.8/clusters/7002

vim  /export/redis-3.2.8/clusters/7002/redis.conf

bind node01

port 7002

cluster-enabled yes

cluster-config-file nodes-7002.conf

cluster-node-timeout 5000

appendonly yes

daemonize yes

pidfile /var/run/redis_7002.pid

logfile "/export/redis-3.2.8/logs/7002.log"

dir /export/redis-3.2.8/redisdata/7002

第三个配置文件修改

cp /export/redis-3.2.8/redis.conf /export/redis-3.2.8/clusters/7003

vim  /export/redis-3.2.8/clusters/7003/redis.conf

bind node01

port 7003

cluster-enabled yes

cluster-config-file nodes-7003.conf

cluster-node-timeout 5000

appendonly yes

daemonize yes

pidfile /var/run/redis_7003.pid

logfile "/export/redis-3.2.8/logs/7003.log"

dir /export/redis-3.2.8/redisdata/7003

第四个配置文件修改

cp /export/redis-3.2.8/redis.conf /export/redis-3.2.8/clusters/7004

vim  /export/redis-3.2.8/clusters/7004/redis.conf

bind node01

port 7004

cluster-enabled yes

cluster-config-file nodes-7004.conf

cluster-node-timeout 5000

appendonly yes

daemonize yes

pidfile /var/run/redis_7004.pid

logfile "/export/redis-3.2.8/logs/7004.log"

dir /export/servers/redis-3.2.8/redisdata/7004

第五个配置文件修改

cp /export/redis-3.2.8/redis.conf /export/redis-3.2.8/clusters/7005

vim  /export/redis-3.2.8/clusters/7005/redis.conf

bind node01

port 7005

cluster-enabled yes

cluster-config-file nodes-7005.conf

cluster-node-timeout 5000

appendonly yes

daemonize yes

pidfile /var/run/redis_7005.pid

logfile "/export/redis-3.2.8/logs/7005.log"

dir /export/servers/redis-3.2.8/redisdata/7005

第六个配置文件修改

cp /export/redis-3.2.8/redis.conf /export/redis-3.2.8/clusters/7006

vim  /export/redis-3.2.8/clusters/7006/redis.conf

bind node01

port 7006

cluster-enabled yes

cluster-config-file nodes-7006.conf

cluster-node-timeout 5000

appendonly yes

daemonize yes

pidfile /var/run/redis_7006.pid

logfile "/export/redis-3.2.8/logs/7006.log"

dir /export/servers/redis-3.2.8/redisdata/7006

第五步：启动redis进程

node01执行以下命令来启动redis集群

cd /export/redis-3.2.8

src/redis-server clusters/7001/redis.conf

src/redis-server clusters/7002/redis.conf

src/redis-server clusters/7003/redis.conf

src/redis-server clusters/7004/redis.conf

src/redis-server clusters/7005/redis.conf

src/redis-server clusters/7006/redis.conf

第六步：安装ruby运行环境

node01执行以下命令，安装ruby运行环境，因为redis集群的启动需要借助ruby的环境

yum install ruby

yum install rubygems

gem install redis

这个时候可能会报错，如下：

这时，需要升级Ruby版本

node01执行以下命令升级ruby版本

cd /export/redis-3.2.8

gpg --keyserver hkp://keys.gnupg.net --recv-keys 409B6B1796C275462A1703113804BB82D39DC0E3 7D2BAF1CF37B13E2069D6956105BD0E739499BDB

curl -sSL https://get.rvm.io | bash -s stable

source /etc/profile.d/rvm.sh

rvm list known

rvm install 2.4.1

第七步：创建redis集群

node01执行以下命令创建redis集群

cd /export/redis-3.2.8

gem install redis

src/redis-trib.rb create --replicas 1 192.168.8.100:7001 192.168.8.100:7002 192.168.8.100:7003 192.168.8.100:7004 192.168.8.100:7005 192.168.8.100:7006

第八步：连接redis客户端

node01执行以下命令连接redis客户端

cd /export/redis-3.2.8

src/redis-cli  -h node01 -c -p 7001

3、redis集群管理

添加一个新节点作为主节点

启动新节点的redis服务，然后添加到集群当中去

启动服务

cd /export/redis-3.2.8

mkdir -p /export/redis-3.2.8/clusters/7007

mkdir -p /export/redis-3.2.8/redisdata/7007

src/redis-server clusters/7007/redis.conf

src/redis-trib.rb add-node 192.168.8.100:7007 192.168.8.100:7001

连接客户端：src/redis-cli -h node01 -c -p 7007

src/redis-cli -h node01 -c -p 7001

添加一个新节点作为副本

mkdir -p /export/redis-3.2.8/clusters/7008

mkdir -p /export/redis-3.2.8/redisdata/7008

src/redis-server clusters/7008/redis.conf

src/redis-trib.rb add-node --slave 192.168.8.100:7008 192.168.8.100:7001

删除一个节点

命令格式

src/redis-trib del-node 127.0.0.1:7000 `<node-id>`

src/redis-trib.rb del-node 192.168.100.100:7008 7c7b7f68bc56bf24cbb36b599d2e2d97b26c5540

注：node-id如何查看，执行命令： redis-trib.rb check 192.168.8.100:7001 ，可以查看所有节点的唯一id

重新分片

./redis-trib.rb reshard node01:7001

./redis-trib.rb reshard --from <node-id> --to <node-id> --slots <number of slots> --yes <host>:<port>

4、JavaAPI操作redis集群

详见代码