Redis集群搭建与简单使用

1.介绍安装环境与版本:

  1)Redis使用的是Redis-3.2.8版本。  

  2)用一台虚拟机模拟6个节点,三个master节点,三个slave节点。虚拟机使用CentOS6.5系统(192.168.0.132)。

2.原理介绍:

  Redis cluster在设计的时候,就考虑到了去中心化,去中间件,也就是说,集群中的每个节点都是平等的关系,都是对等的,每个节点都保存各自的数据和整个集群的状态。每个节点都和其他所有节点连接,而且这些连接保持活跃,这样就保证了我们只需要连接集群中的任意一个节点,就可以获取到其他节点的数据。  

  Redis 集群没有并使用传统的一致性哈希来分配数据,而是采用另外一种叫做哈希槽 (hash slot)的方式来分配的。redis cluster 默认分配了 16384 个slot,当我们set一个key 时,会用CRC16算法来取模得到所属的slot,然后将这个key 分到哈希槽区间的节点上,具体算法就是:CRC16(key) % 16384。所以我们在测试的时候看到set 和 get 的时候,直接跳转到了7001端口的节点。

  Redis 集群会把数据存在一个 master 节点,然后在这个 master 和其对应的salve 之间进行数据同步。当读取数据时,也根据一致性哈希算法到对应的 master 节点获取数据。只有当一个master 挂掉之后,才会启动一个对应的 salve 节点,充当 master 。

  需要注意的是:必须要3个或以上的主节点,否则在创建集群时会失败,并且当存活的主节点数小于总节点数的一半时,整个集群就无法提供服务了。

3.安装过程:

  1)解压并编译安装

    #mkdir -p /data/redis/cluster;cd /data/redis  //创建环境目录

    #tar -zxvf redis-3.2.8.tar.gz    //解压安装包

    #cd redis-3.2.8/        //进入到Redis源码包

    #make && make install    //编译并安装

  2)将 redis-trib.rb 复制到 /usr/local/bin 目录下,因为 redis-trib.rb 是基于Ruby的,所以还需要安装Ruby。

    #cd src;cp redis-trib.rb /usr/local/bin/

    #yum -y install ruby ruby-devel rubygems rpm-build  //安装Ruby和其依赖

    #gem install redis    //ruby安装redis依赖

  3)创建 Redis 节点

    #cd /data/redis/cluster && mkdir {7001..7006}

    #cp /data/redis/redis-3.2.8/redis.conf 7001/

    #cp /data/redis/redis-3.2.8/redis.conf 7002/

    #cp /data/redis/redis-3.2.8/redis.conf 7003/

    #cp /data/redis/redis-3.2.8/redis.conf 7004/

    #cp /data/redis/redis-3.2.8/redis.conf 7005/

    #cp /data/redis/redis-3.2.8/redis.conf 7006/

    分别修改六个配置文件:

    #vi redis.conf

    port 7001        //端口7001,7002,7003,7004,7005,7006

    bind 192.168.0.132            //默认ip为127.0.0.1 需要改为其他节点机器可访问的ip 否则创建集群时无法访问对应的端口,无法创建集群

    daemonize yes     //redis后台运行

    timeout 10000  //超时时间

    pidfile /var/run/redis_7001.pid           //pidfile文件对应7000,7001,7002

    cluster-enabled yes                //开启集群 把注释#去掉

    cluster-config-file nodes_7000.conf        //集群的配置 配置文件首次启动自动生成 7000,7001,7002

    cluster-node-timeout 15000            //请求超时 默认15秒,可自行设置

    appendonly yes              //aof日志开启 有需要就开启,它会每次写操作都记录一条日志 

    appendfsync everysec  //aof刷新方式

    #save 900 1
    #save 300 10
    #save 60 10000

    rdbcompression yes
    dbfilename dump.rdb

    loglevel verbose
    databases 16

    slave-serve-stale-data yes

    no-appendfsync-on-rewrite no
    auto-aof-rewrite-percentage 100
    auto-aof-rewrite-min-size 64mb
    slowlog-log-slower-than 10000
    slowlog-max-len 1024
    #hash-max-zipmap-entries 512
    #hash-max-zipmap-value 64
    list-max-ziplist-entries 512
    list-max-ziplist-value 64
    set-max-intset-entries 512
    zset-max-ziplist-entries 128
    zset-max-ziplist-value 64
    activerehashing yes

    //重命名危险命令,安全性

    rename-command config d6adsfk_config
    rename-command slaveof d6adsfk_slaveof
    rename-command flushall d6adsfk_flushall
    rename-command flushdb d6adsfk_flushdb
    ##rename-command shutdown d6adsfk_shutdown

    注:可以在vi的非编辑模式下使用正则批量替换端口:%s/6379/7001/g  enter即可。7002-7006类似,修改对应配置文件的端口即可。

  4)启动六个节点:

    #/data/redis/redis-3.2.8/src/redis-server /data/redis/cluster/7001/redis.conf &

    #/data/redis/redis-3.2.8/src/redis-server /data/redis/cluster/7002/redis.conf &

    #/data/redis/redis-3.2.8/src/redis-server /data/redis/cluster/7003/redis.conf &

    #/data/redis/redis-3.2.8/src/redis-server /data/redis/cluster/7004/redis.conf &

    #/data/redis/redis-3.2.8/src/redis-server /data/redis/cluster/7005/redis.conf &

    #/data/redis/redis-3.2.8/src/redis-server /data/redis/cluster/7006/redis.conf &

    #ps -ef | grep redis    //查看启动的进程

    

  5)创建集群:

    #redis-trib.rb create --replicas 1 192.168.0.132:7001 192.168.0.132:7002 192.168.0.132:7003 192.168.0.132:7004 192.168.0.132:7005 192.168.0.132:7006

    >>> Creating cluster
    >>> Performing hash slots allocation on 6 nodes...
    Using 3 masters:
    192.168.0.132:7001
    192.168.0.132:7002
    192.168.0.132:7003
    Adding replica 192.168.0.132:7004 to 192.168.0.132:7001
    Adding replica 192.168.0.132:7005 to 192.168.0.132:7002
    Adding replica 192.168.0.132:7006 to 192.168.0.132:7003
    M: 05244e4d6b721a733073b2a1ac7dc9f7a4145522 192.168.0.132:7001
    slots:0-5460 (5461 slots) master
    M: 5c3ed822213f1675e8e93911a12040f34844cf94 192.168.0.132:7002
    slots:5461-10922 (5462 slots) master
    M: 982985a7ad0f9b5800fc9315cc051d717bc870df 192.168.0.132:7003
    slots:10923-16383 (5461 slots) master
    S: 985b7e1b8a1c8e311c5d4ba2df3a455a18a6c2e6 192.168.0.132:7004
    replicates 05244e4d6b721a733073b2a1ac7dc9f7a4145522
    S: a688a187013bb6c7f22549fadda8eacc9dec6ec4 192.168.0.132:7005
    replicates 5c3ed822213f1675e8e93911a12040f34844cf94
    S: 550989f26bb0456df068e8d9c1a3476607b91dba 192.168.0.132:7006
    replicates 982985a7ad0f9b5800fc9315cc051d717bc870df
    Can I set the above configuration? (type 'yes' to accept): yes
    >>> Nodes configuration updated
    >>> Assign a different config epoch to each node
    >>> Sending CLUSTER MEET messages to join the cluster
    Waiting for the cluster to join....
    >>> Performing Cluster Check (using node 192.168.0.132:7001)
    M: 05244e4d6b721a733073b2a1ac7dc9f7a4145522 192.168.0.132:7001
    slots:0-5460 (5461 slots) master
    1 additional replica(s)
    S: a688a187013bb6c7f22549fadda8eacc9dec6ec4 192.168.0.132:7005
    slots: (0 slots) slave
    replicates 5c3ed822213f1675e8e93911a12040f34844cf94
    M: 5c3ed822213f1675e8e93911a12040f34844cf94 192.168.0.132:7002
    slots:5461-10922 (5462 slots) master
    1 additional replica(s)
    S: 550989f26bb0456df068e8d9c1a3476607b91dba 192.168.0.132:7006
    slots: (0 slots) slave
    replicates 982985a7ad0f9b5800fc9315cc051d717bc870df
    S: 985b7e1b8a1c8e311c5d4ba2df3a455a18a6c2e6 192.168.0.132:7004
    slots: (0 slots) slave
    replicates 05244e4d6b721a733073b2a1ac7dc9f7a4145522
    M: 982985a7ad0f9b5800fc9315cc051d717bc870df 192.168.0.132:7003
    slots:10923-16383 (5461 slots) master
    1 additional replica(s)
    [OK] All nodes agree about slots configuration.
    >>> Check for open slots...
    >>> Check slots coverage...
    [OK] All 16384 slots covered.

    其中,前三个 ip:port 为master节点,后三个ip:port为slave节点。创建过程中需要输入一次:yes。出现上面输出的信息表示安装成功。

  6)验证集群:

    连接7002这个master节点进行操作:

    #redis-cli -h 192.168.0.132 -c -p 7002

    

    注:set数据和get数据的时候转向时自动完成的,无需用户切换。所以不管连接到哪个节点上进行操作都会返回数据并跳转到该数据分片的节点上。

  说明集群运行正常,到此Redis的集群环境和简单实用操作结束。

参考连接:http://www.cnblogs.com/wuxl360/p/5920330.html

redis集群(单机6节点实现)的更多相关文章

  1. 峰Redis学习(10)Redis 集群(单机多节点集群和多机多节点集群)

    单机多节点集群:参考博客:http://blog.java1234.com/blog/articles/326.html 多机多节点集群:参考博客:http://blog.java1234.com/b ...

  2. Redis 集群环境添加节点失败问题

    最近在给公司网管系统Redis集群环境添加节点时候遇到一个问题,提示新增的Node不为空: [root@node00 src]# ./redis-trib.rb add-node --slave -- ...

  3. windows下配置redis集群,启动节点报错:createing server TCP listening socket *:7000:listen:Unknown error

    windows下配置redis集群,启动节点报错:createing server TCP listening socket *:7000:listen:Unknown error 学习了:https ...

  4. redis集群添加删除节点

    Redis3.0集群添加节点 1:首先把需要添加的节点启动 cd /usr/local/cluster/ mkdir 7006 cp /usr/local/cluster/redis.conf  /u ...

  5. redis 集群添加新节点

    准备好需要添加的节点:如何创建节点 启动创建的节点: 启动成功: 添加新节点:redis-cli --cluster add-node 127.0.0.1:7006 127.0.0.1:7000  第 ...

  6. redis集群添加新节点

    一.创建节点(接上文) 1.在H1服务器/root/soft目录下创建7002目录 2.将7001目录的配置文件redis.conf拷贝到7002,并修改配置文件的端口 3.进入 redis-5.0. ...

  7. Redis集群环境各节点无法互相发现与Hash槽分配异常 CLUSTERDOWN Hash slot not served的解决方式

    总结/朱季谦 在搭建Redis5.x版本的集群环境曾出现各节点无法互相发现与Hash槽分配异常 CLUSTERDOWN Hash slot not served的情况,故而把解决方式记录下来. 在以下 ...

  8. springBoot2.*使用redis集群/单机方法

    在springboot1.x系列中,其中使用的是jedis,但是到了springboot2.x其中使用的是Lettuce. 此处springboot2.x,所以使用的是Lettuce.关于jedis跟 ...

  9. 如何确定Redis集群中各个节点的主从关系

    1.首先通过命令(以192.168.203.141为例,-c代表集群的意思) ./redis-cli -h 192.168.203.141 -p 8001 -c 2.然后在输入  cluster no ...

  10. Redis集群中的节点如何保证数据一致

    主从复制: 1.redis的复制功能是支持多个数据库之间的数据同步.一类是主数据库(master)一类是从数据库(slave),主数据库可以进行读写操作,当发生写操作的时候自动将数据同步到从数据库,而 ...

随机推荐

  1. iostat命令浅析

    报告中央处理器(CPU)统计信息.整个系统.适配器.TTY 设备.磁盘 CD-ROM.磁带和文件系统的异步输入/输出(AIO)与输入/输出统计信息,iostat也有一个弱点,就是它不能对某个进程进行深 ...

  2. UWP入门(二) -- 基础笔记

    原文:UWP入门(二) -- 基础笔记 不错的UWP入门视频,1092417123,欢迎交流 UWP-04 - What i XMAL? XAML - XML Syntax(语法) ,create i ...

  3. java基础之super关键字

    一.在java里面,对于super关键字通常有两种用法: 1. 用在子类的构造方法里(初始化用),主要是调用父类的默认构造方法,如果父类有不止一个构造方法,可以通过super指定具体的构造函数,比如 ...

  4. Linux下卸载QT SDK

    unbuntu下卸载QT方法一:you can remove it like this, those developers should add this somewhere ! like next ...

  5. Delphi中,indy控件实现收发邮件的几点学习记录( 可以考虑加入多线程,用多个邮箱做一个邮箱群发器) 转

    关于用Delphi中的Indy控件实现收发邮件的几点学习记录             这几天心里颇不宁静,不是因为项目延期,而是因为自己几个月前做的邮件发送程序至今无任何进展,虽然一向谦虚的人在网上发 ...

  6. netty中的发动机--EventLoop及其实现类NioEventLoop的源码分析

    EventLoop 在之前介绍Bootstrap的初始化以及启动过程时,我们多次接触了NioEventLoopGroup这个类,关于这个类的理解,还需要了解netty的线程模型.NioEventLoo ...

  7. 『 效率工具 』Spring Boot版的轻量级代码生成器,减少70%以上的开发任务

    一. 前言 之前很着迷于代码自动生成,减少写重复代码的工作量.网络上也搜索了很久,有基于插件的,有GUI的.但其配置和学习成本都比较高,都不是很如我意. 本想自己用SpringBoot写一个,在收集相 ...

  8. 13 CSS样式权重问题

    <!-- 权重问题整体说明: 1.权重的意义:判定CSS属性的优先级高低,也就是说判定那个CSS的属性优先显示,将其他的低优先级的CSS样式覆盖掉. 2.如何判断权重:数选择器的数量,按照Id选 ...

  9. Hadoop 学习之路(八)—— 基于ZooKeeper搭建Hadoop高可用集群

    一.高可用简介 Hadoop 高可用 (High Availability) 分为 HDFS 高可用和 YARN 高可用,两者的实现基本类似,但 HDFS NameNode 对数据存储及其一致性的要求 ...

  10. Hadoop 学习之路(七)—— HDFS Java API

    一. 简介 想要使用HDFS API,需要导入依赖hadoop-client.如果是CDH版本的Hadoop,还需要额外指明其仓库地址: <?xml version="1.0" ...