Redis 单机模式很简单,相关测试水文看这里

Redis5 压力测试结果反馈报告

必须的,今天接着写水文,写一写现在redis 支持的三种集群,主从模式,哨兵模式,Cluster模式,今天先搞主从模式

主从模式

主从模式是最简单的集群模式,其实就是复制基本只能解决读写分离问题,主机服务器一旦宕机基本完蛋,不具备高可用

基本上redis的性能瓶劲主要在于网络IO和内存主频上面,单机版Redis在不考虑高可用的情况下基本满足80%的项目需要,因为单机版Redis可以实现10W/S的请求,除非缓存K-V值过大,通过读写分离缓存网卡的压力,否则这个并发处理能力可以应对大部分项目。

几乎所有的主从模式都是从服务器只提供只读不写的功能,否则会出现数据不一致的情况,现在无论那种数据库都不支持双向同步。

屁话少说,上配置代码,主服务器不需要配置,只需简单一句代码配置从服务器即可,声明主服务器是谁,余下的redis会自行交流。

slaveof 192.168.3.143 6379

一主多从

主服务器:192.168.3.143
从服务器:192.168.3.144
从服务器:192.168.3.145 从服务器 redis.conf 配置文件加入
slaveof 192.168.3.143 6379

  

一主多从(链式结构),所谓链式结构就是可以从服务器同步从服务器

主服务器:192.168.3.143
从服务器:192.168.3.144
从服务器:192.168.3.145 从服务器 redis.conf 配置文件加入
slaveof 192.168.3.143 6379
从服务器:192.168.3.147 
从服务器 redis.conf 配置文件加入
slaveof 192.168.3.144 6379

尝试一下程序上来实现读写分离,Net Core 使用StackExchange.Redis 进行访问Redis集群,其它组件自己研究吧

//声明服务器地址,StackExchange会自己认别那个是主从关系
ConfigurationOptions option = new ConfigurationOptions();
option.EndPoints.Add("192.168.3.143", 6379);
option.EndPoints.Add("192.168.3.144", 6379);
option.EndPoints.Add("192.168.3.145", 6379);
option.EndPoints.Add("192.168.3.147", 6379);
ConnectionMultiplexer redis = ConnectionMultiplexer.Connect(option); IDatabase db = redis.GetDatabase();
db.StringSet("test", "testvalue", flags: CommandFlags.DemandMaster);//CommandFlags.DemandMaster 标明主服务器写入
string value = db.StringGet("test", flags: CommandFlags.DemandReplica);//CommandFlags.DemandReplica 标明从服务器读取
Console.WriteLine(value);

代码行得通,己经分别从主/从服务器读取到数据,接下来将是要测试,主服务器倒下来了,会是怎么样?如图:成功报错,恭喜某程序猿喜提系统异常一次

 

接下三张图片将展示依次关闭从服务器:192.168.3.147,192.168.3.145 ,192.168.3.144  最后一张图将意味着己关闭所有从服务器,所有从服务器己关闭,程序运行成功报错

  

接着测试一下,StackExchange.Redis 框架问题,而对三个从服务器是否能分流从不同的从服务器取值,从而减轻从服务器的压力

  

从监控的图片来,三张从服务器的图标显示,StackExchange.Redis的确平均的分流的请求的流量。

哨兵模式

哨兵模式基本就是主从模式的升级版,主要解决高可用问题,实现自动容错和恢复

简单理解就是主从模式一旦主机服务器宕机需要人工处理,这样一来你或者运维,得有一个睡不着,Redis引进哨兵模式的作用就是监控Redis服务是否正常运作,主服务器出现故障将自动将从服务器转换为主服务器。

理想状态下的配置架构如下:哨兵监控主从服务器,哨兵之间相互监控,组成哨兵组推荐三个哨兵以上并且最好独立部署,唯一能节省成本的好消息就是他们可以监控多个主服务器。

工作原理:

  1. 每个哨兵都会监控主/从服务器及其它哨兵。
  2. 当有一个哨兵检查主服务器下线(没有规定时间回复ping请求),会将主服务器标识为主观下线
  3. 当主服务器被标为主观下线,其它哨兵会马上检查主服务在线状态。
  4. 当足够的哨兵(超过配置数量)将它标识为主观下线,主服务器会变成客观下线,如果数量不够则主观下线状态会除移。
  5. 主服务器客观下线之后哨兵会从“从服务器”中选中一台服务器当主服务器。
  6. 哨兵将修改其它从服务器以及被修复旧主服务器的配置,将统一修改为从服务器并且修改它们的主服务器地址。

注意:每个哨兵配置不一样,每个哨兵根据自己的配置超时时间来判断主服务器是否主观下线只有符合就标为主观下线,每个哨兵根据自己设定的“肯定数量”来判断主服务器是否客观下线,只要有一个哨兵的配置达到客观下线该哨兵就会执行故障迁移操作。

从服务器选举原理:

  1. 首先发现客观下线的哨兵会发起一个选举请求,根据Raft算法,一般会成为领头哨头。
  2. 根据与主服务器的断开的时间判断
  3. 根据从服务器配置文件的权重(slave-priority)选举为主服务器
  4. 复制偏移,从主节点收到更多的新数据的节点会被选择
  5. 在所有条件相同的情况,选择runid最小的为主服务器

配置:只需要配置主数据库即可,哨兵会自动发现所有从数据库并进行监控,哨兵之间可以相互发现,只要确保端口放行就可以了,简单版配置简单到只有一句话

sentinel monitor <master-group-name> <ip> <port> <quorum>
sentinel monitor mymaster 127.0.0.1 6379 2 //示例
//监控一个叫做mymaster的主节点,地址是 127.0.0.1 端口号是6379,判断客观下线需要2个哨兵“肯定”
//当然还有一些其它较为重要的配置,可以手动设定
sentinel down-after-milliseconds mymaster 60000 //设定检查超时时间,超过这个时间将认定为主观下线,默认30秒

下面进一些场景测试以验证观点,虽然支持采用默认配置的方式来进行启动,我们还是使用配置文件的方式进行启动

//主服务器
bind 0.0.0.0
port 6379
daemonize yes //从服务器
bind 0.0.0.0
port 6379
daemonize yes
slaveof 192.168.3.40 6379

测试场景一:简单版测试,一主一从一哨兵,主服务器故障,能否自动将从服务器转换为主服务器

sentinel monitor mymaster 192.168.3.40 6379 1
sentinel down-after-milliseconds mymaster 5000//内网配置五秒就足够了
daemonize yes

成功运行

编写检查代码

    class Program
{
static void Main(string[] args)
{
//声明服务器地址,StackExchange会自己认别那个是主从关系
ConfigurationOptions option = new ConfigurationOptions();
option.EndPoints.Add("192.168.3.40", 6379);
option.EndPoints.Add("192.168.3.167", 6379);
ConnectionMultiplexer redis = ConnectionMultiplexer.Connect(option); IDatabase db = redis.GetDatabase();
db.StringSet("test", "testvalue");
DateTime exStartTime = DateTime.Now;
DateTime exEndTime;
bool isEX = false;
while (true)
{
try
{
var value = db.StringGet("test");
Console.WriteLine(value);
if (!value.HasValue && isEX!)
Console.WriteLine(value);
if (isEX && value.HasValue == true)
{
exEndTime = DateTime.Now;
Console.WriteLine($"连接成功,获取的值是:{value}");
break;
}
}
catch (Exception e)
{
if (isEX == false)
{
Console.WriteLine($"连接失败!{e.Message}");
exStartTime = DateTime.Now;
isEX = true;
}
}
}
Console.WriteLine($"连接异常时间{exStartTime},故障迁移成功时间{exEndTime},花费{(exEndTime - exStartTime).TotalSeconds}秒");
}
}

悄悄打开ESXI 把虚拟机的网线拔掉

果然成功报错,并且进行故障转移

这个时候,重新把网络设置回来,并且查看两个redis.conf的配置文件内容,发现配置己被改动,192.168.3.40 己由主服务器转变成从服务器,哨兵的配置也相应作了改变

  

测试场景二:一主三从一哨兵

//主服务器(192.168.3.40)
bind 0.0.0.0
port 6379
daemonize yes //从服务器(192.168.3.167)
bind 0.0.0.0
port 6379
daemonize yes
slaveof 192.168.3.40 6379 //从服务器(192.168.3.168)
bind 0.0.0.0
port 6379
daemonize yes
slaveof 192.168.3.40 6379 //从服务器(192.168.3.169)
bind 0.0.0.0
port 6379
daemonize yes
slaveof 192.168.3.40 6379

哨兵的配置依旧不变

//哨兵服务器(192.168.3.171)
sentinel monitor mymaster 192.168.3.40 6379 1
sentinel down-after-milliseconds mymaster 5000//内网配置五秒就足够了
daemonize yes

一顿操作猛如虎,断掉网络

成功切换,看看这四台服务器的配置都发现了什么变化吧

   

测试场景三:一主三从三哨兵

主从服务器的配置不变,哨兵的配置稍有变化,哨兵的服务器由一台增加到三台,分别是192.168.3.171,192.168.3.172,192.168.3.170,哨兵能相互发现和相互监控

sentinel monitor mymaster 192.168.3.40 6379 2 //裁仲服务器由1台变成2台
sentinel down-after-milliseconds mymaster 5000//内网配置五秒就足够了
daemonize yes

好了,准备就绪,故技重演,断网

查看一下四台Redis服务器配置发生什么变化

   

查看一下,三台哨兵的配置发生什么变化

  

就测到这里吧,下班了,明天大伙要是有兴趣,再捣鼓一下,Cluster模式,就是分布式集群,不知道有没有人看这些水文

Redis5.0 主从模式和高可用 搭建和测试报告的更多相关文章

  1. Redis(二)冰叔带你了解Redis-哨兵模式和高可用集群解析

    前言    Redis 的 主从复制 模式下,一旦 主节点 由于故障不能提供服务,需要手动将 从节点 晋升为 主节点,同时还要通知 客户端 更新 主节点地址,这种故障处理方式从一定程度上是无法接受的. ...

  2. [转帖]【MySQL+keepalived】用keepalived实现MySQL主主模式的高可用

    [MySQL+keepalived]用keepalived实现MySQL主主模式的高可用 https://www.jianshu.com/p/8694d07595bc 一.实验说明 MySQL主主模式 ...

  3. hadoop+zookeeper集群高可用搭建

                                                                  hadoop+zookeeper集群高可用搭建 Senerity 发布于 2 ...

  4. hadoop 集群HA高可用搭建以及问题解决方案

    hadoop 集群HA高可用搭建 目录大纲 1. hadoop HA原理 2. hadoop HA特点 3. Zookeeper 配置 4. 安装Hadoop集群 5. Hadoop HA配置 搭建环 ...

  5. CYQ.Data 支持分布式数据库(主从备)高可用及负载调试

    前言: 继上一篇,介绍 CYQ.Data 在分布式缓存上支持高可用,详见:CYQ.Data 对于分布式缓存Redis.MemCache高可用的改进及性能测试 本篇介绍 CYQ.Data 在对数据库层面 ...

  6. (七) Docker 部署 MySql8.0 一主一从 高可用集群

    参考并感谢 官方文档 https://hub.docker.com/_/mysql y0ngb1n https://www.jianshu.com/p/0439206e1f28 vito0319 ht ...

  7. Redis5.0+哨兵模式+Keepalived实现高可用

    Redis主备配置 原理: 从服务器向主服务器发出SYNC指令,当主服务器接到此命令后,就会调用BGSAVE指令来创建一个子进程专门进行数据持久化工作,也就是将主服务器的数据写入RDB文件中.在数据持 ...

  8. CentOS6下OpenLDAP+PhpLdapAdmin基本安装及主从/主主高可用模式部署记录

    下面测试的部署机ip地址为:192.168.10.2051)yum安装OpenLDAP [root@openldap-server ~]# yum install openldap openldap- ...

  9. 通过keepalived搭建MySQL双主模式的高可用集群系统

    1. 配置MySQL双主模式 1.修改my.cnf配置文件 默认情况下,MySQL的配置文件是/etc/my.cnf,在配置文件的[mysqld]段添加如下内容: server-id=1 log-bi ...

随机推荐

  1. synchronized关键字的内存语义

    以下内容摘自:Java并发编程之美 加锁和释放锁的语义:当获取锁以后会清空锁块内本地内存中将会被用到的共享变量,在使用这些共享变量的时从主内存进行加载,在释放锁时将本地内存中修改的 共享变量刷新到主内 ...

  2. Shamir秘密共享方案 (Python)

    Shamir's Secret Sharing scheme is an important cryptographic algorithm that allows private informati ...

  3. yii2.0使用bootstrap中日期插件

    Yii2框架引用bootstrap中日期插件yii2-date-picker的方法. 使用composer安装 日期插件 php composer.phar require "2amigos ...

  4. Java8 Stream:2万字20个实例,玩转集合的筛选、归约、分组、聚合

    点波关注不迷路,一键三连好运连连! 先贴上几个案例,水平高超的同学可以挑战一下: 从员工集合中筛选出salary大于8000的员工,并放置到新的集合里. 统计员工的最高薪资.平均薪资.薪资之和. 将员 ...

  5. Luogu P43916 图的遍历

    我们把"u点能够到达的最大点"转化为反向图中能到达u点的所有点里的最大值,可知缩点后满足无后效性.val[i]的初值设为连通分量i中的最大点.反向存图,tarjan缩点,拓扑序dp ...

  6. GitHub 上 1.3k Star 的 strman-java 项目有值得学习的地方吗?源码视角

    大家好,我是沉默王二. 很多初学编程的同学,经常给我吐槽,说:"二哥,你在敲代码的时候会不会有这样一种感觉,写着写着看不下去了,觉得自己写出来的代码就好像屎一样?" 这里我必须得说 ...

  7. C++之父接受采访:对 C++ 成功的关键和发展历程进行了回顾

    C++ 的起源可以追溯到 40 年前,但它仍然是当今使用最广泛的编程语言之一. 到 2020 年 9 月为止,C++ 是仅次于 C 语言.Java 和 Python,位于全球第四的编程语言.根据最新的 ...

  8. 010 editor的使用

    原文链接:http://www.cnblogs.com/vendanner/p/4939444.html 注意事项:之前一直在虚拟机winxp中添加template一直失败,原因可能是因为虚拟机的版本 ...

  9. 【2020.11.30提高组模拟】剪辣椒(chilli)

    剪辣椒(chilli) 题目描述 在花园里劳累了一上午之后,你决定用自己种的干辣椒奖励自己. 你有n个辣椒,这些辣椒用n-1条绳子连接在一起,任意两个辣椒通过用若干个绳子相连,即形成一棵树. 你决定分 ...

  10. 树莓CM3开机连接WIFI

    两年没玩树莓派了,最近拿了一块CM3,发现启动后不能连接WIFI,网上的文章都是针对3B的,修改/etc/network/interfaces文件和/etc/wpa_supplicant/wpa_su ...