什么是Redis的复制

​ 就是我们常说的主从复制,主机数据更新后根据配置和策略,自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主.

复制原理

  1. Slave启动成功连接到master后会发送一个sync命令;

  2. Master接到命令,启动后的存盘进程,同时收集所有接收到的用于修改数据集命令,在后台进程执行完毕之后,master

    将传送整个数据文件到slave,以完成一次完全同步;

  3. 全量复制:而slave服务在数据库文件数据后,将其存盘并加载到内存中;

  4. 增量复制:Master继续将新的所有收集到的修改命令依次传给slave,完成同步;

  5. 但是只要是重新连接master,一次完全同步(全量复制)将被自动执行。

能干嘛?

​ 读写分离

​ 容灾恢复

主从复制准备工作

配从(库)不配主(库)

从库配置命令

#配置从库
slaveof 主库ip 主库端口
#查看主从信息
info replication

每次与master断开后,都需要重新连接,除非你配置进redis.conf文件

复制多个配置文件,修改不同的配置文件细节操作:

  • 拷贝多个redis.conf文件,按'redis[port].conf'重命名
  • 开启daemonize yes
  • pid:指定配置文件名字redis[port].conf
  • 指定端口:
  • dbfilename:指定dump.rdb名字,dump[port].rdb

常用的主从方式:一主二仆、薪火相传、反客为主

一主二仆

含义:就是一个Master两个Slave

配置redis.conf开放三个端口6379,6380,6381

linux命令:

6380: slaveof 127.0.0.1 6379

6381:  slaveof 127.0.0.1 6379

 initial

 一个master两个slaver

首次执行slave1、slave2的主从复制,任意切入点获取,均是全量复制

 日志查看,日志位于/usr/local/bin下,三台redis,三个日志文件

日志文件名即在redis.conf当中配置的文件名:

logfile:指定日志文件名字[port].log

主机日志

从机日志

通过info replication查看主从信息

主从问题演示

  • 从机是否可以写?set可否?

    • 答:从机不可写,不可set,主机可写
  • 主机shutdown后情况如何?从机是上位还是原地待命
    • 答:从机还是原地待命(咸鱼翻身,还是咸鱼)
  • 第一次slave1 和slave2切入点,是全量复制(比如从k4进来,那之前的k1k2k3也成功复制),之后是增量复制  。

  • 主机可以写,但是从机不可以写,从机只能读

  • 主机shutdowm后从机待机状态,等主机回来后,主机新增记录从机可以顺利复制

  • 从机shutdowm后,每次与master断开之后,都需要重新连接,除非你配置进redis.conf文件

  • 从机复制到的数据,会被本机持久化。就算shutdown断开连接依然会有数据。

  • 重新连接或者变更master,会清除之前的数据,重新建立拷贝最新的数据

薪火相传

Linux命令:

6380: slaveof 127.0.0.1 6379

6381:  slaveof 127.0.0.1 6380 

含义:就是上一个Slave可以是下一个slave的Master。

Slave同样可以接收其他slaves的连接和同步请求,那么该slave作为了链条中下一个slave的master,可以有效减轻master的写压力。

注意:虽然有slave是相对master,但是依然是slave。

反客为主

比如6379挂掉:

shutdown

exit

在6380下执行Linux命令,使当前数据库停止与其他数据库的同步,转成主数据库。

SLAVEOF no one

接下来,其他的slave当中如6381,要么静默等待老master也就是6379复活自动重新挂在6379下面。

要么跟着新老板6380.

slaveof 127.0.0.1 6380

哨兵模式(sentinel)

一组sentinel能同时监控多个master

是什么

反客为主的自动版,能够后台监控主机是否故障,如果故障了根据投票数自动将从库转换为主库。

怎么玩(使用步骤)

  1. 调整结构,6379带着6380、6381
  2. 新建sentinel.conf空文件,名字绝不能错
  3. 配置哨兵,填写内容
    • sentinel monitor 被监控主数据库名字(自己起名字) 127.0.0.1 6379 1
    • 上面最后一个数字1,表示主机挂掉后salve投票,得票数多少后成为主机(PS. 跟官网的描述有出入,下面有官方文档说明)
  4. 启动哨兵
    • redis-sentinel /sentinel.conf (上述目录依照各自的实际情况配置,可能目录不同)
  5. 正常主从演示
  6. 原有的master挂了
  7. 投票新选
  8. 重新主从继续开工,info replication查看

问题:如果之前挂了的master重启回来,会不会双master冲突? 答: 不会,原master,变成slave

sentinel monitor <master-group-name> <ip> <port> <quorum>

For the sake of clarity, let's check line by line what the configuration options mean:

The first line is used to tell Redis to monitor a master called mymaster, that is at address 127.0.0.1 and port 6379, with a quorum of 2. Everything is pretty obvious but the quorum argument:

  • The quorum is the number of Sentinels that need to agree about the fact the master is not reachable, in order to really mark the master as failing, and eventually start a failover procedure if possible.
  • However the quorum is only used to detect the failure. In order to actually perform a failover, one of the Sentinels need to be elected leader for the failover and be authorized to proceed. This only happens with the vote of the majority of the Sentinel processes.

So for example if you have 5 Sentinel processes, and the quorum for a given master set to the value of 2, this is what happens:

  • If two Sentinels agree at the same time about the master being unreachable, one of the two will try to start a failover.
  • If there are at least a total of three Sentinels reachable, the failover will be authorized and will actually start.

In practical terms this means during failures Sentinel never starts a failover if the majority of Sentinel processes are unable to talk (aka no failover in the minority partition).

Source

quorum 英 [ˈkwɔːrəm] 美 [ˈkwɔːrəm]
n. (会议的)法定人数

复制的缺点

复制延时

由于所有的写操作都是先在Master上操作,然后同步更新到slave上,所以从Master同步到Slave机器有一定的延迟,当系统很繁忙的时候,延迟问题会更加严重,Slave机器数量的增加也会使这个问题更加严重。

 

redis的主从复制master/slaver的更多相关文章

  1. Redis 的主从复制(Master/Slave)

    目录 1. 是什么 2. 能干嘛 3. Redis主从复制讲解 (1). info replication:查看 目标redis 主从情况 (2) . 配从库不配主库 (3). 常用策略 (4). 复 ...

  2. Redis主从复制(Master/Slave)

    Redis主从复制(Master/Slave) 修改配置文件 拷贝多个redis.conf文件分别配置如下参数: 开启daemonize yes pidfile port logfile dbfile ...

  3. Redis主从复制(Master/Slave) 与哨兵模式

    Redis主从复制是什么? 行话:也就是我们所说的主从复制,主机数据更新后根据配置和策略, 自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主 Redis主从复制 ...

  4. Redis实现主从复制(Master&Slave)

    由于前段时间公司项目比较赶,一直抽不出时间写博客,今天偷空写一篇吧.前面给大家讲解了单机版redis的基本操作,现在继续给大家讲解一下Redis的进阶部分,主从复制和读写分离. 一.Master&am ...

  5. Redis系列七 主从复制(Master/Slave)

    主从复制(Master/Slave) 1.是什么 也就是我们所说的主从复制,主机数据更新后根据配置和策略,自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主. 2 ...

  6. Redis 部署方式(单点、master/slaver、sentinel、cluster) 概念与区别

    转载自 https://blog.csdn.net/java_zyq/article/details/83818341 在K8S上部署Redis集群时突然遇到一个(sentinel哨兵模式)概念,感觉 ...

  7. 4、解析配置文件 redis.conf、Redis持久化RDB、Redis的主从复制

    1.Units单位 配置大小单位,开头定义了一些基本的度量单位,只支持bytes,不支持bit 对大小写不敏感 2.INCLUDES包含 和我们的Struts2配置文件类似,可以通过includes包 ...

  8. Redis的复制(Master/Slave)

    是什么 : 也就是我们所说的主从复制,主机数据更新后根据配置和策略,自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主 能干嘛: 读写分离,容灾恢复 怎么玩: 1 ...

  9. Redis学习十:Redis的复制(Master/Slave)【重要】

    一.是什么 官网 行话:也就是我们所说的主从复制,主机数据更新后根据配置和策略,自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主 二.能干嘛 读写分离  容灾恢 ...

  10. redis的主从复制和哨兵模式

    Redis主从复制是什么? 行话:也就是我们所说的主从复制,主机数据更新后根据配置和策略, 自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主 Redis主从复制 ...

随机推荐

  1. Mybatis-Plus系统化学习之注解的使用

    1.背景 注解的使用 大多数请求下我们默认为有如下对应关系 1.数据库中的表名 ---> java中的实体类名 (下划线与驼峰转换) 2.数据中的id为主键 3.数据库中的字段名---> ...

  2. [简单] 树上的dfs & bfs_洛谷P5908 猫猫和企鹅

    题目链接https://www.luogu.com.cn/problem/P5908 题目大意: \[\begin{align*} & 给定n个点构成一颗树 每条边val=1\\ & ...

  3. 解决 Docker CE 在无根模式(rootless)下无法通过 IPv6 拉取映像的问题

    折腾一天快把我逼疯了 本来 Docker 对 IPv6 的支持就不好,再来个 rootless,雪上加霜 首先,我们要区分 Docker Engine 和 里面的 Image. 拉取映像是 Docke ...

  4. 信创环境:鲲鹏ARM+麒麟V10离线部署K8s和Rainbond信创平台

    在上篇<国产化信创开源云原生平台>文章中,我们介绍了 Rainbond 作为可能是国内首个开源国产化信创平台,在支持国产化和信创方面的能力,并简要介绍了如何在国产化信创环境中在线部署 Ku ...

  5. kafka 运维

    查看kafka topic列表 #集群需要先执行unset JMX_PORT ./kafka-topics.sh --zookeeper gitee-zookeeper:2181 --list 查看t ...

  6. 使用Kiota工具生成WebApi的代理类,以及接口调用的简单体验

    前言 当前.NET环境下,生成WebApi代理类的工具已经有很多选择了,比如OpenApi Generator,NSwag和Refitter等,不同的工具生成的代码风格以及实现方式略有不同,比如Ref ...

  7. PCIe简介

    PCIe简介 Peripheral Component Interconnect Express (PCI),高速串行计算机扩展总线标准,PCIe对外围设备的组织方式是树形结构. 拓扑结构 根: 树的 ...

  8. ASP.NET Core 如何紀錄 Entity Framework Core 5.0 自動產生的 SQL 命令

    在最近的幾個 Entity Framework Core 版本,對於 Logging (紀錄) 的撰寫方式一直在改變,大致上可區分成 EF Core 2.1 , EF Core 3.0+ 與 EF C ...

  9. 模N取余法实现大整数进制转换 ——C语言版(2-16进制均可)

    思路如标题所说采用模N取余法,难点是这个除法过程如何实现. 个人推荐先到这篇博客学习一下,大佬的思路就是不一样:大数除法--超详细讲解 我所做的就是在上面博文代码的基础上增加了循环,用一个字符数组逆序 ...

  10. Go runtime 调度器精讲(八):sysmon 线程和 goroutine 运行时间过长的抢占

    原创文章,欢迎转载,转载请注明出处,谢谢. 0. 前言 在 Go runtime 调度器精讲(七):案例分析 一文我们介绍了一个抢占的案例.从案例分析抢占的实现,并未涉及到源码层面.本文将继续从源码入 ...