redis的主从复制master/slaver
什么是Redis的复制
就是我们常说的主从复制,主机数据更新后根据配置和策略,自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主.
复制原理
Slave启动成功连接到master后会发送一个sync命令;
Master接到命令,启动后的存盘进程,同时收集所有接收到的用于修改数据集命令,在后台进程执行完毕之后,master
将传送整个数据文件到slave,以完成一次完全同步;
全量复制:而slave服务在数据库文件数据后,将其存盘并加载到内存中;增量复制:Master继续将新的所有收集到的修改命令依次传给slave,完成同步;但是只要是重新连接master,一次完全同步(全量复制)将被自动执行。
能干嘛?
读写分离
容灾恢复
主从复制准备工作
配从(库)不配主(库)
从库配置命令
#配置从库
slaveof 主库ip 主库端口
#查看主从信息
info replication
每次与master断开后,都需要重新连接,除非你配置进redis.conf文件
复制多个配置文件,修改不同的配置文件细节操作:
- 拷贝多个redis.conf文件,按'redis[port].conf'重命名
- 开启daemonize yes
- pid:指定配置文件名字redis[port].conf
- 指定端口:
- dbfilename:指定dump.rdb名字,dump[port].rdb
常用的主从方式:一主二仆、薪火相传、反客为主
一主二仆
含义:就是一个Master两个Slave
配置redis.conf开放三个端口6379,6380,6381
linux命令:
6380: slaveof 127.0.0.1 6379 6381: slaveof 127.0.0.1 6379

initial

一个master两个slaver
首次执行slave1、slave2的主从复制,任意切入点获取,均是全量复制

日志查看,日志位于/usr/local/bin下,三台redis,三个日志文件
日志文件名即在redis.conf当中配置的文件名:
logfile:指定日志文件名字[port].log
主机日志

从机日志

通过info replication查看主从信息

主从问题演示
- 从机是否可以写?set可否?
- 答:从机不可写,不可set,主机可写
- 主机shutdown后情况如何?从机是上位还是原地待命
- 答:从机还是原地待命(咸鱼翻身,还是咸鱼)
第一次slave1 和slave2切入点,是全量复制(比如从k4进来,那之前的k1k2k3也成功复制),之后是增量复制 。

主机可以写,但是从机不可以写,从机只能读

主机shutdowm后从机待机状态,等主机回来后,主机新增记录从机可以顺利复制
从机shutdowm后,每次与master断开之后,都需要重新连接,除非你配置进redis.conf文件
从机复制到的数据,会被本机持久化。就算shutdown断开连接依然会有数据。
重新连接或者变更master,会清除之前的数据,重新建立拷贝最新的数据
薪火相传
Linux命令:
6380: slaveof 127.0.0.1 6379 6381: slaveof 127.0.0.1 6380

含义:就是上一个Slave可以是下一个slave的Master。
Slave同样可以接收其他slaves的连接和同步请求,那么该slave作为了链条中下一个slave的master,可以有效减轻master的写压力。
注意:虽然有slave是相对master,但是依然是slave。
反客为主
比如6379挂掉:
shutdown exit
在6380下执行Linux命令,使当前数据库停止与其他数据库的同步,转成主数据库。
SLAVEOF no one
接下来,其他的slave当中如6381,要么静默等待老master也就是6379复活自动重新挂在6379下面。
要么跟着新老板6380.
slaveof 127.0.0.1 6380
哨兵模式(sentinel)
一组sentinel能同时监控多个master
是什么
反客为主的自动版,能够后台监控主机是否故障,如果故障了根据投票数自动将从库转换为主库。
怎么玩(使用步骤)
- 调整结构,6379带着6380、6381
- 新建sentinel.conf空文件,名字绝不能错
- 配置哨兵,填写内容
sentinel monitor 被监控主数据库名字(自己起名字) 127.0.0.1 6379 1- 上面最后一个数字1,表示主机挂掉后salve投票,得票数多少后成为主机(PS. 跟官网的描述有出入,下面有官方文档说明)
- 启动哨兵
redis-sentinel /sentinel.conf(上述目录依照各自的实际情况配置,可能目录不同)
- 正常主从演示
- 原有的master挂了
- 投票新选
- 重新主从继续开工,info replication查看
问题:如果之前挂了的master重启回来,会不会双master冲突? 答: 不会,原master,变成slave
sentinel monitor <master-group-name> <ip> <port> <quorum>For the sake of clarity, let's check line by line what the configuration options mean:
The first line is used to tell Redis to monitor a master called mymaster, that is at address 127.0.0.1 and port 6379, with a quorum of 2. Everything is pretty obvious but the quorum argument:
- The quorum is the number of Sentinels that need to agree about the fact the master is not reachable, in order to really mark the master as failing, and eventually start a failover procedure if possible.
- However the quorum is only used to detect the failure. In order to actually perform a failover, one of the Sentinels need to be elected leader for the failover and be authorized to proceed. This only happens with the vote of the majority of the Sentinel processes.
So for example if you have 5 Sentinel processes, and the quorum for a given master set to the value of 2, this is what happens:
- If two Sentinels agree at the same time about the master being unreachable, one of the two will try to start a failover.
- If there are at least a total of three Sentinels reachable, the failover will be authorized and will actually start.
In practical terms this means during failures Sentinel never starts a failover if the majority of Sentinel processes are unable to talk (aka no failover in the minority partition).
quorum 英 [ˈkwɔːrəm] 美 [ˈkwɔːrəm]
n. (会议的)法定人数
复制的缺点
复制延时
由于所有的写操作都是先在Master上操作,然后同步更新到slave上,所以从Master同步到Slave机器有一定的延迟,当系统很繁忙的时候,延迟问题会更加严重,Slave机器数量的增加也会使这个问题更加严重。
redis的主从复制master/slaver的更多相关文章
- Redis 的主从复制(Master/Slave)
目录 1. 是什么 2. 能干嘛 3. Redis主从复制讲解 (1). info replication:查看 目标redis 主从情况 (2) . 配从库不配主库 (3). 常用策略 (4). 复 ...
- Redis主从复制(Master/Slave)
Redis主从复制(Master/Slave) 修改配置文件 拷贝多个redis.conf文件分别配置如下参数: 开启daemonize yes pidfile port logfile dbfile ...
- Redis主从复制(Master/Slave) 与哨兵模式
Redis主从复制是什么? 行话:也就是我们所说的主从复制,主机数据更新后根据配置和策略, 自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主 Redis主从复制 ...
- Redis实现主从复制(Master&Slave)
由于前段时间公司项目比较赶,一直抽不出时间写博客,今天偷空写一篇吧.前面给大家讲解了单机版redis的基本操作,现在继续给大家讲解一下Redis的进阶部分,主从复制和读写分离. 一.Master&am ...
- Redis系列七 主从复制(Master/Slave)
主从复制(Master/Slave) 1.是什么 也就是我们所说的主从复制,主机数据更新后根据配置和策略,自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主. 2 ...
- Redis 部署方式(单点、master/slaver、sentinel、cluster) 概念与区别
转载自 https://blog.csdn.net/java_zyq/article/details/83818341 在K8S上部署Redis集群时突然遇到一个(sentinel哨兵模式)概念,感觉 ...
- 4、解析配置文件 redis.conf、Redis持久化RDB、Redis的主从复制
1.Units单位 配置大小单位,开头定义了一些基本的度量单位,只支持bytes,不支持bit 对大小写不敏感 2.INCLUDES包含 和我们的Struts2配置文件类似,可以通过includes包 ...
- Redis的复制(Master/Slave)
是什么 : 也就是我们所说的主从复制,主机数据更新后根据配置和策略,自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主 能干嘛: 读写分离,容灾恢复 怎么玩: 1 ...
- Redis学习十:Redis的复制(Master/Slave)【重要】
一.是什么 官网 行话:也就是我们所说的主从复制,主机数据更新后根据配置和策略,自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主 二.能干嘛 读写分离 容灾恢 ...
- redis的主从复制和哨兵模式
Redis主从复制是什么? 行话:也就是我们所说的主从复制,主机数据更新后根据配置和策略, 自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主 Redis主从复制 ...
随机推荐
- 读论文《Reinforced Attention for Few-Shot Learning and Beyond》
2022年4月22日,实验室开组会,我讲了论文<Reinforced Attention for Few-Shot Learning and Beyond>,最近整理资料又再读了一遍,这里 ...
- 词云图大师(WordCloudMaster)上线Web端!
我们非常激动地宣布,词云图大师(WordCloudMaster)现已正式上线Web端!这一全新版本为用户带来了更多的便捷和功能,让创建和分享词云变得更加轻松.无论是企业.教育机构还是个人用户,都可以通 ...
- 【运维技巧】海豚调度工作流实例卡在正在停止&任务实例卡在正在运行怎么办?
在大数据调度系统中,,大家可能会碰到任务实例状态更新不及时的情况. 对于Apache DolphinScheduler用户来说,这可能意味着前端显示的任务状态与实际情况不一致,即使任务已经在后台停止运 ...
- 朋友吐槽我为什么这么傻不在源生成器中用string.GetHashCode, 而要用一个不够优化的hash方法
明明有更好的hash方法 有位朋友对我吐槽前几天我列举的在源生成器的生成db映射实体的优化点 提前生成部分 hashcode 进行比较 所示代码 public static void Generate ...
- CUDA常见编译器配置问题一览
CUDA常见编译器配置问题一览 关注TechLead,复旦博士,分享云服务领域全维度开发技术.拥有10+年互联网服务架构.AI产品研发经验.团队管理经验,复旦机器人智能实验室成员,国家级大学生赛事评审 ...
- Jenkins部署架构概述
1.Jenkins是什么 Jenkins是一个开源的.提供友好操作界面的持续集成(CI)工具,起源于Hudson,主要用于持续.自动的构建/测试软件项目.监控外部任务的运行. Jenkins用Java ...
- 瑞芯微-I2S | 音频驱动调试基本命令和工具-基于rk3568-2
基于Linux嵌入式设备常用调试方法很多,本文一口君把调试语音用到的工具和方法给大家做一个简单的介绍. 1. procfs.sysfs Linux系统上的/proc目录是一种文件系统,即proc文件系 ...
- Cookie,Session Filter,Listener详解
HTTP请求的无状态性 HTTP的无状态性是其一个重要的特征,指的是HTTP协议本身并不保留客户端与服务器交互的历史信息,换而言之,即每次的HTTP请求都是独立的,服务器在处理每一个请求时都不会记住前 ...
- 消息队列为什么选用redis?聊聊如何做技术方案选型?
消息队列为什么选用redis?聊聊如何做技术方案选型? 老生常谈,消息队列主要有几大用途: 解耦:下单完成之后,需要订单服务去调用库存服务减库存,调用营销服务加营销数据. 引入消息队列,可以把订单完成 ...
- 【LLM训练系列】从零开始训练大模型之Phi2-mini-Chinese项目解读
一.前言 本文主要是在复现和实践Phi2-mini-Chinese后,简要分析下Phi2-mini-Chinese这个项目,做一个学习实战总结. 原文发布于知乎:https://zhuanlan.zh ...