1、引言

Redis作为一种高性能的内存数据存储系统,常被用作缓存、会话存储、消息队列等多种应用场景。然而,由于其数据存储在内存中,一旦发生意外或服务器重启,数据就会丢失。为了保障数据的持久性和安全性。

Redis提供了多种持久化方案:

  • RDB(Redis DataBase):按指定的时间间隔执行数据集的时间点快照。
  • AOF(Append Only File):记录服务器收到的每个写入操作。
  • RDB + AOF:您还可以在同一实例中组合 AOF 和 RDB。

本文将探究以上三种持久化技术的工作原理、优缺点以及适用场景。

2、RDB持久化

RDB是Redis的默认持久化方式。它通过定期或手动执行快照将内存中的数据保存到磁盘上(dump.rdb)。触发RDB持久化过程分为手动触发和自动触发。

  • 手动触发:可通过SAVE和BGSAVE命令完成。
  • 自动触发:通过redis.conf文件增加save配置项完成,本质还是执行得BGSAVE命令。

那么SAVE和BGSAVE两个命令有什么区别呢?

SAVE:主线程操作,同步执行,会阻塞其它命令的执行。执行[save]命令时,RDB快照生成如果时间过长,后续请求会被阻塞,客户端新发送所有命令都会被拒绝。因此在生产环境中要谨慎使用该命令,避免影响服务的正常运行。

BGSAVE:写时复制,异步执行,不会阻塞其它命令的执行,会fork一个子进程进行操作,但这样比较消耗内存。主进程依旧保持与客户端的连接,正常执行读写命令。

2.1、手动触发

SAVE命令使用方法:

127.0.0.1:6379> SAVE

BGSAVE使用方法:

127.0.0.1:6379> BGSAVE

2.2、自动触发

RDB自动触发指的是通过在Redis的配置文件中设置特定的条件,使得Redis能够在满足这些条件时自动进行RDB持久化,而无需手动干预。这样可以确保数据定期地被保存到磁盘上,从而避免过多的数据丢失。

在Redis的配置文件redis.conf中,可以使用save配置项来设置RDB自动触发的条件。

save <seconds> <changes>

其中<seconds>表示多少秒内发生了<changes>次写操作,就会触发一次自动的RDB持久化。

可以设置多个save规则,每个规则独占一行,Redis会按照配置的顺序进行判断。例如:

save 900 1
save 300 10
save 60 10000

上述配置的意思分别是:在900秒内发生了至少1次写操作、在300秒内发生了至少10次写操作、在60秒内发生了至少10000次写操作时,Redis会自动触发RDB持久化。

3、AOF持久化

AOF持久化(Append Only File)以追加日志的形式记录Redis每个写操作并写入到一个文件中,即【appendonly.aof】文件。

AOF持久化过程可以简述如下:

  1. 写入操作记录:当Redis执行写操作时(如SET、INCR等),写入命令会追加到aof_buff(缓冲区)中。

  2. 文件同步:AOF缓冲区会根据配置定期进行同步到磁盘。

  3. AOF重写:为了避免AOF文件过大,Redis会定期进行AOF重写,达到压缩文件得目的。

3.1、触发方式

在redis.conf配置文件中,开启配置(默认不开启):

appendonly yes

# The name of the append only file (default: "appendonly.aof")

appendfilename "appendonly.aof"

持久化频率配置:

appendfsync always    # 每个写命令都同步,新的命令追加到aof文件,慢但安全

appendfsync everysec  # 每秒同步一次,丢失概率小

appendfsync no        # 从不主动同步,交给操作系统决定何时同步

3.2、AOF重写

当满足触发条件时,Redis会扫描整个实例的数据,重新生成一个AOF文件来完成一些多余命令的过滤,从而削减了文件大小。

重写流程:主进程fork出一个子进程进行AOF文件的重写,子进程重写完毕后,主进程把子进程重写期间,其他客户端产生的写请求,追加到AOF文件中,替换旧文件。

重写是如何缩减文件大小的,如:

  • 进程内已经超时的数据不再写入文件。
  • 旧的AOF文件含有无效命令,如del key1、hdel key2等。重写时使用进程内数据直接生成,这样新的AOF文件只保留最终数据的写入命令。
  • 多条写命令可以合并为一个。

AOF有两种触发方式:

  • 手动触发:直接调用bgrewriteaof命令。
  • 自动触发:redis.config配置如下
auto-aof-rewrite-percentage 100    # 百分比,AOF文件的增长率达到

auto-aof-rewrite-min-size 64mb     # AOF文件大小达到多少

上述配置的含义是,当AOF文件大小增长到当前AOF文件大小的100%时,Redis会自动触发AOF重写操作;同时,AOF文件大小至少达到64MB时,才会执行AOF重写。

4、混合持久化

在Redis4.0后新增了一种混合模式:RDB+AOF,将两者的优点进行整合,混合方式采用AOF方式记录数据的变化,采用RDB的方式进行二进制文件存储。也就是在写入的时候先把数据以RDB的形式写入文件的开头,再将后续的写命令以AOF格式追加到文件中。

redis.conf开启配置如下:

# 混合持久化开关
aof-use-rdb-preamble yes

5、RDB与AOF的优缺点对比

5.1、RDB

优点:

  • 性能高:对Redis的性能影响较小,适用于要求高性能的场景。
  • 适用于备份:生成的快照文件紧凑且压缩,适合用于备份和灾难恢复。

缺点:

  • 数据丢失:定期生成快照,如果Redis发生故障,最后一次快照后的数据会丢失。
  • 不适用于大规模数据:对于大规模数据集,可能导致长时间阻塞。

5.2、AOF

优点:

  • 更高的数据安全性:记录每个写操作,数据更可靠,适用于要求数据实时持久性的场景。
  • 数据可读性:AOF文件以易读的文本格式记录,方便查看和理解。

缺点:

  • 相同数据集的数据而言AOF文件要远大于RDB文件,恢复速度慢于RDB
  • AOF文件较大:随着写操作的增加,AOF文件会变得庞大。

综合来看,对于不同的应用场景,可以根据需求选择适合的持久化方式。RDB持久化适用于要求高性能和定期备份的场景;AOF持久化适用于要求数据实时持久性和较高数据安全性的场景;混合持久化则可以在兼顾数据实时性和备份需求的同时,提供更好的性能和数据保护。在配置持久化时,建议根据具体业务需求,综合考虑数据安全性、性能、存储空间等因素,选择合适的持久化策略。

Redis从入门到放弃(6):持久化的更多相关文章

  1. Redis 从入门到放弃

    Redis 从入门到放弃 http://www.iocoder.cn/Fight/Redis-went-from-getting-started-to-quitting/

  2. redis从入门到放弃 -> 部署方案

    单点部署方案 环境准备: [root@localhost ~]# cat /etc/redhat-release CentOS Linux release 7.2.1511 (Core) [root@ ...

  3. redis从入门到放弃 -> 简介&概念

    一.redis简介 Redis是一款开源的.高性能的键-值存储.它常被称作是一款数据结构服务器. 当值支持的主要数据类型为:字符串(strings)类型,括哈希(hashes).列表(lists).集 ...

  4. Redis——从入门到放弃

    redis简介 Redis is an open source (BSD licensed), in-memory data structure store, used as a database, ...

  5. OpenStack从入门到放弃

    OpenStack从入门到放弃 目录: 为何选择云计算/云计算之前遇到的问题 什么是云计算 云服务模式 云应用形式 传统应用与云感知应用 openstack及其相关组件介绍 flat/vlan/gre ...

  6. 超强、超详细Redis数据库入门教程

    这篇文章主要介绍了超强.超详细Redis入门教程,本文详细介绍了Redis数据库各个方面的知识,需要的朋友可以参考下 [本教程目录] 1.redis是什么2.redis的作者何许人也3.谁在使用red ...

  7. 绕过校园网的共享限制 win10搭建VPN服务器实现--从入门到放弃

    一.开篇立论= =.. 上次说到博主在电脑上搭建了代理服务器来绕过天翼客户端的共享限制,然而经过实际测试还不够完美,所以本着生命不息,折腾不止的精神,我又开始研究搭建vpn服务器= =... (上次的 ...

  8. Redis快速入门:安装、配置和操作

    本文是有关Redis的系列技术文章之一.在之前的文章中介绍了<Redis快速入门:初识Redis>,对Redis有了一个初步的了解.今天继续为大家介绍Redis如何安装.配置和操作. 系列 ...

  9. 超强、超详细Redis数据库入门教程(转载)

    这篇文章主要介绍了超强.超详细Redis入门教程,本文详细介绍了Redis数据库各个方面的知识,需要的朋友可以参考下   [本教程目录] 1.redis是什么 2.redis的作者何许人也 3.谁在使 ...

  10. Redis从入门到精通:初级篇

    原文链接:http://www.cnblogs.com/xrq730/p/8890896.html,转载请注明出处,谢谢 Redis从入门到精通:初级篇 平时陆陆续续看了不少Redis的文章了,工作中 ...

随机推荐

  1. go测试库之apitest

    前言 使用go语言做开发差不多快一年了,主要用来写后端Web服务,从一开始吐槽他的结构体,比如创建个复杂的JSON格式数据,那是相当的痛苦.还有 err 处理写的巨麻烦. 当然,go 也有爽的地方,创 ...

  2. plotly 坐标轴范围截断rangebreaks使用的一个注意点

    plotly坐标轴截断混合设置且指定设置截断时间的时候需要注意先后顺序 大范围的时间要在小范围的时间前设置,比如日内时间的截断要设置在日期截断的后面 同范围的规则截断要在指定截断前设置,对日期的截断, ...

  3. Git&GitHub简介与入手(一)

    一.Git版本控制 1.集中式版本控制工具:SVN(版本控制集中在服务器端,会有单点故障风险): 2.分布式版本控制工具:Git: 3.Git简史 Talk is cheap, show me the ...

  4. 2020-10-17:谈一谈DDD面向领域编程。

    福哥答案2020-10-17:#福大大架构师每日一题# [答案来自此链接](https://www.jianshu.com/p/fb319d7674ff) 一个通用领域驱动设计的架构性解决方案包含4 ...

  5. 2022-07-07:原本数组中都是大于0、小于等于k的数字,是一个单调不减的数组, 其中可能有相等的数字,总体趋势是递增的。 但是其中有些位置的数被替换成了0,我们需要求出所有的把0替换的方案数量:

    2022-07-07:原本数组中都是大于0.小于等于k的数字,是一个单调不减的数组, 其中可能有相等的数字,总体趋势是递增的. 但是其中有些位置的数被替换成了0,我们需要求出所有的把0替换的方案数量: ...

  6. django时区问题的解决

    django时区问题的解决  更新时间:2021年05月18日 09:37:58   作者:Silent丿丶黑羽     我们都知道时区,标准时区是UTC时区,django默认使用的就是UTC时区,我 ...

  7. 数据分析缺失值处理(Missing Values)——删除法、填充法、插值法

    缺失值指数据集中某些变量的值有缺少的情况,缺失值也被称为NA(not available)值.在pandas里使用浮点值NaN(Not a Number)表示浮点数和非浮点数中的缺失值,用NaT表示时 ...

  8. Python批量下载鼠标样式,自动化一条龙处理详解

    目录 前情提要 爬虫环境 抓包分析请求 编写代码: 展示效果 结束语 前情提要 最近发现一款特别好看的壁纸软件,其中提供了鼠标样式,感觉很好看!很精致!心想肯定是请求下载然后启用鼠标样式, 那么发送请 ...

  9. 代码随想录算法训练营Day18 二叉树

    代码随想录算法训练营 代码随想录算法训练营Day18 二叉树| 513.找树左下角的值 112. 路径总和 113.路径总和ii 106.从中序与后序遍历序列构造二叉树 105.从前序与中序遍历序列构 ...

  10. cv学习总结(SVM,softmax)10.24-10.30

    本周完成了SVM课程笔记的阅读,包括SVM的基本原理以及SVM的优化过程,以及实现了SVM的两种损失函数(svm以及softmax)的线性分类器,以及学习了反向传播以及神经网络的初步.其中:svm在测 ...