上一篇博文给大家介绍了redis持久化的方式之一RDB,其中说到过RDB的缺陷是可能会导致数据丢失严重,所以redis的作者

由于强迫症又开发出了AOF来你补这一不足。好接下来我将为大家介绍AOF。

一、AOF是什么?
        AOF全称Append Only File,以redis执行过的所有写指令记录下来(读操作不记录),只许追加文件但不可以改写文件,
redis启动之初会读取该文件重新构造数据,换言之,redis重启的话就根据日志文件的内容将写指令从前到后执行一次以完
成数据的恢复工作。
二、AOF保存的是appendonly.aof文件。
三、配置位置
    

1、appendonly no

是否使用AOF方式持久化数据(可以和RDB一起使用),AOF优先级更高。

2、appendfilename “appendonly.aof”

AOF持久化方式存储日志的文件名。

3、appendfsync everysec

AOF持久化策略,有三种取值:

- always:同步持久化,每次发生数据变更会被立即记录到磁盘,性能较差但数据完整性比较好;

- everysec:默认值,每秒同步记录,但如果一秒内宕机,有数据丢失;

- no:不同步。

4、no-appendfsync-on-rewrite no

重写时是否可以运行appendfsync,默认为no,保证数据安全性。

5、auto-aof-rewrite-min-size 100

当AOF文件大小是上次rewrite后大小的 x% 倍时再次重写,默认x为100,即AOF文件大小是上次rewrite后大小的一倍

时再次重写。

6、auto-aof-rewrite-percentage 64

第一次重写AOF文件时的文件大小,默认为64M。

四、AOF启动、修复、恢复

1、正常恢复:

- 启动:设置appendonly yes

- 将有数据的aof文件复制一份保存到对应目录(config get dir)

- 恢复:重启redis然后重新加载

2、异常恢复:

- 启动:设置appendonly yes

- 备份被写坏的AOF文件

- 修复:redis-check-aof --fix 进行修复,同理redis-check-dump --fix可以修复dump.rdb文件;

- 恢复:重启redis然后重新加载

五、AOF的rewrite(重写)

1、AOF的重写是什么?

AOF采用文件追加的方式,文件会越来越大。为避免出现文件无限大内容冗余的情况,新增了重写机制,当AOF文

件的大小超过所设定的阈值时,redis就会启动AOF文件的内容压缩,只保留可以恢复数据的最小指令集,可以使用命令

bgrewriteaof 。

2、重写原理

AOF文件持续增长而过大时,会fork出一条新进程来讲文件重写(也是先写临时文件在rename),遍历新进程的内

存数据,每条记录有一条set语句。注意,重写aof文件的操作,并没有读取旧的aof文件,而是将整个内存中的数据库内

容用命令的方式重写了一个aof文件,这点和快照有点类似。

3、触发机制

Redis会记录上次重写时AOF文件的大小,默认配置是当AOF文件大小是上次rewrite后大小的一倍且文件大于64M时触发。

六、优势

1、每修改同步:appendfsync always,同步持久化,每次发生数据变更会被立即记录到磁盘,性能较差但数据完整性比较好。

2、每秒同步:appendfsync everysec,异步操作,每秒记录,如果一秒内宕机,有数据丢失。

3、不同步:appendfsync no,从不同步。

七、劣势

1、相同数据集的数据而言aof文件要远大于rdb文件,恢复速度慢于rdb;

2、AOF运行效率要慢于rdb,每秒同步效率较好,不同步效率和rdb相同。

八、总结

1、RDB持久化方式能够在指定的时间间隔能对你的数据进行快照存储;

2、AOF持久化方式记录每次对服务器写的操作,当服务器重启的时候会重新执行这些命令来恢复原始的数据,AOF命令以

redis协议追加保存每次写的操作到文件末尾;

3、redis还能对AOF文件进行后台重写,使得AOF文件的体积不至于过大;

4、只做缓存:如果你只希望你的数据在服务器运行的时候存在,你也可以不使用任何持久化方式;

5、同时开启两种持久化方式

- 在这种情况下,当redis重启的时候会优先载入AOF文件来恢复原始数据,因为在通常情况下AOF文件保存的数据集要

比RDB文件保存的数据集要完整;

- RDB的数据不实时,同时使用两者时服务器重启也只会找AOF文件恢复数据。那要不要只使用AOF呢?作者建议不要,

因为RDB更适合用于备份数据库(AOF在不断变化不好备份),快速重启,而且不会有AOF可能潜在的bug,留着作

为一个万一的手段。

6、性能建议

- 因为RDB文件只用作后备用途,建议只在Slave上持久化RDB文件,而且只要15分钟备份一次就够了,只保留

save 900 1这条规则;

- 如果Enable AOF,好处是在最恶劣情况下也只会丢失不超过两秒数据,启动脚本较简单只load自己的AOF文件就可以

了。代价一是带来了持续的IO,二是AOF重写的最后将重写过程中产生的新数据写入新文件造成的堵塞几乎是不可避免

的。只要硬盘许可,应该尽量减少AOF重写的频率,AOF重写的基础大小默认值64M 太小了,可以设到5G以上。默认

超过原大小100%大小时重写可以改到适当的数值。

- 如果不Enable AOF,仅靠Master-Slave复制实现高可用性也可以。能省掉一大笔IO也减少了重写时带来的系统波动。代

价是如果Master和Slave同时挂掉,会丢失十几分钟的数据。启动脚本也要比较Master和Slave中的RDB文件,载入较新

的那个。新浪微博就选用了这种架构。

Redis的持久化——AOF的更多相关文章

  1. Redis学习六:Redis的持久化-AOF

    AOF(Append Only File) 一.是什么 以日志的形式来记录每个写操作,将Redis执行过的所有写指令记录下来(读操作不记录),只许追加文件但不可以改写文件,redis启动之初会读取该文 ...

  2. redis 数据持久化 aof方式

    redis持久化-Append-only file(缩写aof)的方式 本质:把用户执行的每个  ”写“ 指令(增加.修改.删除)都备份到文件中,还原数据的时候就是执行具体写指令. 打开redis的运 ...

  3. Redis的持久化的两种方式drbd以及aof日志方式

    redis的持久化配置: 主要包括两种方式:1.快照  2 日志 来看一下redis的rdb的配置选项和它的工作原理: save 900 1 // 表示的是900s内,有1条写入,则产生快照 save ...

  4. Redis数据持久化之AOF持久化

    一.RDB持久化的缺点创建RDB文件需要将服务器所有的数据库的数据都保存起来,这是一个非常耗费资源和时间的操作,所以服务器需要隔一段时间才能创建一个新的RDB文件,就也是说创建RDB文件的操作不能执行 ...

  5. redis的持久化 rdb和aof

    1.rdb(Redis DataBase) 当满足条件时,redis单独会fork(创建)一个新的线程,会先将内存中的数据写入到一个临时文件中,待持久化过程都结束了,再用这个临时文件替换上次已经持久化 ...

  6. redis持久化AOF与RDB

    RDB 持久化可以在指定的时间间隔内生成数据集的时间点快照(point-in-time snapshot). AOF 持久化记录服务器执行的所有写操作命令,并在服务器启动时,通过重新执行这些命令来还原 ...

  7. redis的持久化之AOF

    AOF Redis 分别提供了 RDB 和 AOF 两种持久化机制: RDB 将数据库的快照(snapshot)以二进制的方式保存到磁盘中. AOF 则以协议文本的方式,将所有对数据库进行过写入的命令 ...

  8. redis的持久化方式RDB和AOF的区别

    1.前言 最近在项目中使用到Redis做缓存,方便多个业务进程之间共享数据.由于Redis的数据都存放在内存中,如果没有配置持久化,redis重启后数据就全丢失了,于是需要开启redis的持久化功能, ...

  9. Redis之持久化(RDB AOF)

    Redis 提供了 RDB 和 AOF 两种持久化方案: RDB:生成指定时间间隔内的 Redis 内存中数据快照,是一个二进制文件 dumpr.rdb AOF:记录 Redis 除了查询以外的所有写 ...

随机推荐

  1. 【数据库-Azure SQL Database】SQL Server 如何将数据库备份到 Azure Storage

    打开本地的 SQL Server Management Studio.首先创建 Credentials.命令如下:   IF NOT EXISTS (SELECT * FROM sys.credent ...

  2. shell框架

    #!/bin/bash#注释#注释#环境变量相关,如下PATH=/sbin:/bin:/usr/bin:/usr/sbin #引入库函数,如下,类似于c语言的#include "*.h&qu ...

  3. CodeForces 219D Choosing Capital for Treeland (树形DP)

    题意:给一个树形图,n个节点,n-1条有向边,要求选一个节点作为根,使需要改变方向的边的数目最少.并输出所有可能作为根的点. 思路: 先随便一个点进行DFS,计算将每棵子树的边全部往下时,所需要的费用 ...

  4. UVA 1151 Buy or Build (最小生成树)

    先求出原图的最小生成树,然后枚举买哪些套餐,把一个套餐内的点相互之间边权为0,直接用并查集缩点.正确性是基于一个贪心, 在做Kruskal算法是,对于没有进入最小生成树的边,排序在它前面的边不会减少. ...

  5. 【page-monitor 前端自动化 中篇】 源码分析

    转载文章:来源(靠谱崔小拽) 上篇中初探了page-monitor的一些功能和在前端自动化测试方面的可行性,本篇主要分析下page-monitor的实现方式和源码. mode-module简介 pag ...

  6. OpenCV2:直方图

    一.简介 在一个单通道的灰度图像中,每个像素的值介于0(黑色)~255(白色)之间,灰色图像的直方图有256个条目(或称为容器)

  7. No-11.变量进阶

    变量进阶 目标 变量的引用 可变和不可变类型 局部变量和全局变量 01. 变量的引用 变量 和 数据 都是保存在 内存 中的 在 Python 中 函数 的 参数传递 以及 返回值 都是靠 引用 传递 ...

  8. Bootstrap历练实例:危险样式按钮

    <!DOCTYPE html><html><head> <meta http-equiv="Content-Type" content=& ...

  9. FTP实验报告

    FTP实验报告 制作人:全心全意 准备工作: linux1:192.168.100.4 关闭防火墙.selinux机制 配置yum源 匿名访问 1.安装vsftpd服务和客户端 [root@local ...

  10. GIL 线程/进程池 同步异步

    GIL 什么是GIL 全局解释器锁,本质是一把互斥锁,是加在cpython解释器上的一把锁, 同一个进程内的所有线程需要先抢到GIL锁,才能执行python代码 为什么要有GIL cpython解释器 ...