前言

参考资料:《Redis设计与实现 第二版》;

第二部分为单机数据库的实现,主要由以下模块组成:数据库持久化事件客户端服务器

本篇将介绍 Redis 中的数据库;


1. Redis中的数据库

  • Redis服务器的所有数据库保存在redis.h/redisService结构的db数组中:

    struct redisService{
    //...
    //保存所有数据库的数组
    redisDB *db; //服务器的数据库数量
    int dbnum;
    //...
    }
    • dbnum属性由服务器配置的 database 选项决定,默认为 16;
  • Redis客户端数据库保存在在redisClient结构的db属性:

    typedef struct redisClient{
    //...
    //记录客户端当前正在使用的数据库
    redisDB *db;
    } redisClient;
    • 客户端通过修改目标数据库指针,让它指向 redisService.db 数组中的不同元素;
    • 可以通过 SELECT index 命令来切换数据库;

  • 数据库的定义在redis.h/redisDb结构中:

    typedef struct redisDb{
    //...
    //数据库键空间,保存数据库中所有的键值对
    dict *dict; //过期字典,保存着键的过期时间
    dict *expires;
    } redisDb;
    • 键空间的键是数据库的键,每个键是一个字符串对象;
    • 键空间的值是数据库的值,每个值可以是字符串对象列表对象哈希表对象集合对象有序集合对象中的一种;

2. 数据库的键空间

  • 数据库键空间是一个字典,所有针对数据库的操作都是通过键空间字典来操作的;
  • 在对键空间进行读写操作时,Redis 还会进行一些维护操作:
    • 读取键后,会根据键是否存在更新服务器的键空间命中 keyspace_hits 次数或键空间不命中 keyspace_misses 次数。通过 INFO stats 命令查看属性;
    • 读取键后,服务器会更新键的 LRU(最后一次使用时间)。通过 ONBJECT idlettime [key] 命令查看key的闲置时间;
    • 服务器在读取键时发现键已经过期,会先删除这个过期键;
    • 如果有客户端使用 WATCH 命令监视某个键,服务器对该键修改后会标记上脏 dirty,让事务处理程序注意;
    • 服务器每修改一个键后,会对脏 dirty 键计数器值增 1,计数器会触发服务器的持久化以及复制操作;

3. 键的生成时间与过期时间

  • 键的时间相关设置命令参看《Redis常用命令及示例总结》1.3 生存时间的功能
  • 生存时间:
    • 客户端可以通过 EXPIREPEXPIRE 命令以秒或毫秒精度为数据库中某个键设置生存时间(Time To Live,TTL)。经过指定时间后,服务器自动删除生存时间为0的键;
    • 可以通过 SETEX 命令在设置字符串键同时设置过期时间;
    • 使用 TTLPTTL 命令获取键的剩余生存时间;
  • 过期时间:
    • 客户端设置过期时间的命令是 EXPIREATPEXPIREAT
    • 过期时间是一个 UNIX 时间戳;
  • EXPIREPEXPIREEXPIREAT 三个命令都会转换成 PEXPIREAT 命令实现;

4. Redis中的过期键删除策略

  • 有三种删除过期键的策略:

    • 定时删除:主动策略。对内存最友好,到期就释放内存。缺点是对CPU事件不友好,当过期键比较多时,会占用一部分CPU时间;
    • 惰性删除:被动策略。对CPU时间最友好。每次从键空间获取键时,检查取得的键是否过期,过期则删除。缺点是对内存不友好;
    • 定期删除:主动策略。前两种策略的整合与折中。每隔一段时间执行一次删除过期键操作,并通过限制删除操作执行的时长与频率减少删除操作对CPU时间的影响。缺点是难以确定删除操作执行的时长和频率;
  • 惰性删除策略由 db.c/expireIfNeeded 函数实现,流程如下:

  • 定期删除策略由 redis.c/activeExpireCycle 函数实现,每当Redis的服务器周期性操作 redis.c/serverCron 函数执行时,activeExpireCycle 函数会被调用。在规定的时间内,分多次遍历服务器各个数据库,从数据库的 expires 字典中随机检查一部分过期时间,删除其中过期键;

5. AOF、RDB和复制功能对过期键的处理

5.1 生成 RDB 文件

  • 在执行 SAVEBGSAVE 命令创建一个新的 RBG 文件时,程序会对数据库中的键进行检查,已过期的键不会被保存到新创建的 RDB 文件中;

5.2 载入 RDB 文件

  • 载入 RDB 文件时:

    • 若服务器以主服务器模式运行,过期键不载入;
    • 若服务器以从服务器模式运行,所有键都会载入;

5.3 AOF 文件写入

  • 当服务器以 AOF 持久化模式运行时,未被惰性删除和定期删除的过期键不会对 AOF 文件产生影响;
  • 当过期键被惰性删除或定期删除后,程序会向 AOF 文件追加(append)一条 DEL 命令,显示记录该键已被删除;

5.4 AOF 重写

  • 与 RDB 文件类似,在执行 AOF 重写过程中,程序会对数据库中的键进行检查,已过期的键不会被保存到重写后的 AOF 文件中;

5.5 复制

  • 当服务器运行在复制模式下时,从服务器的过期键删除动作由主服务器控制;



6. 数据库通知

  • 数据库通知是 Redis 2.8 版本新增的功能;
  • 数据库通知可以让客户端通过订阅给定的频道或模式,来获知数据库中键的变化,以及数据库中命令的执行情况;
  • Redis 命令对数据库进行修改后,服务器会根据配置向客户端发送数据库通知;
  • 通知的相关命令可以参考 《Redis常用命令及示例总结》7. Pub/Sub(发布/订阅)
  • 两类通知类型:
    • 键空间通知 key-space notification:关注 “某个键执行了什么命令”;SUBSCRIBE channel:message
    • 键事件通知 key-event notification:关注 “某个命令被什么键执行了”;SUBSCRIBE channel:del
  • 服务器配置的 notify-keyspace-events 选项决定服务器所发送通知的类型:
    • AKE:发送所有类型的键空间和键事件通知;
    • AK:发送所有类型的键空间通知;
    • AE:发送所有类型的键事件通知;
    • K$:只发送字符串有关的键空间通知;
    • EL:只发送列表键有关的键事件通知;
  • 发送数据库通知的功能是由 notify.c/notifyKeyspaceEvent 函数实现;

最后

新人制作,如有错误,欢迎指出,感激不尽!
欢迎关注公众号,会分享一些更日常的东西!
如需转载,请标注出处!

Redis | 第4章 Redis中的数据库《Redis设计与实现》的更多相关文章

  1. Redis | 第11章 服务器的复制《Redis设计与实现》

    目录 前言 1. 旧版复制功能的实现 1.1 同步与命令传播 1.2 旧版复制功能的缺陷 2. 新版复制功能的实现 2.1 部分重同步的实现原理 3. PSYNC 命令的实现 4. 复制的详细步骤 4 ...

  2. Redis | 第12章 Sentinel 哨兵模式《Redis设计与实现》

    目录 前言 1. 启动并初始化 Sentinel 2. Sentinel 与服务器间的默认通信 2.1 获取主服务器信息 2.2 获取从服务器信息 2.3 向主服务器和从服务器发送信息 3. 接受来自 ...

  3. 我的Android六章:Android中SQLite数据库操作

    今天学习的内容是Android中的SQLite数据库操作,在讲解这个内容之前小编在前面有一篇博客也是讲解了SQLite数据库的操作,而那篇博客的讲解是讲述了 如何在Window中通过DOM来操作数据库 ...

  4. Redis 数据恢复方法,redis-port 工具将自建 redis 的 rdb文件同步到云数据库

    1. Redis 恢复的机制 如果只配置 AOF ,重启时加载 AOF 文件恢复数据: 如果同时配置了 RDB 和 AOF ,启动是只加载 AOF 文件恢复数据: 如果只配置 RDB,启动是将加载 d ...

  5. Redis Installation、Configuration、Program Based On Redis Learning

    目录 . Redis 简介 . Redis安装配置 . 编程使用Redis . 使用Lua脚本 1. Redis 简介 0x1: Redis是什么 Redis是一款Nosql类型的基于key-valu ...

  6. Android中SQLite数据库小计

    2016-03-16 Android数据库支持 本文节选并翻译<Enterprise Android - Programing Android Database Applications for ...

  7. 一篇文章带你了解NoSql数据库——Redis简单入门

    一篇文章带你了解NoSql数据库--Redis简单入门 Redis是一个基于内存的key-value结构数据库 我们会利用其内存存储速度快,读写性能高的特点去完成企业中的一些热门数据的储存信息 在本篇 ...

  8. PHP中的数据库三、redis

    h2:first-child, body>h1:first-child, body>h1:first-child+h2, body>h3:first-child, body>h ...

  9. [转]Node.js中koa使用redis数据库

    本文转自:https://blog.csdn.net/offbye/article/details/52452322 Redis是一个常用的Nosql数据库,一般用来代替Memcached做缓存服务, ...

随机推荐

  1. FastAPI 学习之路(十)请求体的字段

    系列文章: FastAPI 学习之路(一)fastapi--高性能web开发框架 FastAPI 学习之路(二) FastAPI 学习之路(三) FastAPI 学习之路(四) FastAPI 学习之 ...

  2. SQL Server 数据库单用户模式处理

    在还原数据库bak备份文件时,由于某种原因(具体何种原因在此不进行分析)导致数据库还原后处于单用户模式,如下图: 单个用户模式导致,数据库无法打开,只能通过脚本去查询数据库内的表,然后进行查询数据,极 ...

  3. Stream中的Collector收集器原理

    前言 Stream的基本操作因为平时工作中用得非常多(也能看到一些同事把Stream操作写得很丑陋),所以基本用法就不写文章记录了. 之所以能把Stream的操作写得很丑陋,完全是因为Stream底层 ...

  4. 从零开始的Spring Session(一)

    Session和Cookie这两个概念,在学习java web开发之初,大多数人就已经接触过了.最近在研究跨域单点登录的实现时,发现对于Session和Cookie的了解,并不是很深入,所以打算写两篇 ...

  5. 第一次Alpha Scrum Meeting

    本次会议为Alpha阶段第一次Scrum Meeting会议 会议概要 会议时间:2021年4月22日 会议地点:北航Inspiration Space咖啡厅 会议时长:1小时 会议内容简介:本次会议 ...

  6. 单片机STM32的5个时钟源知识

    众所周知STM32有5个时钟源HSI.HSE.LSI.LSE.PLL,其实他只有四个,因为从上图中可以看到PLL都是由HSI或HSE提供的. 其中,高速时钟(HSE和HSI)提供给芯片主体的主时钟.低 ...

  7. poj 2960 S-Nim (SG)

    题意: K个数,s1...sk. m个状态,对于某一个状态,有L堆石子,每人每次取的石子个数只能是s1...sk的一个,且只能在一堆中取. 输出m个状态是先手胜还是先手败,先手胜输出W,否则输出L. ...

  8. 安装、卸载 node.js出错 Could not access network location *:\node.js\ 出错

    上周五,WIN10自动更新系统,导致我的node.js 和 Gradle 还有解压的winRAR都不能用!!!可恶 自动更新!!可恶啊!!! 然后我想把node.js重新卸载了再安装,结果 很慌很慌, ...

  9. python基础数据类型语法

    #标识符:我们自己在写代码的时候,取的名字.#项目名 project name#包名 package name#模块名 .py ptthon文件名#规范:由字母数字下划线组成,但不能以数字#简明知意: ...

  10. 完美解决Github网页打开超慢的问题

    由于某些原因,国内访问Github会异常缓慢,在clone仓库时甚至只有10k以下的速度,下载半天有时还会失败需要从头再来,甚是让人恼火.本文介绍通过修改系统hosts文件的办法,绕过国内dns解析, ...