前言

参考资料:《Redis设计与实现 第二版》;

第二部分为单机数据库的实现,主要由以下模块组成:数据库持久化事件客户端服务器

本篇将介绍 Redis 中的数据库;


1. Redis中的数据库

  • Redis服务器的所有数据库保存在redis.h/redisService结构的db数组中:

    struct redisService{
    //...
    //保存所有数据库的数组
    redisDB *db; //服务器的数据库数量
    int dbnum;
    //...
    }
    • dbnum属性由服务器配置的 database 选项决定,默认为 16;
  • Redis客户端数据库保存在在redisClient结构的db属性:

    typedef struct redisClient{
    //...
    //记录客户端当前正在使用的数据库
    redisDB *db;
    } redisClient;
    • 客户端通过修改目标数据库指针,让它指向 redisService.db 数组中的不同元素;
    • 可以通过 SELECT index 命令来切换数据库;

  • 数据库的定义在redis.h/redisDb结构中:

    typedef struct redisDb{
    //...
    //数据库键空间,保存数据库中所有的键值对
    dict *dict; //过期字典,保存着键的过期时间
    dict *expires;
    } redisDb;
    • 键空间的键是数据库的键,每个键是一个字符串对象;
    • 键空间的值是数据库的值,每个值可以是字符串对象列表对象哈希表对象集合对象有序集合对象中的一种;

2. 数据库的键空间

  • 数据库键空间是一个字典,所有针对数据库的操作都是通过键空间字典来操作的;
  • 在对键空间进行读写操作时,Redis 还会进行一些维护操作:
    • 读取键后,会根据键是否存在更新服务器的键空间命中 keyspace_hits 次数或键空间不命中 keyspace_misses 次数。通过 INFO stats 命令查看属性;
    • 读取键后,服务器会更新键的 LRU(最后一次使用时间)。通过 ONBJECT idlettime [key] 命令查看key的闲置时间;
    • 服务器在读取键时发现键已经过期,会先删除这个过期键;
    • 如果有客户端使用 WATCH 命令监视某个键,服务器对该键修改后会标记上脏 dirty,让事务处理程序注意;
    • 服务器每修改一个键后,会对脏 dirty 键计数器值增 1,计数器会触发服务器的持久化以及复制操作;

3. 键的生成时间与过期时间

  • 键的时间相关设置命令参看《Redis常用命令及示例总结》1.3 生存时间的功能
  • 生存时间:
    • 客户端可以通过 EXPIREPEXPIRE 命令以秒或毫秒精度为数据库中某个键设置生存时间(Time To Live,TTL)。经过指定时间后,服务器自动删除生存时间为0的键;
    • 可以通过 SETEX 命令在设置字符串键同时设置过期时间;
    • 使用 TTLPTTL 命令获取键的剩余生存时间;
  • 过期时间:
    • 客户端设置过期时间的命令是 EXPIREATPEXPIREAT
    • 过期时间是一个 UNIX 时间戳;
  • EXPIREPEXPIREEXPIREAT 三个命令都会转换成 PEXPIREAT 命令实现;

4. Redis中的过期键删除策略

  • 有三种删除过期键的策略:

    • 定时删除:主动策略。对内存最友好,到期就释放内存。缺点是对CPU事件不友好,当过期键比较多时,会占用一部分CPU时间;
    • 惰性删除:被动策略。对CPU时间最友好。每次从键空间获取键时,检查取得的键是否过期,过期则删除。缺点是对内存不友好;
    • 定期删除:主动策略。前两种策略的整合与折中。每隔一段时间执行一次删除过期键操作,并通过限制删除操作执行的时长与频率减少删除操作对CPU时间的影响。缺点是难以确定删除操作执行的时长和频率;
  • 惰性删除策略由 db.c/expireIfNeeded 函数实现,流程如下:

  • 定期删除策略由 redis.c/activeExpireCycle 函数实现,每当Redis的服务器周期性操作 redis.c/serverCron 函数执行时,activeExpireCycle 函数会被调用。在规定的时间内,分多次遍历服务器各个数据库,从数据库的 expires 字典中随机检查一部分过期时间,删除其中过期键;

5. AOF、RDB和复制功能对过期键的处理

5.1 生成 RDB 文件

  • 在执行 SAVEBGSAVE 命令创建一个新的 RBG 文件时,程序会对数据库中的键进行检查,已过期的键不会被保存到新创建的 RDB 文件中;

5.2 载入 RDB 文件

  • 载入 RDB 文件时:

    • 若服务器以主服务器模式运行,过期键不载入;
    • 若服务器以从服务器模式运行,所有键都会载入;

5.3 AOF 文件写入

  • 当服务器以 AOF 持久化模式运行时,未被惰性删除和定期删除的过期键不会对 AOF 文件产生影响;
  • 当过期键被惰性删除或定期删除后,程序会向 AOF 文件追加(append)一条 DEL 命令,显示记录该键已被删除;

5.4 AOF 重写

  • 与 RDB 文件类似,在执行 AOF 重写过程中,程序会对数据库中的键进行检查,已过期的键不会被保存到重写后的 AOF 文件中;

5.5 复制

  • 当服务器运行在复制模式下时,从服务器的过期键删除动作由主服务器控制;



6. 数据库通知

  • 数据库通知是 Redis 2.8 版本新增的功能;
  • 数据库通知可以让客户端通过订阅给定的频道或模式,来获知数据库中键的变化,以及数据库中命令的执行情况;
  • Redis 命令对数据库进行修改后,服务器会根据配置向客户端发送数据库通知;
  • 通知的相关命令可以参考 《Redis常用命令及示例总结》7. Pub/Sub(发布/订阅)
  • 两类通知类型:
    • 键空间通知 key-space notification:关注 “某个键执行了什么命令”;SUBSCRIBE channel:message
    • 键事件通知 key-event notification:关注 “某个命令被什么键执行了”;SUBSCRIBE channel:del
  • 服务器配置的 notify-keyspace-events 选项决定服务器所发送通知的类型:
    • AKE:发送所有类型的键空间和键事件通知;
    • AK:发送所有类型的键空间通知;
    • AE:发送所有类型的键事件通知;
    • K$:只发送字符串有关的键空间通知;
    • EL:只发送列表键有关的键事件通知;
  • 发送数据库通知的功能是由 notify.c/notifyKeyspaceEvent 函数实现;

最后

新人制作,如有错误,欢迎指出,感激不尽!
欢迎关注公众号,会分享一些更日常的东西!
如需转载,请标注出处!

Redis | 第4章 Redis中的数据库《Redis设计与实现》的更多相关文章

  1. Redis | 第11章 服务器的复制《Redis设计与实现》

    目录 前言 1. 旧版复制功能的实现 1.1 同步与命令传播 1.2 旧版复制功能的缺陷 2. 新版复制功能的实现 2.1 部分重同步的实现原理 3. PSYNC 命令的实现 4. 复制的详细步骤 4 ...

  2. Redis | 第12章 Sentinel 哨兵模式《Redis设计与实现》

    目录 前言 1. 启动并初始化 Sentinel 2. Sentinel 与服务器间的默认通信 2.1 获取主服务器信息 2.2 获取从服务器信息 2.3 向主服务器和从服务器发送信息 3. 接受来自 ...

  3. 我的Android六章:Android中SQLite数据库操作

    今天学习的内容是Android中的SQLite数据库操作,在讲解这个内容之前小编在前面有一篇博客也是讲解了SQLite数据库的操作,而那篇博客的讲解是讲述了 如何在Window中通过DOM来操作数据库 ...

  4. Redis 数据恢复方法,redis-port 工具将自建 redis 的 rdb文件同步到云数据库

    1. Redis 恢复的机制 如果只配置 AOF ,重启时加载 AOF 文件恢复数据: 如果同时配置了 RDB 和 AOF ,启动是只加载 AOF 文件恢复数据: 如果只配置 RDB,启动是将加载 d ...

  5. Redis Installation、Configuration、Program Based On Redis Learning

    目录 . Redis 简介 . Redis安装配置 . 编程使用Redis . 使用Lua脚本 1. Redis 简介 0x1: Redis是什么 Redis是一款Nosql类型的基于key-valu ...

  6. Android中SQLite数据库小计

    2016-03-16 Android数据库支持 本文节选并翻译<Enterprise Android - Programing Android Database Applications for ...

  7. 一篇文章带你了解NoSql数据库——Redis简单入门

    一篇文章带你了解NoSql数据库--Redis简单入门 Redis是一个基于内存的key-value结构数据库 我们会利用其内存存储速度快,读写性能高的特点去完成企业中的一些热门数据的储存信息 在本篇 ...

  8. PHP中的数据库三、redis

    h2:first-child, body>h1:first-child, body>h1:first-child+h2, body>h3:first-child, body>h ...

  9. [转]Node.js中koa使用redis数据库

    本文转自:https://blog.csdn.net/offbye/article/details/52452322 Redis是一个常用的Nosql数据库,一般用来代替Memcached做缓存服务, ...

随机推荐

  1. transformers---BERT

    transformers---BERT BERT模型主要包括两个部分,encoder和decoder,encoder可以理解为一个加强版的word2vec模型,以下是对于encoder部分的内容 预训 ...

  2. allure报告中allure.title 如何去掉后方的参数化显示

    1.解决方法如下 listener.py 文件位置:Lib\site-packages\allure_pytest\listener.py (第三方包所在的LIb目录) 将下图中红色部分test_re ...

  3. SQL Server 数据库单用户模式处理

    在还原数据库bak备份文件时,由于某种原因(具体何种原因在此不进行分析)导致数据库还原后处于单用户模式,如下图: 单个用户模式导致,数据库无法打开,只能通过脚本去查询数据库内的表,然后进行查询数据,极 ...

  4. (课内)信安数基RSA-level3-5

    emmmm感觉其实自己对这个的理解完全不够,原理只能写出这么个东西(悲) 代码完全是 攻击方式中(1)(2)内容的实现. lambda是一种可以理解为匿名函数的写法:写在这里看起来很酷炫(bushi) ...

  5. 2021.6.29考试总结[NOIP模拟10]

    T1 入阵曲 二位前缀和暴力n4可以拿60. 观察到维护前缀和时模k意义下余数一样的前缀和相减后一定被k整除,前缀和维护模数,n2枚举行数,n枚举列, 开一个桶记录模数出现个数,每枚举到该模数就加上它 ...

  6. IOC和DI之刨根问底之第一节

    很多freshman上来就想搞清楚什么是IOC和DI,其实很多先进的理论和技术都在老的基础上升华出来的,最终目的是为了解放生产力. 所以先来说说下面两点基础知识: Direct Dependency( ...

  7. linux shell 基本语法之快速上手shell编程

    从程序员的角度来看, Shell本身是一种用C语言编写的程序,从用户的角度来看,Shell是用户与Linux操作系统沟通的桥梁.用户既可以输入命令执行,又可以利用 Shell脚本编程,完成更加复杂的操 ...

  8. IDEA插件开发,我是如何把公司的发布系统搬到IDEA里的

    不得不说JetBrains公司直的非常的牛B,每一个程序员都能在JetBrains的官方网站找到一款属于自己的开发工具.这些开发工具在工作中给我们带来了巨大的便利.各种各样的基础插件,第三方插件,真是 ...

  9. Ubuntu mysql安装与使用

    Ubuntu 下安装 mysql 运行下面的shell代码 #安装mysql sudo apt-get -y install mysql-server sudo apt-get -y install ...

  10. 确定字符互异 牛客网 程序员面试金典 C++ Python

    确定字符互异 牛客网 程序员面试金典 C++ Python 题目描述 请实现一个算法,确定一个字符串的所有字符是否全都不同.这里我们要求不允许使用额外的存储结构. 给定一个string iniStri ...