Redis之字典
概念
字典,又称为符号表、关联数组或映射(map),是一种用于保存键值对(key-value pair)的抽象数据结构。字典中每个键都是独一无二的,程序可以根据键来更新值,或者删除整个键值对。
用途
- Redis的数据库就是使用字典来作为底层实现
- 字典还是哈希键的底层实现之一。当一个哈希键包含的键值对比较多,又或者键值对中的元素都是比较长的字符串时,Redis就会使用字典作为哈希键的底层实现。
字典的实现
Redis的字典使用哈希表作为底层实现,一个哈希表里面可以有多个哈希表节点,而每个哈希表节点就保存了字典中的一个键值对。
(Redis中dict是hash键的底层实现之一,而dict的底层又采用了hash表。hash表dictht包含了一个dictEntry数组,size记录了hash表的大小,sizemask始终等于size-1,还有一个used记录了已有节点的数量
hash表节点dictEntry是一个键值对对象,另外还有一个next指针,指向下一个dictEntry,通过指针连接在一起,可以解决键冲突的问题
)
哈希表

- table : 一个数组,数组中每个元素都是一个指向dict.h/dictEntry(哈希表节点)结构的指针,而每个dictEntry都保存了一个键值对
- size:记录了hash表的大小,也就是table数组的大小
- used:记录了hash表已有哈希表节点(键值对)的数量
- sizemask:总是等于size-1
哈希表节点

- key:保存键
- v :保存键值对中的值,可以是一个指针,或者一个uint64_t整数,又或者是一个int64_t整数
- next :只想两一个哈希表节点的指针,多个指针将多个哈希值相同的键值对连接在一起,解决了键冲突的问题
字典

- type : 是一个指向dictType的指针,每一个dictType结构保存了一簇用于操作特定类型键值对的函数,Redis会为用途不同的字典设置不同的类型特定函数
- privdata : 保存了需要传给那些特定函数的可选参数
- ht[2] : 包含两个项(hash表)的数组,一般只用ht[0],ht[1]只有在rehash时使用
- trehashidx:记录rehash目前的进步,如果没在进行rehash,那么值为-1
解决键冲突
Redis根据键值对的键计算出哈希值喝索引值,然后根据索引值,将包含新键值对的哈希表节点放到哈希表数组的指定索引上面。

当两个或者以上数量的键被分配到哈希表数组的同一索引上面时,我们称这些键发生了冲突。
Redis的哈希表采用链地址法解决键冲突。每个哈希表节点都有一个next指针,多个哈希表节点用next指针连接在一起,多个节点用这个单向链表连接起来,这就解决了链冲突。
Rehash
- 扩展操作:ht[1]的大小为第一个大于等于ht[0].used*2的2n(2的n次方)
- 收缩操作:ht[1]的大小为第一个大于等于ht[0].used的2n
当满足以下任意一个条件时,程序会自动进行扩展操作:
- 服务器没有正在执行BGSAVE命令或者BGREWRITEAOF命令,并且哈希表负载因子大于等于1
- 服务器正在执行BGSAVE或者BGREWRITEAOF命令,并且哈希表负载因子大于等于5
- 负载因子计算公式:load_factor = ht[0].used / ht[0].size
rehash步骤:
- 为字典ht[1]分配空间
- 将保存在ht[0]中的所有键值对rehash到ht[1]上
- ht[0]所有键值对迁移完后,释放ht[0],将ht[1]设置为htp[0],并在ht[1]创建一个空白哈希表,为下一次rehash做准备
渐进式rehash
为避免rehash对服务器性能的影响,服务器不是一次性将ht[0]力所有的键值对全部rehash到ht[1]中,而是分多次,渐进式的rehash到ht[1]中
详细步骤:
- 在ht[1]分配空间,让字典同时持有ht[0]和ht[1]两个哈希表
- 维持一个索引计数器变量rehashidx,设置为0,表示rehash开始
- 在rehash期间,每次对字典执行添加,删除,查找或者更新操作时,程序除了执行指定的操作以外,还会顺带及那个ht[0]哈希表在rehashidx索引上的所有键值对rehash到ht[1]上,当rehash完成时,rehashidx属性值增一
- 随着字典操作不断执行,最终在某个时间点,ht[0]的所有键值对都被rehash到ht[1]上,这时将rehashidx设置为-1,表示rehash完成
在rehash过程中,字典同时拥有ht[0]和ht[1]两个哈希表,期间字典的删除,查找,更新等操作会在两个哈希表进行。例如查找,先在ht[0]查找,如果没有就在ht[1]查找。另外在rehash期间,新添加的字典的键值对一律会保存到ht[1]中,ht[0]则不再进行任何添加操作,这保证ht[0]包含的数量只减不增,最终变为空表。
Redis之字典的更多相关文章
- 深入redis内部--字典实现
redis的字典定义和实现在dict.h和dict.c文件中. 1.字典结构 typedef struct dict { dictType *type; //定义了字典需要的函数 void *priv ...
- Redis的字典扩容与ConcurrentHashMap的扩容策略比较
本文介绍Redis的字典(是种Map)扩容与ConcurrentHashMap的扩容策略,并比较它们的优缺点. (不讨论它们的实现细节) 首先Redis的字典采用的是一种‘’单线程渐进式rehash‘ ...
- 【Redis】字典
Redis 字典 基本语法 字典是Redis中的一种数据结构,底层使用哈希表实现,一个哈希表中可以存储多个键值对,它的语法如下,其中KEY为键,field和value为值(也是一个键值对): HSET ...
- Redis的字典(dict)rehash过程源代码解析
Redis的内存存储结构是个大的字典存储,也就是我们通常说的哈希表.Redis小到能够存储几万记录的CACHE,大到能够存储几千万甚至上亿的记录(看内存而定),这充分说明Redis作为缓冲的强大.Re ...
- python redis存入字典序列化存储
在python中通过redis hset存储字典时,必须主动把字典通过json.dumps()序列化为字符串后再存储, 不然hget获取后将无法通过json.loads()反序列化为字典 序列化存储 ...
- redis列表,字典,管道,vue安装,创建项目
redis mysql,redis,mogondb 1.mysql,oracle:关系型数据库,有表概念 2.redis,mongodb/nosql:非关系型数据库 没有表概念 mongodb存储在硬 ...
- redis学习-字典
1.字典作用 实现数据库键空间(key space): 用作 Hash 类型键的底层实现之一: 2.字典实现的数据结构 typedef struct dict { // 特定于类型的处理函数 dict ...
- 深入理解Redis 数据结构—字典
字典,又称为符号表.关联数组或映射,是一种用于保存键值对的抽象数据结构.在字典中,一个键可以和一个值进行关联,这些关联的键和值称为键值对.键值对中键是唯一的,我们可以根据键key通过映射查找或者更新对 ...
- spring-boot集成6:集成redis实现字典缓存功能
Why redis? redis是基于内存的key-value系统,可以用作缓存中间件或者消息中间件,spring-boot提供了方便的方式和redis集成. 1.maven依赖 <!--red ...
随机推荐
- LaTeX实时预览中文
参考资料:http://blog.sina.com.cn/s/blog_6ea58f530101aizw.html 功夫不负有心人,终于在经过艰苦卓绝的寻找之后,让我的Texpad实现了实时预览.此时 ...
- 使用Python解密仿射密码
新学期有一门密码学课,课上老师布置了一道密码学题,题目如下: 解密由仿射密码加密的密文“DBUHU SPANO SMPUS STMIU SBAKN OSMPU SS” 想解密这个密文,首先必须要知道仿 ...
- Cookie 和 Session 关系详解
什么是 Cookie 和 Session ? 什么是 Cookie HTTP Cookie(也叫 Web Cookie或浏览器 Cookie)是服务器发送到用户浏览器并保存在本地的一小块数据,它会在 ...
- linux下操作memcache的操作命令
1.连接memcache linux下一般使用telnet连接memcache服务 [root@localhost ~]# telnet 127.0.0.1 11266 Trying 127.0.0. ...
- MFC中窗口启动后,CEdit编辑框默认光标位置设置,顺序的调节方法
MFC中窗口启动后,CEdit编辑框默认光标位设置,顺序的调节方法 在编辑界面按下ctrl+D键,就会出现所有控件的Tab键顺序,按照自己想要的顺序依次点击控件,就可以重新安排顺序.数值1就是默认停留 ...
- 向强大的SVG迈进
作者:凹凸曼 - 暖暖 SVG 即 Scalable Vector Graphics 可缩放矢量图形,使用XML格式定义图形. 一.SVG印象 SVG 的应用十分广泛,得益于 SVG 强大的各种特性. ...
- Redis设置并查看最大连接数
在 Redis2.4 中,最大连接数是被直接硬编码在代码里面的,而在2.6版本中这个值变成可配置的. maxclients 的默认值是 10000,你也可以在 redis.conf 中对这个值进行修改 ...
- python实现将大文件夹分割成多个子文件夹
楼主用的linux,一旦数据达到几万,文件夹打开就会变卡,同时也方便同时分工协作,便于git管理,写了个将大文件夹分割成多个小文件夹的脚本 如操作文件夹:img,脚本不破坏img的数据,创建img_1 ...
- 使用训练好的modle,做些有用的事(各层数据可视化)
---恢复内容开始--- 1. 加载必要的库: 2. 设置当前目录,判断模型是否训练好: 3. 利用提前训练好的模型,设置测试网络: 4. 加载测试图片,并显示: 5. 编写一个函数,将二进制的均值转 ...
- Flutter 中那么多组件,难道要都学一遍?
在 Flutter 中一切皆是 组件,仅仅 Widget 的子类和间接子类就有 350 多个,整理的 Flutter组件继承关系图 可以帮助大家更好的理解学习 Flutter,回归正题,如此多的组件到 ...