Redis基础01-redis的数据结构
参考书:《redis设计与实现》
Redis虽然底层是用C语言写的,但是底层的数据结构并不是直接使用C语言的数据结构,而是自己单独封装的数据结构;
Redis的底层数据结构由,简单动态字符串,链表,字典,跳跃表,整数集合等几种数据结构组成;
1.简单动态字符串
1.定义:
简单动态字符串:SDS(simple dynamic string)redis 自己构建的;数据结构如下:
struct sds{
int free;//未使用长度
int len;//字符长度
char buff[];//字符数组
}
结尾的一个字节不算在len的长度里面;
2.SDS和C字符串的差别
相同点:都是n+1的长度,都是以\0结尾;
不同点:1.获取字符串长度复杂度不同;
2.杜绝缓存区溢出
3.减少字符修改造成的内存再分配次数; 3.1空间预分配;3.2惰性空间释放;
4.二进制安全;
5.兼容部分C字符串;
2.链表
1.链表和节点的实现
struct listNode{
struct listNode *prev;
struct listNode *next;
void *value;
}
typeof struct list{
listNode *head;//第一个
listNode *tail;//最后一个节点
unsigned int len;//长度
void *(*dup)(void *ptr);//复制节点函数
void (*free)(void *ptr);//节点值释放函数
int (*match)(void *ptr,void *key)//节点比对函数
}list;

特点:双端(链表带有pre和next两个指针);
无环(表头的pre和表尾的next都是NULL);
带表头指针和表尾指针;
求链表长度计数器(len是链表节点的计数器),
多态(dup,free,match三个属性设置特定类型,可以保存不同类型的值)
3.字典
1.定义及实现
字典:又称符号表,关联数组或映射,是一种用于保存键值对的抽象数据结构;
在字典中,一个字和一个值进行关联,这些键和值就称为键值对;
redis的字典使用哈希表作为底层实现,一个哈希表里面可以有多个哈希表节点,而每个哈希表节点就保存了字典中的一个键值对
- 哈希表
typedef struct dictht{
dictEntry **table;//哈希表数组
unsigined long size;//哈希表数组大小
unsigined long sizemask;//哈希表大小掩码,值总是size-1
unsigined long used;//哈希表数组已有节点的数量
}

哈希表节点
typeof struct dictEntry{
void *key;//键
union{//值
void *val;
uint64_tu64;
int64_ts64;
} v;
struct dictEntry *next;//指向另一个哈希表节点的指针,可以将多个哈希值相同的键值对连接在一次
}

字典
typedef struct dist{
dictype *type;//类型特定函数
void *privdata;//私有数据
dictht ht[];//哈希表
in trehashidx;//rehash索引//当rehash不在进行时,值为-1
}dict;
typedef struc dictType{
unsigned int (*hashFunction)(const void *key);//计算哈希值的函数
void *(*keyDup)(void *privdata,const void *key);//复制键的函数
void *(*valDup)(void *privdata,const void *obj);
int (*keyCompare)(void *privdata,const void *key1,const void *key2);
void (*keyDestructor)(void *privdata,void *key);
void (*valDestructor)(void *privdata,void * obj);
} dictType ;

2.哈希算法
MurmurHash算法来计算键的哈希值。
3.解决键冲突
当两个键或者两个以上键分配到redis同一索引的时候,就称为键冲突;使用链地址法来解决键冲突;

4.rehash重新散列
目的:为了让平衡因子维持再一个合理的范围,k-v不会太多,也不会太少
5.渐进式rehash
分步进行rehash,为字典分配两个哈希表,当对一个哈希表操作时,程序在指定的操作上,会把旧表中的数据带到新的哈希表。到某一点完全实现rehash.
4.跳跃表
跳跃表 是一种有序数据结构,它可以在每个节点中维持多个只指向其他节点的指针,从而达到快速访问节点的目的。
使用的场景:在redis中,一个是实现有序集合键;一个是集群节点中用作内部数据结构;
1.跳跃表节点

结构代码:

5.整数集合
当一个集合质保和整数值元素,并且这个集合的元素数量不多时;
1.整数集合的实现

整数集合是Redis用于保存整数值的集合抽象数据结构;
typedef struct intset{
uint32_t encoding;//决定contents里面保存的数据类型
uint32_t length;//整数集合包含的元素数量
int8_t contents[];
}inset;
2.升级
当新元素比整数集合中所有元素的类型都要长时,整数集合需要先升级,再将元素保存到集合里面;
步骤:1.根据新元素,扩展底层类型;2.将所有元素转换成新元素类型,并保证底层顺序不变;3.将新元素添加到底层里面;
优点:1.提高灵活性,如果是int_32的就存储相关的元素,如果有int_64的就升级;2.节省内存资源;
3.降级
整数集合不支持降级
6.压缩列表
是一种节约内存而开发的顺序型数据结构;
使用场景:当一个列表项,只有少量数据,且数据比较小,小整数或者短字符的情况下;
1.压缩列表的构成


2.压缩列表节点的构成
previous_entry_length:记录前一个结点的长度;
encoding:记录content属性所保存的数据和长度;
content:保存节点的值;
3.连锁更新
每个previous_entry_length属性都记录前一个界定啊的长度:
如果节点小于254,则需要用1字节长的空间保存这个长度值;如果大于或等于254字节,则用5字节长的空间保存这个长度值
Redis基础01-redis的数据结构的更多相关文章
- Redis 02: redis基础知识 + 5种数据结构 + 基础操作命令
Redis基础知识 1).测试redis服务的性能: redis-benchmark 2).查看redis服务是否正常运行: ping 如果正常---pong 3).查看redis服务器的统计信息: ...
- Redis基础(一)数据结构与数据类型
Redis数据结构 Redis一共有六种数据结构,分别是简单动态字符串.链表.字典.跳表.整数集合.压缩列表. 简单动态字符串(SDS) Redis只会使用C字符串作为字面量,在大多数情况下,Redi ...
- Redis基础---5个基本数据结构(比较性记忆)
“ Redis是一个内存数据库,只用硬盘来进行持久化. Mongodb是半内存数据库 Mysql是硬盘数据库 ” 1. Redis启动 安装好了之后.运行redis-3.2.8/src/下的redis ...
- Redis 基础:Redis 简介及安装
Remote Dictionary Server(Redis)是一个由Salvatore Sanfilippo写的key-value存储系统.Redis是一个开源的使用ANSI C语言编写.遵守BSD ...
- redis基础及redis特殊场景使用描述
数据类型 String set list hash zset redis原理 单线程:redis是单线程+io多路复用:检查文件描述的就绪状态 对比memchached:多线程+锁 redis优势 解 ...
- Redis 基础:Redis 数据类型
Redis 数据类型 Redis支持五种数据类型:string(字符串).hash(哈希).list(列表).set(集合)及zset(sorted set:有序集合). String(字符串) st ...
- Redis 实战 —— 01. Redis 数据结构简介
一些数据库和缓存服务器的特性和功能 P4 名称 类型 数据存储选项 查询类型 附加功能 Redis 使用内存存储(in-memory)的非关系数据库 字符串.列表.哈希表.集合.有序集合 每种数据类型 ...
- Redis基础—了解Redis是如何做数据持久化的
之前的文章介绍了Redis的简单数据结构的相关使用和底层原理,这篇文章我们就来聊一下Redis应该如何保证高可用. 数据持久化 我们知道虽然单机的Redis虽然性能十分的出色, 单机能够扛住10w的Q ...
- Redis 基础:Redis 事件处理
Redis 事件处理 Redis服务器是一个事件驱动程序,服务器需要处理以下两类事件: 文件事件(file event):Redis服务器通过套接字与客户端(或其他Redis服务器)进行连接,而文件事 ...
- Redis 基础:Redis 配置
Redis 配置 Redis的配置文件位于Redis安装目录下,文件名为redis.conf.可以通过CONFIG命令查看或设置配置项.其语法为: # Redis CONFIG命令格式如下: > ...
随机推荐
- Jmeter加密函数__digest总结
__digest可对多个字符串拼接起来后进行加密,支持多种加密方式,如MD5.MD2.SHA-1.SHA-224.SHA-256.SHA-384.SHA-512. 使用起来非常方便. (注:Jmete ...
- 原声js数组去重方法
数组去重方法 方法一 ---- 利用数组filter + indexOf方法去重 方法二 ---- 利用数组forEach + indexOf方法去重 方法三 ---- 利用数组from方法 + Se ...
- K8S-PV和PVC的实践
一.什么是PV和PVC? PV的全称是Persistent Volume,翻译过来为持久化存储卷,是对底层的共享存储的一种抽象,PV由管理员进行创建和配置,主要含存储能力.访问模式.存储类型.回收策略 ...
- Spring 源码学习 - 单例bean的实例化过程
本文作者:geek,一个聪明好学的同事 1. 简介 开发中我们常用@Commpont,@Service,@Resource等注解或者配置xml去声明一个类,使其成为spring容器中的bean,以下我 ...
- 学习ASP.NET Core(10)-全局日志与xUnit系统测试
上一篇我们介绍了数据塑形,HATEOAS和内容协商,并在制器方法中完成了对应功能的添加:本章我们将介绍日志和测试相关的概念,并添加对应的功能 一.全局日志 在第一章介绍项目结构时,有提到.NET Co ...
- uni-app动态修改顶部导航栏标题
动态修改顶部导航栏标题有两种方法方式一.使用自定义到导航栏,覆盖原生导航栏 缺点:自定义到导航栏性能远远不如原生导航栏,手机顶部状态栏区域会被页面内容覆盖,这是因为窗体是沉浸式的原因,即全屏可写内容: ...
- @atcoder - AGC002E@ Candy Piles
目录 @description@ @solution@ @accepted code@ @details@ @description@ 给定 N 堆糖果,第 i 堆包含 ai 个糖果. 现在两人进行博 ...
- TensorFlow从0到1之TensorFlow损失函数(12)
正如前面所讨论的,在回归中定义了损失函数或目标函数,其目的是找到使损失最小化的系数.本节将介绍如何在 TensorFlow 中定义损失函数,并根据问题选择合适的损失函数. 声明一个损失函数需要将系数定 ...
- tcpdump使用和抓包分析
参考资料: http://www.cnblogs.com/ggjucheng/archive/2012/01/14/2322659.html tcpdump可以将网络中传送的数据包的“头”完全截获下来 ...
- cookie与session区别?
参考 cookie与session的区别是什么 Java中Cookie的使用(Cookie 和Session的区别) 什么是会话? 用户开一个浏览器,点击多个超链接,访问服务器多个web资源,然后关闭 ...