redis实现与分析-单机数据库实现
数据库

1,1个数据库数据结构和上面一样,两个字典,一个包含所有的键,一个包含了键的过期时间
2,redis删除过期键策略:定期+惰性
定期:一段时间开始删,删不全下次继续删
惰性:使用键的时候检察
rdb:存入和载入的时候检查
aof:追加一条删除命令,重写时候忽略
主从:主服务器删除会通知从服务器,从服务器自己不删除
rdb持久化
- SAVE和BGSAVE都可用于生成RDB文件,但2个命令区别是:SAVE 会阻塞redis服务器进程,期间不能处理任何命令请求,知道RDB 文件生成完毕BGSAVE 会派生出一个子进程,子进程负责创建RDB文件,父进程仍然处理请求。
- 在redis重启时,会自动加载RDB文件。此外,当RDB和AOF同事开启时,由于AOF更新频率高,redis服务器会有限使用AOF文件还原数据库
- 激化持久化可以有两个两极分化的条件:1,短时间高频率更新,2,长时间低频率更新(保证他会跟新
- 通过一个计数器和一个过期时间来实现
- rdb文件结构没写
aof持久化
1,RDB的持久化是通过最终的键值对记录数据库的状态。但AOF类似于mysql的binlog。通过记录服务器执行的写命令来记录数据库状态
2,AOF是一个事件循环loop,主要有追加到缓冲区aof_buf和同步保存到AOF文件里面2个步骤
3,aof重写:但这时会产生一个新的问题,即AOF文件越来越大。AOF重写会产生一个新的aof文件,就是读取有哪些数据,跳过之前虚空的增删命令,只记录最后一刻
4,子程序执行aof重写的时候,服务器接受的语句放在aof重写缓冲区,重写结束后,把重写缓冲区的语句也写到新aof文件中
事件
1,redis是事件驱动程序,有2类事件。一是文件事件(即服务器对套接字操作的抽象),二是时间事件(各类定时任务)
2,文件事件基于reactor模型,
3,时间事件代表,servercon函数
- 更新服务器各种统计信息,如时间,内存,数据库占用情况
- 清理数据库中得过期键值对
- 关闭和清理连接失效的客户端
- 尝试进行aof或者rdb的持久化操作
- 如果服务器是主服务器,那么对从服务器定期同步
- 如果出入集群模式,对集群进行定期同步和连接厕所
4,事件的调度
- 1.获取打到时间离当前时间最近的时间事件
- 2.计算最接近的时间事件距离达到还有多少时间
- 3.如果时间已达到,则将remaind_ms=0
- 4.根据remain_ms,创建timeval结构
- 5.阻塞并等待文件事件产生,最大阻塞时间由timeval决定
- 6.如果remaind_ms=0,则不阻塞
客户端
1,连接了服务器的客户端都有一个客户端实例保持它的状态在服务器里面,包含有名字,标志值,输入缓冲区,输出缓冲区,和其他
2,输入缓冲区,保持客户端输入的命令(协议表示,可以自己扩大缩小,但不能超过1gb
3,服务器会根据输入缓冲区的命令解析命令(根据命令表
4,命令的回复也在输出缓冲区里面,有个缓冲简短回复,有个缓冲长回复
服务端
redis实现与分析-单机数据库实现的更多相关文章
- Redis设计与实现——单机数据库的实现
数据库 服务器中的数据库 redisClient切换数据库 redis客户端默认目标数据库为0号数据库,可以通过SELECT命令来切换目标数据库. 客户端状态redisClient结构的db属性记录了 ...
- Redis中单机数据库的实现
1. 内存操作层 zmalloc 系接口 redis为了优化内存操作, 封装了一层内存操作接口. 默认情况下, 其底层实现就是最简朴的libc中的malloc系列接口. 如果有定制化需求, 可以通过配 ...
- Redis单机数据库
单机数据库 ·Redis服务器的所有数据库都保存在redisServer.db数组中,而数据库的数量则由redisServer.dbnum属性保存. ·客户端通过修改目标数据库指针,让它指向redis ...
- Redis(二):单机数据库的实现
概要 本部分内容主要是研究单机数据库.分别介绍单机数据库的实现原理,数据库的持久化,Redis事件,服务器维护管理客户端以及单机服务器的运作机制. 数据库 数据库结构 Redis数据库由redis.h ...
- Redis单机数据库的实现原理
本文主要介绍Redis的数据库结构,Redis两种持久化的原理:RDB持久化.AOF持久化,以及Redis事件分类及执行原理.最后,分别介绍了单机班Redid客户端和Redis服务器的使用和实现原理. ...
- Redis学习笔记二:单机数据库的实现
1. 数据库 服务器中的数据库 Redis服务器将所有数据库都保存在服务器状态redis.h/redisServer结构的db数组中,db数组的每个项都是一个redis.h/redisDb结构,每个r ...
- Redis时延问题分析及应对
Redis时延问题分析及应对 Redis的事件循环在一个线程中处理,作为一个单线程程序,重要的是要保证事件处理的时延短,这样,事件循环中的后续任务才不会阻塞: 当redis的数据量达到一定级别后(比如 ...
- linux下利用elk+redis 搭建日志分析平台教程
linux下利用elk+redis 搭建日志分析平台教程 http://www.alliedjeep.com/18084.htm elk 日志分析+redis数据库可以创建一个不错的日志分析平台了 ...
- Redis学习笔记01--主从数据库配置
1.创建公共配置文件 所有配置文件添加到以下目录: /xxxx/redis-slave-master 创建公共的redis配置文件,直接使用redis的默认配置文件,修改以下配置项: bind 127 ...
随机推荐
- hdu3861 强连通分量缩点+二分图最最小路径覆盖
The King’s Problem Time Limit: 2000/1000 MS (Java/Others) Memory Limit: 65536/32768 K (Java/Other ...
- dict的items()方法于iteritems()方法的不同
items方法将所有的字典以列表方式返回,其中项在返回时没有特殊的顺序: iteritems方法有相似的作用,但是返回一个迭代器对象.
- Java Editplus编译环境配置
java jdk 安装win10 配置:此电脑--属性--高级系统设置--环境变量--系统变量-->新建--变量名--JAVA_HOME 变量值--浏览目录--jdk安装路径jdk...--&g ...
- 【Python】混合驱动实例
keywords2.txt: get||ie||{urls.txt} get||chrome||http://www.iciba.com main.py: from selenium import w ...
- JSON的学习,希望可以指导
1.JSON的介绍 是一种轻量级的数据交换格式.简洁和清晰的层次结构使得 JSON 成为理想的数据交换语言. 易于人阅读和编写,同时也易于机器解析和生成,并有效地提升网络传输效率. 2.格式 JSON ...
- [翻译]60,000毫秒内对Linux进行性能诊断
原文链接:http://techblog.netflix.com/2015/11/linux-performance-analysis-in-60s.html 原文作者:Brendan Gregg,L ...
- 【转载】 A* 寻路算法 (个人认为最详细,最通俗易懂的一个版本)
原文地址: http://www.cppblog.com/christanxw/archive/2006/04/07/5126.html =============================== ...
- UDP方式实现广域网的P2P通信
最近在研究P2P通信,希望能够穿透路由器. 当前的做法只是使用TCP协议进行客户端与服务器端通信,使用UDP协议进行客户端之间的打洞操作,UDP的方式的源码在下方. 一直没有实现TCP的打洞,如果有实 ...
- 20155219 2016-2017-2《Java程序设计》课程总结
20155219 2016-2017-2<Java程序设计>课程总结 (按顺序)每周作业链接汇总 预备作业1:我期望的师生关系 预备作业2:做中学深入探讨 预备作业3:虚拟机的安装与学习 ...
- HPU第四次积分赛-K :方框(水题,打印图形)
方框 描述 用'*'打印出一个nxn的字符图形(1<=n<=100). 输入 多组输入.每行输入一个n,输入EOF结束文件. 输出 输出一个满足题意的图形. 输入样例 1 1 2 5 6 ...