Redis源码 - 事件管理
Redis 的事件分类
| 分类 | 描述 |
| 定时器 | 线程内定时响应,更新缓存时间、关闭非活动的客户端连接等等 |
| pipe | 线程间通信,用于其他线程通知主线程退出aeApiPoll() |
| unixsocket | 本地进程间通信,当client和redis部署在一台机器上时,使用unixsocket性能会更高 |
| TCP | 网络或进程间通信 |
Redis支持4种I/O模型:evport、epoll、kqueue、select,通过宏定义决定使用某一个
| 事件处理 | 描述 | 接口函数名称 | 模型实现 | |||
| select | kqueue | epoll | evport | |||
| aeCreateEventLoop() | 创建I/O模型句柄 | aeApiCreate() | kqueue() | epoll_create() | port_create() | |
| aeCreateFileEvent() | 注册事件并指定回调函数 | aeApiAddEvent() | FD_SET() | kevent() | epoll_ctl() | port_associate() |
| aeDeleteFileEvent() | 删除事件 | aeApiDelEvent() | FD_CLR() | kevent() | epoll_ctl() | port_dissociate() |
| aeProcessEvents() | 事件循环 | aeApiPoll() | select() | kevent() | epoll_wait() | port_getn() |
1 配置加载
config.c : void loadServerConfig(char *filename, char *options)
加载配置文件端口
else if (!strcasecmp(argv[],"port") && argc == ) {
server.port = atoi(argv[]);
if (server.port < || server.port > ) {
err = "Invalid port"; goto loaderr;
}
加载配置文件绑定的网卡地址
else if (!strcasecmp(argv[],"bind") && argc >= ) {
int j, addresses = argc-;
if (addresses > CONFIG_BINDADDR_MAX) {
err = "Too many bind addresses specified"; goto loaderr;
}
for (j = ; j < addresses; j++)
server.bindaddr[j] = zstrdup(argv[j+]);
server.bindaddr_count = addresses;
}
加载配置文件最大连接数量
else if (!strcasecmp(argv[],"maxclients") && argc == ) {
server.maxclients = atoi(argv[]);
if (server.maxclients < ) {
err = "Invalid max clients limit"; goto loaderr;
}
}
2 创建I/O模型句柄
server.c : void initServer(void)
server.el = aeCreateEventLoop(server.maxclients+CONFIG_FDSET_INCR);
if (server.el == NULL) {
serverLog(LL_WARNING,
"Failed creating the event loop. Error message: '%s'",
strerror(errno));
exit();
}
3 监听连接
根据配置文件port、bind字段设置的内容监听IPv4、IPv6的地址,若未指定,则监听IP:0.0.0.0
server.c : void initServer(void)
if (server.port != &&
listenToPort(server.port,server.ipfd,&server.ipfd_count) == C_ERR)
exit() if (server.unixsocket != NULL) {
unlink(server.unixsocket); /* don't care if this fails */
server.sofd = anetUnixServer(server.neterr,server.unixsocket,
server.unixsocketperm, server.tcp_backlog);
if (server.sofd == ANET_ERR) {
serverLog(LL_WARNING, "Opening Unix socket: %s", server.neterr);
exit();
}
anetNonBlock(NULL,server.sofd);
}
listenToPort()返回创建的I/O句柄和数量。
unixsocket 是用于本地进程间通信的
4 注册事件
server.c : void initServer(void)
4. 1 注册定时器事件
指定回调函数 serverCron() ,该函数用于处理时间类逻辑,比如将长时间无数据到来的客户端连接关闭。
if (aeCreateTimeEvent(server.el, , serverCron, NULL, NULL) == AE_ERR) {
serverPanic("Can't create event loop timers.");
exit();
}
4.2 注册I/O型事件
注册TCP 连接、unixsockt 连接、pipe 读等事件。前两者是在有新连接到来时响应,用来接受连接并通过aeCreateFileEvent()注册数据读写事件;后者pipe的读事件用于其他线程通知本线程退出aeApiPoll(),所以其回调函数可以什么都不做,只是个空函数。
for (j = ; j < server.ipfd_count; j++) {
if (aeCreateFileEvent(server.el, server.ipfd[j], AE_READABLE,
acceptTcpHandler,NULL) == AE_ERR)
{
serverPanic(
"Unrecoverable error creating server.ipfd file event.");
}
}
if (server.sofd > && aeCreateFileEvent(server.el,server.sofd,AE_READABLE,
acceptUnixHandler,NULL) == AE_ERR) serverPanic("Unrecoverable error creating server.sofd file event.");
if (aeCreateFileEvent(server.el, server.module_blocked_pipe[], AE_READABLE,
moduleBlockedClientPipeReadable,NULL) == AE_ERR) {
serverPanic(
"Error registering the readable event for the module "
"blocked clients subsystem.");
}
5 事件循环及处理
ae.c
启动事件循环,就是个while死循环,循环调用事件处理函数:aeProcessEvents()
void aeMain(aeEventLoop *eventLoop) {
eventLoop->stop = ;
while (!eventLoop->stop) {
if (eventLoop->beforesleep != NULL)
eventLoop->beforesleep(eventLoop);
aeProcessEvents(eventLoop, AE_ALL_EVENTS|AE_CALL_AFTER_SLEEP);
}
}
事件处理主要干的几件事
- 查找距离最近的要响应的定时器,计算相隔时间
- aeApiPoll 检测 I/O 事件,设定超时时间为第1步计算得到的时间
- 对于有事件到来的 I/O,调用注册时指定的回调函数
- 对于第1步找到定时器,调用注册时指定的回调函数
int aeProcessEvents(aeEventLoop *eventLoop, int flags)
{
int processed = , numevents; if (!(flags & AE_TIME_EVENTS) && !(flags & AE_FILE_EVENTS)) return ; if (eventLoop->maxfd != - ||
((flags & AE_TIME_EVENTS) && !(flags & AE_DONT_WAIT))) {
int j;
aeTimeEvent *shortest = NULL;
struct timeval tv, *tvp; if (flags & AE_TIME_EVENTS && !(flags & AE_DONT_WAIT))
shortest = aeSearchNearestTimer(eventLoop);
if (shortest) {
//...
} else {
//...
} numevents = aeApiPoll(eventLoop, tvp); if (eventLoop->aftersleep != NULL && flags & AE_CALL_AFTER_SLEEP)
eventLoop->aftersleep(eventLoop); for (j = ; j < numevents; j++) {
//...
}
} if (flags & AE_TIME_EVENTS)
processed += processTimeEvents(eventLoop); return processed;
}
Redis源码 - 事件管理的更多相关文章
- Redis源码阅读(一)事件机制
Redis源码阅读(一)事件机制 Redis作为一款NoSQL非关系内存数据库,具有很高的读写性能,且原生支持的数据类型丰富,被广泛的作为缓存.分布式数据库.消息队列等应用.此外Redis还有许多高可 ...
- Redis 源码简洁剖析 10 - aeEventLoop 及事件
aeEventLoop IO 事件处理 IO 事件创建 读事件处理 写事件处理 时间事件处理 时间事件定义 时间事件创建 时间事件回调函数 时间事件的触发处理 参考链接 Redis 源码简洁剖析系列 ...
- Redis源码分析:serverCron - redis源码笔记
[redis源码分析]http://blog.csdn.net/column/details/redis-source.html Redis源代码重要目录 dict.c:也是很重要的两个文件,主要 ...
- Redis 源码简洁剖析 07 - main 函数启动
前言 问题 阶段 1:基本初始化 阶段 2:检查哨兵模式,执行 RDB 或 AOF 检测 阶段 3:运行参数解析 阶段 4:初始化 server 资源管理 初始化数据库 创建事件驱动框架 阶段 5:执 ...
- Redis源码漂流记(二)-搭建Redis调试环境
Redis源码漂流记(二)-搭建Redis调试环境 一.目标 搭建Redis调试环境 简要理解Redis命令运转流程 二.前提 1.有一些c知识简单基础(变量命名.常用数据类型.指针等) 可以参考这篇 ...
- 一起学习redis源码
redis的一些介绍,麻烦阅读前面的几篇文章,想对redis的详细实现有所了解,强力推荐<redis设计与实现>(不仅仅从作者那儿学习到redis的实现,还有项目的管理.思想等,作者可能比 ...
- redis源码笔记(一) —— 从redis的启动到command的分发
本作品采用知识共享署名 4.0 国际许可协议进行许可.转载联系作者并保留声明头部与原文链接https://luzeshu.com/blog/redis1 本博客同步在http://www.cnblog ...
- Redis源码学习:字符串
Redis源码学习:字符串 1.初识SDS 1.1 SDS定义 Redis定义了一个叫做sdshdr(SDS or simple dynamic string)的数据结构.SDS不仅用于 保存字符串, ...
- Redis源码剖析和注释(七)--- 快速列表(quicklist)
Redis 快速列表(quicklist)1. 介绍quicklist结构是在redis 3.2版本中新加的数据结构,用在列表的底层实现. 通过列表键查看一下:redis 列表键命令详解 127.0. ...
随机推荐
- 测者的测试技术手册:自动化的自动化EvoSuite:Maven项目集成EvoSuite实战
EvoSuite是由Sheffield等大学联合开发的一种开源工具,用于自动生成测试用例集,生成的测试用例均符合Junit的标准,可直接在Junit中运行.得到了Google和Yourkit的支持. ...
- Github入门详情教程
前言 之前我写了一篇文章<一篇文章了解Github和Git教程>还延伸了几篇阅读,对大部分小白很有用,那么我继续普及下Github页面及其概念. 定义 GitHub 是一个网站,一个面向开 ...
- ORA-12520 TroubleShooting
同事反馈他连接一个新搭建的测试数据库时,报"ORA-12520: TNS: 监听程序无法为请求的服务器类型找到可用的处理程序"错误,在解决他这个问题时,顺便分析.总结一下ORA ...
- Go语言打造以太坊智能合约测试框架(level3)
传送门: 柏链项目学院 第三课 智能合约自动化测试 之前课程回顾 我们之前介绍了go语言调用exec处理命令行,介绍了toml配置文件的处理,以及awk处理文本文件获得ABI信息.我们的代码算是完成了 ...
- 将对象xml序列化和反序列化
//将一个对象按XML序列化的方式写入到一个文件,使用的默认的UTF8编码格式 //o为要序列化的对象 //path保存文件的路径 public static object _lockObj=new ...
- 利用ZYNQ SOC快速打开算法验证通路(6)——LWIP实现千兆TCP/IP网络传输
一.前言 之前ZYNQ与PC之间的网络连接依赖于外接硬件协议栈芯片,虽然C驱动非常简单,但网络带宽受限.现采用LWIP+PS端MAC控制器+PHY芯片的通用架构.关于LWIP库,已经有很多现成的资料和 ...
- SimpleDateFormat日期格式化总结
1.new一个java.util.Date对象,调用它的setYear.setMonth等等方法,设置你要的年月日.不过这种做法不推荐,因为setYear等方法已经过时了.2.new一个java.ut ...
- 【博客导航】Nico博客导航汇总
摘要 介绍本博客关注的内容大类.任务.工具方法及链接,提供Nico博文导航. 导航汇总 [博客导航]Nico博客导航汇总 [导航]信息检索导航 [导航]Python相关 [导航]读书导航 [导航]FP ...
- ABP之启动配置
ASP.NET Boilerplate提供了在StartUp中配置其模块的基础设施和模型. 配置ASP.NET Boilerplate 配置ABP是在模块的PreInitialize 方法中做的,如下 ...
- java基础问题巩固(1)
你对java垃圾回收了解吗?什么时候需要使用? 答: 垃圾回收器的作用是查找和回收(清理)无用的对象,从而让jvm更 有效的使用内存.但是运行因为垃圾回收本身会有开销,过于频繁的使用会导致性能下降.比 ...