libev 源码解析
一 libev简介
libev是一个轻量级的事件通知库,具备支持多种事件通知能力,通过对libev的源码的阅读,可以清楚了解事件通知实现内部机制。
二 核心数据结构
在libev中关键的数据结构是,loop结构体,该结构体定义的字段较多,但是主要核心的可以分为两大类
1.各类事件的watcher集合
loop中有支持很多类型的事件,如下
ev_io // IO可读可写
ev_stat // 文件属性变化
ev_signal // 信号处理
ev_timer // 相对定时器
ev_periodic // 绝对定时器
ev_child // 子进程状态变化
ev_fork // fork事件
ev_cleanup // event loop退出触发事件
ev_idle // event loop空闲触发事件
ev_embed // 嵌入另一个后台循环
ev_prepare // event loop之前事件
ev_check // event loop之后事件
ev_async // 线程间异步事件
这些事件的监控管理都对应一种类型的watcher数组,比如
(loop)->anfds :维护所有fd事件
(loop)->timers :维护所有的定时器
(loop)->periodics:周期性事件
(loop)->prepares:该事件是loop启动之间就会执行的事件
等,每类事件都能在loop结构中找到对应的数组来维护对应的watchers。
2.2 watcher结构
这个是公共watcher得到结构,是会被所有的子watcher所共享。
active:表示在loop中对应的watcher数组中的下标
pending & EV_DECL_PRIORITY:分别用来记录在全局loop->pendings中列 & 行下标(loop->pendings下文会介绍)

比如io事件的watcher如上定义,类似的各种watcher都采取此类方式来生成(这样的好处是可以减少代码的重复度,降低了代码维护的成本,但是可读性方面也相应降低)
2.全局触发事件集合loop->pendings
loop->pendings记录管理当前已经发生等待调用回调函数的watcher集合,libev检查到事件发生后将对应的watcher加入到loop->pendings
2.1 数据结构:
*Watcher[N][M]:二位数组用来维护一轮循环下来,需要触发回调函数的watcher
其中N:是每一类watcher的优先级
另外还有loop->pendingcnt结构,也是一个二维数组,用来维护pending中每一行最大watcher下标。
以下是事件函数回调过程的代码,

本质上就是个遍历loop->pendings挨个调用watcher的注册的回调函数,可以看到按照优先级从高(小)到低(大),对于同一优先级watcher按照下标从大到小的方式来调用callBack函数。
值得注意的,就是pendingcnt结构,该结构维护当前每一行watcher数组当前的最大下标。
三 事件触发之io事件
该节将会以IO事件在EPOLL平台的触发整个流程来阐述libev是如何来实现事件触发回调的整个过程。在介绍IO事件触发之前需要介绍一下相关的数据结构

anfds:是ANFD*类型的数组,用来管理每一个fd的监听的事件
changfds:是int*类型数组,每个元素记录当前发生更改的fd,比如加入新的监听fd,或者fd的监听事件发送修改。
在每次循环之前,都会对changefds和anfds的结构中对应的fd事件列表的所有event进行 | 操作,得到当前整个fd当前的监听事件和ANFD.events进行对比,如果没有修改将不会该表epoll的fd的监听事件,这样做的好处,避免了无效的修改,保证了所有对epoll的修改都是必须的,毕竟频繁对epoll进行修改代价还是挺大的。
好了,下面正式分析IO事件是如何触发的,当一个fd监听事件加入时
step1:调用ev_io_start将watcher加入到anfds中,并将修改记录在changfds中
steps2: 调用fd_reify,通过比对changfds & anfds确定是否需要加入epoll事件,此时显然是需要的

核心代码如下,第一处:暂时保存fd的events,第二处:通过遍历watcher链表计算新的events,比较前后是否发送变化,第三处:如果发生变化将修改epoll的监听事件
自此完成监听事件的添加。
step3:调用backend_poll函数得到当前监听已经发生的事件,
#得到事件的fd & 已经发生的events,从anfds中获取对应的ANFD
#遍历ANFD中的watcher链表,比对监听事件和已经发生的监听事件,如果符合将该watcher加入到loop->pendings,修改watcher中的pending变量标记在loop->pendings中的数组下标
step4:遍历循环loop->pendings结构,挨个调用回调函数,从而完成事件触发的一个完整过程
四 事件触发之定时器事件
定时器采用小根堆的方式来维护所有的timer,libev整个过程是采用loop循环的方式,周期性的检测是否有事件发生
在loop中会获取当前堆顶的timer(最近要发生的)以及其他信息来计算当前可以sleep多长时间,从而可以保证进程在休眠的这段时间也不会有事件发生而没有及时通知。
五 ev_run函数解析
ev_run将整个libev的各类事件通知流程串起。整个过程就是个大循环。
过程大致分为
1.检测是否有fork事件,如果有进行fork事件的回调函数
2.在loop之前调用prepare事件的回调函数。
3.检测fd的监听事件是否发生变化,是否需要修改epoll的监听事件
4.计算需要休眠的事件
#根据定时器 & 周期任务 & timeout_blocktime(超时事件收集间隔事件) & io_blocktime(io事件收集间隔事件) 等信息计算此次循环需要sleep的时间
5.如果需要休眠则进行休眠
6.进程从休眠态唤起后,从epoll(pool,kqueue)中获取发生的事件,将对应的watcher加入到 loop->pendings中
7.将定时时间到了的定时器,加入loop->pendings中
8.收集周期任务,加入loop->pendings中
9.收集空闲事件加入loop->pendings中
10.依此对loop->pendings中的watcher中注册的回调函数
自此整个loop完成,总体来说就是在整个loop中检测所有的监听的事件是否发生,然后依次对发生的事件,调用注册的回调函数。
六 源码文件结构
#个平台网络编程接口,不同平台使用不同的文件,从而支持多平台
ev_pool.c
ev_port.c
ev_kqueue.c
ev_select.c
ev_vars.h:定义ev_loop数据结构,使用宏定义的方式进行定义
ev_warp.c:,使用宏定义的方式封装全局变量loop中字段的访问
ev.c:整个libev的核心部分,实现了整个libev的事件通知的大部分业务逻辑
七 总结
libev从整个设计来看还是比较精巧的,大体上将整个事件通知机制划分为两个阶段
#事件发生检测:
各个事件检测过程实现不太一样(IO事件,定时器,周期性任务等各不一样),将检测到发生的事件加入loop->pendings中
#事件回调触发
对loop->pendings的事件,遍历依次触发回调函数
整个libev可能作者出于对代码复用减少重复代码的原因,大量使用宏定义,甚至用宏定义实现了简单的继承关系,这也使得整个项目代码看起来比较晦涩难懂。
libev 源码解析的更多相关文章
- 【原】Android热更新开源项目Tinker源码解析系列之三:so热更新
本系列将从以下三个方面对Tinker进行源码解析: Android热更新开源项目Tinker源码解析系列之一:Dex热更新 Android热更新开源项目Tinker源码解析系列之二:资源文件热更新 A ...
- 【原】Android热更新开源项目Tinker源码解析系列之一:Dex热更新
[原]Android热更新开源项目Tinker源码解析系列之一:Dex热更新 Tinker是微信的第一个开源项目,主要用于安卓应用bug的热修复和功能的迭代. Tinker github地址:http ...
- 【原】Android热更新开源项目Tinker源码解析系列之二:资源文件热更新
上一篇文章介绍了Dex文件的热更新流程,本文将会分析Tinker中对资源文件的热更新流程. 同Dex,资源文件的热更新同样包括三个部分:资源补丁生成,资源补丁合成及资源补丁加载. 本系列将从以下三个方 ...
- 多线程爬坑之路-Thread和Runable源码解析之基本方法的运用实例
前面的文章:多线程爬坑之路-学习多线程需要来了解哪些东西?(concurrent并发包的数据结构和线程池,Locks锁,Atomic原子类) 多线程爬坑之路-Thread和Runable源码解析 前面 ...
- jQuery2.x源码解析(缓存篇)
jQuery2.x源码解析(构建篇) jQuery2.x源码解析(设计篇) jQuery2.x源码解析(回调篇) jQuery2.x源码解析(缓存篇) 缓存是jQuery中的又一核心设计,jQuery ...
- Spring IoC源码解析——Bean的创建和初始化
Spring介绍 Spring(http://spring.io/)是一个轻量级的Java 开发框架,同时也是轻量级的IoC和AOP的容器框架,主要是针对JavaBean的生命周期进行管理的轻量级容器 ...
- jQuery2.x源码解析(构建篇)
jQuery2.x源码解析(构建篇) jQuery2.x源码解析(设计篇) jQuery2.x源码解析(回调篇) jQuery2.x源码解析(缓存篇) 笔者阅读了园友艾伦 Aaron的系列博客< ...
- jQuery2.x源码解析(设计篇)
jQuery2.x源码解析(构建篇) jQuery2.x源码解析(设计篇) jQuery2.x源码解析(回调篇) jQuery2.x源码解析(缓存篇) 这一篇笔者主要以设计的角度探索jQuery的源代 ...
- jQuery2.x源码解析(回调篇)
jQuery2.x源码解析(构建篇) jQuery2.x源码解析(设计篇) jQuery2.x源码解析(回调篇) jQuery2.x源码解析(缓存篇) 通过艾伦的博客,我们能看出,jQuery的pro ...
随机推荐
- awk的妙用
终端形式 有人说awk的优势在于可以个性化输出命令,这么说来太抽象了,假如我们查看占用6379端口的进程信息. lsof -i: 输出结果: COMMAND PID USER FD TYPE DEVI ...
- jQuery 查找父节点 parents()与closest()
parents()由内向外,直到最高的父节点停止查找,返回的父节点是多个 closest()由内向外查找,当找到符合规则的一个,则不再查找,返回的是0或1个
- Centos7 Memcached 安装
1.Linux系统安装memcached,首先要先安装libevent库. yum install libevent libevent-devel 2.安装memcached yum install ...
- python--openCV--其它
t1=cv2.getTickCount() # 记录当前时间,以时钟周期计算 t2=cv2.getTickFrequency() #返回时钟周期,返回CPU的频率,返回CPU一秒中所走的时钟周期数
- Vue event.stopPropagation()和event.preventDefault()的使用
定义和用法 1. event.stopPropagation()方法 阻止事件冒泡到父元素,阻止任何父事件处理程序被执行,但是它的默认事件仍然会执行.当调用这个方法的时候,如果点击了一个链接(a标签) ...
- React组件间通信-sub/pub机制
React生命周期第二个demo演示了兄弟组件的通信,需要通过父组件,比较麻烦:下面介绍sub/pub机制来事项组件间通信. 1.导包 npm i pubsub-js 2.UserSearch.jsx ...
- 关于tensorflow里面的tf.contrib.rnn.BasicLSTMCell 中num_units参数问题
这里的num_units参数并不是指这一层油多少个相互独立的时序lstm,而是lstm单元内部的几个门的参数,这几个门其实内部是一个神经网络,答案来自知乎: class TRNNConfig(obje ...
- LeetCode347——优先队列解决查询前k高频率数字问题
给定一个非空的整数数组,返回其中出现频率前 k 高的元素. 例如, 给定数组 [1,1,1,2,2,3] , 和 k = 2,返回 [1,2]. 注意: 你可以假设给定的 k 总是合理的,1 ≤ k ...
- shell脚本编程进阶
在linux shell中,通常我们将一些命令写在一个文件中就算是一个shell脚本了,但是如果需要执行更为复杂的逻辑判断,我们就需要使用流程控制语句来支持了.所谓流程控制既是通过使用流程控制语句对程 ...
- 整合spring boot时操作数据库时报错Caused by: java.lang.InstantiationException: tk.mybatis.mapper.provider.base.B
原文:https://blog.csdn.net/u__f_o/article/details/82756701 一般出现这种情况,应该是没有扫描到对应的mapper包,即在启动类下配置MapperS ...