OceanBase server处理网络包的回调逻辑
OceanBase处理网络包的逻辑还是蛮绕的,这里以UPS为例,作为给自己的备忘。
UPS代码的main.cpp中调用ObUpdateServerMain的start启动server。start函数会调用ObUpdateServerMain的do_work函数,此函数调用ObUpdateServer类的start启动UPS。
ObUpdateServer继承自如下几个类:
1)common::ObBaseServer,基础的server类,要求派生类实现handlePacket和handleBatchPacket方法(后一个UPS不会使用),这两个是纯虚函数,同时有个虚函数start_service,派生类可以实现此方法用于初始化时做些server相关的逻辑;
2)ObPacketQueueHandler, 要求派生类实现handlePacketQueue接口;
3)common::IBatchPacketQueueHandler,要求派生类实现handleBatchPacketQueue接口;
ObUpdateServer类的start函数实际上调用的ObBaseServer的start函数,此函数做如下几件事:
1)初始化libeasy相关的一系列数据结构, 在特定的网络端口上监听等;
2)调用initialize函数(需要派生类实现);
3)调用start_service函数(派生类可自己实现);
ObUpdateServer的initialize函数,做一系列启动UPS内部所需的参数的初始化,除了必要的参数外,有几个需要特别注意下:
1)server_handler_,此变量的类型是easy_io_handler_pt,此处注册一系列回调,包括收包时的编解码(server_handler_.encode/server_handler_.decode),收包时的处理逻辑(server_handler_.process),断开连接时的处理等(server_handler_.on_disconnect)等;编解码相关等都是使用的所有OB server共用的ObTbnetCallback类的方法,版本升级时包的格式变化只需要统一改此common类的方法即可;包的处理逻辑调用的UPS自己的ObUpdateCallback::process方法;
2)client_manager_的初始化,后续server发包都需要用到client_manager_;
3)rpc相关的初始化;
4)一系列worker线程的初始化(如read_thread_queue_/write_thread_queue_/lease_thread_queue_等,具体看代码,指定不同类型线程的线程数,将this传给各个线程用作handler回调等);
ObUpdateServer的start_service函数,调用start_threads(此函数调用上述一系列worker线程的start方法,等候收到任务处理),start_timer_schedule设定一系列ObTimer设定一些定时器相关的处理逻辑。
如上和网络包处理相关的一系列函数说清楚了,然后具体说说网络包收到后是怎么处理的。
libeasy收到包会调用注册的回调方法ObUpdateCallback::process,此函数会调用ObUpdateServer的handlePacket方法,此函数由各server自己实现,如UPS,会根据packet_code不同,或者进行本地处理(因为libeasy有多个IO poll thread,所以本地可以处理一些耗时少的操作包),或是扔给不同的worker类处理。这里分别举个例子:
1)packet_code为OB_SET_OBI_ROLE类型的包,调用read_thread_queue_的push方法,交由read_thread_queue_线程处理;
2)packet_code为OB_UPS_CLEAR_FATAL_STATUS类型的包,调用lease_thread_queue_的push方法,交由lease_thread_queue_线程处理;
3)OB_WRITE/OB_MS_MUTATE/OB_FAKE_WRITE_FOR_KEEP_ALIVE/OB_UPS_PHY_PLAN_EXECUTE/OB_START_TRANSACTION/OB_END_TRANSACTION/OB_WRITE_DUMMY_LOG类型的包,直接在IO线程中调用trans_executor_的handle_packet函数处理;这里注意下,trans_executor_的handle_packet也会进一步判断包的类型,确定是直接在此函数中处理(transe_executor_类对不同类型的包实现了一系列的handle函数),还是通过调用push_task_交由trans_executor自己的一系列worker线程处理。
read_thread_queue_等worker线程是common::ObPacketQueueThread类型的(或者其他类似类型)实例,此类类型都是tbsys::CDefaultRunnable的派生类,其内部含有一个阻塞队列等消息到来,同时有一个用于回调的ObPacketQueueHandler类型的handler(注意ObUpdateServer就继承自ObPacketQueueHandler,实际上此处注册的handler就是ObUpdateServer类的对象)。此类worker线程start后真正调用的是ObPacketQueueThread::run函数,此函数即从内部队列中取消息,然后调用ObUpdateServer的handlePacketQueue函数,handlePacketQueue函数再根据包的类型调用ObUpdateServer类实现的各类方法对包进行处理。此处由于是worker线程,所有包都是线程本地处理的。
至此,整个处理包的逻辑应该被串起来了。其实主要是初看代码时handlePacket/handlePacketQueue/handleBatchPacket/handleBatchPacketQueue各由谁调用,以及在哪个线程空间中被调用不太好理解。
OceanBase server处理网络包的回调逻辑的更多相关文章
- c#基于事件模型的UDP通讯框架(适用于网络包编解码)
之前写过一篇关于c#udp分包发送的文章 这篇文章里面介绍的方法是一种实现,可是存在一个缺点就是一个对象序列化后会增大非常多.不利于在网络中的传输. 我们在网络中的传输是须要尽可能的减小传送的数据包的 ...
- 图解server端网络架构
这篇是计算机类的优质首发推荐>>>><图解server端网络架构> 467张图表讲透构建高可用高性能server实战 写给网络架构师 serverproject师的 ...
- Sql Server 部署SSIS包完成远程数据传输
本篇介绍如何使用SSIS和作业完成自动更新目标数据任务. ** 温馨提示:如需转载本文,请注明内容出处.** 本文链接:https://www.cnblogs.com/grom/p/9018978.h ...
- 解决方法:SQL Server 检测到基于一致性的逻辑 I/O 错误 校验和不正(转载)
引用:http://luowei1371984.blog.163.com/blog/static/44041589201491844323885/ SQL2008运行select count(*) f ...
- SharpPcap网络包捕获框架的使用--实例代码在vs2005调试通过
转自:http://hi.baidu.com/boyxgb/blog/item/89ac86fbdff5f82c4e4aea2e.html 由于项目的需要,要从终端与服务器的通讯数据中获取终端硬件状态 ...
- ios 抓取真机的网络包
一直被如何从真机上抓包所困扰!今天偶然看到了最简单有效的方法!分享一下: 原地址链接 http://blog.csdn.net/phunxm/article/details/38590561 通过 R ...
- 【原创】使用Fiddler抓取手机网络包
一: 下载安装Fiddler 二: 打开 tools--Telerik Fiddler Options, 进行如下设置
- TJI读书笔记14-闭包与回调
TJI读书笔记14-闭包与回调 闭包与回调 为什么要使用内部类?内部类继承自某个类或者实现某个接口,内部类的代码可以操作外嵌类的对象. 这不是使用内部类的理由. 那么为什么使用内部类呢? 我觉得如 ...
- Openvswitch原理与代码分析(4):网络包的处理过程
在上一节提到,Openvswitch的内核模块openvswitch.ko会在网卡上注册一个函数netdev_frame_hook,每当有网络包到达网卡的时候,这个函数就会被调用. stati ...
随机推荐
- t-sql或mssql怎么用命令行导入数据脚本
osql简单用法:用来将本地脚本执行,适合sql脚本比较大点的情况,执行起来比较方便 osql -S serverIP -U sa -P 123 -i C:\script.sql serverIP数据 ...
- Javah提示未找到 ..的类文件
D:\我的文档\workspace\PrepareForExam\src>javah -classpath D:\我的文档\workspace\ PrepareForExam\src\com\e ...
- [游戏模版10] Win32 平面地图贴图 正
>_<:picture resource >_<:If you master the ways of mapping picture,then this problem is ...
- 说不尽的MVVM(2) – MVVM初体验
知识预备 阅读本文,我假定你已经具备以下知识: C#.WPF基础知识 了解Lambda表达式和TPL 对事件驱动模型的了解 知道ICommand接口 发生了什么 某程序员接到一个需求,编写一个媒体渲染 ...
- IOS Storyboard使用-模拟登录、注册、混合使用
最近分析IOS的占有率,发现5.0以下的少之又少了,故而决定新的App用 Storyboard开发,找了很多资料都是点上的,这个简单的demo是测试代码,发上来,供新手参考. 模拟登录.注册.和显示主 ...
- [RabbitMQ] AMQP close-reason, initiated by Library, code=541
RabbitMQ.Client.Exceptions.BrokerUnreachableException: None of the specified endpoints were reachabl ...
- Atiti.ui原理与gui理论
Atiti.ui原理与gui理论 1. 概论2 2. ui的类型2 2.1. RMGUI vs IMGUI2 2.2. Cli2 2.3. Gui2 2.4. Nui natural user int ...
- iOS App 研发的最后冲刺:内测与部署
当开发者历经磨难.披荆斩棘,完成了一个iOS项目后,最后的临门一脚就是应用的内测.部署.那么,在这最后的射门动作中,都有哪些地方需要开发者注意?有哪些方式能够更好地帮助我们进行iOS应用的发布部署? ...
- Leetcode 204 Count Primes 数论
题意:统计小于n的质数个数. 作为一个无节操的楼主,表示用了素数筛法,并没有用线性素数筛法. 是的,素数筛法并不是该题最佳的解法,线性素数筛法才是. 至于什么是素数筛法,请百度吧. class Sol ...
- PowerManager和WakeLock的操作步骤
① PowerManager pm = (PowerManager) getSystemService(Context.POWER_SERVICE);通过 Context.getSystemServ ...