Netty源码解析 -- PoolChunk实现原理(jemalloc 3的算法)

前面文章已经分享了Netty如何实现jemalloc 4算法管理内存. 本文主要分享Netty 4.1.52之前版本中,PoolChunk如何使用jemalloc 3算法管理内存. 感兴趣的同学可以对比两种算法. 源码分析基于Netty 4.1.29 首先说明PoolChunk内存组织方式. PoolChunk的内存大小默认是16M,它将内存组织成为一颗完美二叉树. 二叉树的每一层每个节点所代表的内存大小都是均等的,并且每一层节点所代表的内存大小总和加起来都是16M. 每一层节点可分配内存是父节…

Netty源码解析 -- PoolChunk实现原理

本文主要分享Netty中PoolChunk如何管理内存. 源码分析基于Netty 4.1.52 内存管理算法首先说明PoolChunk内存组织方式. PoolChunk的内存大小默认是16M,Netty将它划分为2048个page,每个page为8K. PoolChunk上可以分配Normal内存块. Normal内存块大小必须是page的倍数. PoolChunk通过runsAvail字段管理内存块. PoolChunk#runsAvail是PriorityQueue数组,其中Priorit…

Netty源码解析 -- PoolSubpage实现原理

前面文章说了PoolChunk如何管理Normal内存块,本文分享PoolSubpage如何管理Small内存块. 源码分析基于Netty 4.1.52 内存管理算法 PoolSubpage负责管理Small内存块.一个PoolSubpage中的内存块size都相同,该size对应SizeClasses#sizeClasses表格的一个索引index. 新创建的PoolSubpage都必须加入到PoolArena#smallSubpagePools[index]链表中. PoolArena#sm…

顺序线性表 ---- ArrayList 源码解析及实现原理分析

原创播客,如需转载请注明出处.原文地址:http://www.cnblogs.com/crawl/p/7738888.html ---------------------------------------------------------------------------------------------------------------------------------------------------------- 笔记中提供了大量的代码示例,需要说明的是,大部分代码示例都是本…

Netty源码解析—客户端启动

Netty源码解析-客户端启动 Bootstrap示例 public final class EchoClient { static final boolean SSL = System.getProperty("ssl") != null; static final String HOST = System.getProperty("host", "127.0.0.1"); static final int PORT = Integer.par…

Netty源码解析---服务端启动

Netty源码解析---服务端启动一个简单的服务端代码: public class SimpleServer { public static void main(String[] args) { NioEventLoopGroup boss = new NioEventLoopGroup(1); NioEventLoopGroup worker = new NioEventLoopGroup(); try { ServerBootstrap b = new ServerBootstrap();…

Netty 源码解析（三）: Netty 的 Future 和 Promise

今天是猿灯塔“365篇原创计划”第三篇. 接下来的时间灯塔君持续更新Netty系列一共九篇 Netty 源码解析(一): 开始 Netty 源码解析(二): Netty 的 Channel 当前:Netty 源码解析(三): Netty 的 Future 和 Promise Netty 源码解析(四): Netty 的 ChannelPipeline Netty 源码解析(五): Netty 的线程池分析 Netty 源码解析(六): Channel 的 register 操作 Netty 源码…

Netty 源码解析（九）: connect 过程和 bind 过程分析

原创申明:本文由公众号[猿灯塔]原创,转载请说明出处标注今天是猿灯塔“365篇原创计划”第九篇. 接下来的时间灯塔君持续更新Netty系列一共九篇 Netty 源码解析(一): 开始 Netty 源码解析(二): Netty 的 Channel Netty 源码解析(三): Netty的 Future 和 Promise Netty 源码解析(四): Netty 的 ChannelPipeline Netty 源码解析(五): Netty 的线程池分析 Netty 源码解析(六): Chann…

Netty 源码解析（八）: 回到 Channel 的 register 操作

原创申明:本文由公众号[猿灯塔]原创,转载请说明出处标注今天是猿灯塔“365篇原创计划”第八篇. 接下来的时间灯塔君持续更新Netty系列一共九篇 Netty 源码解析(一): 开始 Netty 源码解析(二): Netty 的 Channel Netty 源码解析(三): Netty 的 Future 和 Promise Netty 源码解析(四): Netty 的 ChannelPipeline Netty 源码解析(五): Netty 的线程池分析 Netty 源码解析(六): Chan…

Netty 源码解析（七）: NioEventLoop 工作流程

原创申明:本文由公众号[猿灯塔]原创,转载请说明出处标注今天是猿灯塔“365篇原创计划”第七篇. 接下来的时间灯塔君持续更新Netty系列一共九篇 Netty 源码解析(一): 开始 Netty 源码解析(二): Netty 的 Channel Netty 源码解析(三): Netty 的 Future 和 Promise Netty 源码解析(四): Netty 的 ChannelPipeline Netty 源码解析(五): Netty 的线程池分析 Netty 源码解析(六): Chan…

Netty 源码解析（六）: Channel 的 register 操作

原创申明:本文由公众号[猿灯塔]原创,转载请说明出处标注今天是猿灯塔“365篇原创计划”第六篇. 接下来的时间灯塔君持续更新Netty系列一共九篇 Netty 源码解析(一 ):开始 Netty 源码解析(二): Netty 的 Channel Netty 源码解析(三): Netty 的 Future 和 Promise Netty 源码解析(四): Netty 的 ChannelPipeline Netty 源码解析(五): Netty 的线程池分析当前:Netty 源码解析(六):…

Netty 源码解析（五）: Netty 的线程池分析

今天是猿灯塔“365篇原创计划”第五篇. 接下来的时间灯塔君持续更新Netty系列一共九篇 Netty 源码解析(一): 开始 Netty 源码解析(二): Netty 的 Channel Netty 源码解析(三): Netty的 Future 和 Promise Netty 源码解析(四): Netty 的 ChannelPipeline 当前:Netty 源码解析(五): Netty 的线程池分析 Netty 源码解析(六): Channel 的 register 操作 Netty 源码解…

Netty 源码解析（四）: Netty 的 ChannelPipeline

今天是猿灯塔“365篇原创计划”第四篇. 接下来的时间灯塔君持续更新Netty系列一共九篇 Netty 源码解析(一): 开始 Netty 源码解析(二): Netty 的 Channel Netty 源码解析(三): Netty 的 Future 和 Promise 当前:Netty 源码解析(四): Netty 的 ChannelPipeline Netty 源码解析(五): Netty 的线程池分析 Netty 源码解析(六): Channel 的 register 操作 Netty 源码…

Netty 源码解析（二）：Netty 的 Channel

本文首发于微信公众号[猿灯塔],转载引用请说明出处接下来的时间灯塔君持续更新Netty系列一共九篇 Netty源码解析(一):开始当前:Netty 源码解析(二): Netty 的 Channel Netty 源码解析(三): Netty 的 Future 和 Promise Netty 源码解析(四): Netty 的 ChannelPipeline Netty 源码解析(五): Netty 的线程池分析 Netty 源码解析(六): Channel 的 register 操作 Netty…

netty源码解析(4.0)-27 ByteBuf内存池:PoolArena-PoolThreadCache

前面两章分析的PoolChunk和PoolSubpage,从功能上来说已经可以直接拿来用了.但直接使用这个两个类管理内存在高频分配/释放内存场景下会有性能问题,PoolChunk分配内存时算法复杂度最高的是allocateNode方法,释放内存时算法复杂度最高的是free方法. PoolChunk中二叉树的高度是maxOrder, 那么算法负责度是O(maxOrder),netty默认的maxOrder是11.另外,PoolChunk不是线程安全的,如果在多线程环境下需要加锁调用,这个开销比算…

Netty源码解析 -- ChannelPipeline机制与读写过程

本文继续阅读Netty源码,解析ChannelPipeline事件传播原理,以及Netty读写过程. 源码分析基于Netty 4.1 ChannelPipeline Netty中的ChannelPipeline可以理解为拦截器链,维护了一个ChannelHandler链表,ChannelHandler即具体拦截器,可以在读写过程中,对数据进行处理. ChannelHandler也可以分为两类. ChannelInboundHandler,监控Channel状态变化,如channelActive,…

Netty源码解析 -- 服务端启动过程

本文通过阅读Netty源码,解析Netty服务端启动过程. 源码分析基于Netty 4.1 Netty是一个高性能的网络通信框架,支持NIO,OIO等多种IO模式.通常,我们都是使用NIO模式,该系列文章也是解析Netty下NIO模式的实现. 首先,看一个NIO网络通信示意图 Netty中NIO网络通信过程在此基础上实现,下面来看一下具体实现. Channel 首先,看一下Netty中的通道Channel,它代表了一个能完成IO操作的通道,提供read, write, connect, bind…

【Netty源码解析】NioEventLoop

上一篇博客[Netty源码学习]EventLoopGroup中我们介绍了EventLoopGroup,实际说来EventLoopGroup是EventLoop的一个集合,EventLoop是一个单线程的线程池,其接口和类实现关系如下: 接下来我们主要介绍实现类NioEventLoop中实现的操作,通过NioEventLoop的继承关系图我们可以看到,其就是一个单线程的线程池. 首先我们看NioEventLoop的构造函数在构造函数中我们可以看到,其主要操作有获得NIO操作的Selector, …

Netty源码解析 -- FastThreadLocal与HashedWheelTimer

Netty源码分析系列文章已接近尾声,本文再来分析Netty中两个常见组件:FastThreadLoca与HashedWheelTimer. 源码分析基于Netty 4.1.52 FastThreadLocal FastThreadLocal比较简单. FastThreadLocal和FastThreadLocalThread是配套使用的. FastThreadLocalThread继承了Thread,FastThreadLocalThread#threadLocalMap 是一个Interna…

2、Dubbo源码解析--服务发布原理（Netty服务暴露）

一.服务发布 - 原理: 首先看Dubbo日志,截取重要部分: 1)暴露本地服务 Export dubbo service com.alibaba.dubbo.demo.DemoService to local registry, dubbo version: 2.0.0, current host: 10.165.2.47 2)暴露远程服务 Export dubbo service com.alibaba.dubbo.demo.DemoService to url dubbo://10.165…

Netty源码解析 -- 事件循环机制实现原理

本文主要分享Netty中事件循环机制的实现. 源码分析基于Netty 4.1 EventLoop 前面分享服务端和客户端启动过程的文章中说过,Netty通过事件循环机制(EventLoop)处理IO事件和异步任务,简单来说,就是通过一个死循环,不断处理当前已发生的IO事件和待处理的异步任务.示例如下 while(true) { process(selector.select()); process(getTask()); } 这种事件循环机制也是一种常用的IO事件处理机制,包括Redis,Mys…

Netty源码解析 -- 对象池Recycler实现原理

由于在Java中创建一个实例的消耗不小,很多框架为了提高性能都使用对象池,Netty也不例外. 本文主要分析Netty对象池Recycler的实现原理. 源码分析基于Netty 4.1.52 缓存对象管理 Recycler的内部类Stack负责管理缓存对象. Stack关键字段 // Stack所属主线程,注意这里使用了WeakReference WeakReference<Thread> threadRef; // 主线程回收的对象 DefaultHandle<?>[] elem…

Netty源码解析 -- ChannelOutboundBuffer实现与Flush过程

前面文章说了,ChannelHandlerContext#write只是将数据缓存到ChannelOutboundBuffer,等到ChannelHandlerContext#flush时,再将ChannelOutboundBuffer缓存的数据写到Channel中. 本文分享Netty中ChannelOutboundBuffer的实现以及Flush过程. 源码分析基于Netty 4.1 每个Channel的AbstractUnsafe#outboundBuffer 都维护了一个ChannelO…

Netty源码解析 -- 零拷贝机制与ByteBuf

本文来分享Netty中的零拷贝机制以及内存缓冲区ByteBuf的实现. 源码分析基于Netty 4.1.52 Netty中的零拷贝 Netty中零拷贝机制主要有以下几种 1.文件传输类DefaultFileRegion#transferTo,调用FileChannel#transferTo,直接将文件缓冲区的数据发送到目标Channel,减少用户缓冲区的拷贝(通过linux的sendfile函数). 使用read 和 write过程如下使用sendfile 可以看到,使用sendfile函数可…

Netty源码解析 -- 内存对齐类SizeClasses

在学习Netty内存池之前,我们先了解一下Netty的内存对齐类SizeClasses,它为Netty内存池中的内存块提供大小对齐,索引计算等服务方法. 源码分析基于Netty 4.1.52 Netty内存池中每个内存块size都符合如下计算公式 size = 1 << log2Group + nDelta * (1 << log2Delta) log2Group:内存块分组 nDelta:增量乘数 log2Delta:增量大小的log2值 SizeClasses初始化后,将计算c…

Netty源码解析 -- 内存池与PoolArena

我们知道,Netty使用直接内存实现Netty零拷贝以提升性能, 但直接内存的创建和释放可能需要涉及系统调用,是比较昂贵的操作,如果每个请求都创建和释放一个直接内存,那性能肯定是不能满足要求的. 这时就需要使用内存池. 即从系统中申请一大块内存,再在上面分配每个请求所需的内存. Netty中的内存池主要涉及PoolArena,PoolChunk与PoolSubpage. 本文主要分析PoolArena的作用与实现. 源码分析基于Netty 4.1.52 接口关系 ByteBufAllocator…