Future Promise 模式(netty源码9)
netty源码死磕9
Future Promise 模式详解
1. Future/Promise 模式
1.1. ChannelFuture的由来
由于Netty中的Handler 处理都是异步IO操作,结果是未知的。
Netty继承和扩展了JDK Future的API,定义了自身的Future系列类型,实现异步操作结果的获取和监控。
其中,最为重要的是ChannelFuture 。
代码如下:
public interface ChannelFuture extends Future<Void> {
//...
Channel channel();
@Override
ChannelFuture addListener(GenericFutureListener<? extends Future<? super Void>> listener);
@Override
ChannelFuture sync() throws InterruptedException;
//...
}
之所以命名为ChannelFuture,表示跟Channel的操作有关。
ChannelFuture用于获取Channel相关的操作结果,添加事件监听器,取消IO操作,同步等待。
1.2. 来自Netty的官方建议
java.util.concurrent.Future是Java提供的接口,提供了对异步操作的简单干预。
Future接口定义了isDone()、isCancellable(),用来判断异步执行状态。Future接口的get方法,可以用来获取结果。get方法首先会判断任务是否执行完成,如果完成就返回结果,否则阻塞线程,直到任务完成。
Netty官方文档直接说明——Netty的网络操作都是异步的,Netty源码上大量使用了Future/Promise模式。
如果用户操作调用了sync或者await方法,会在对应的future对象上阻塞用户线程,例如future.channel().closeFuture().sync()。
Netty 的Future 接口,在继承了java.util.concurrent.Future的基础上,增加了一系列监听器方法,比如addListener()、removeListener() 等等。Netty强烈建议,通过添加监听器的方式获取IO结果,而不是通过JDK Future的同步等待的方式去获取IO结果。
1.3. Netty 的 Future 接口
Netty扩展了Java的Future,增加了监听器Listener接口,通过监听器可以让异步执行更加有效率,不需要通过get来等待异步执行结束,而是通过监听器回调来精确地控制异步执行结束的时间点。
这一点,正好是Netty在Future模式的最主要的改进。
public interface Future<V> extends java.util.concurrent.Future<V> {
boolean isSuccess();
boolean isCancellable();
Throwable cause();
Future<V> addListener(GenericFutureListener<? extends Future<? super V>> listener);
Future<V> removeListener(GenericFutureListener<? extends Future<? super V>> listener);
Future<V> sync() throws InterruptedException;
boolean awaitUninterruptibly(long timeout, TimeUnit unit);
boolean awaitUninterruptibly(long timeoutMillis);
V getNow();
boolean cancel(boolean mayInterruptIfRunning);
}
1.4. ChannelFuture使用的实例
Netty的出站和入站操作,都是异步的。
以最为经典的NIO出站操作——write出站为例,说一下ChannelFuture的使用。
代码如下:
ChannelFuture future = ctx.channel().write(msg);
future.addListener(
new ChannelFutureListener()
{
@Override
public void operationComplete(ChannelFuture future)
{
// write操作完成后的回调代码
}
});
在write操作调用后,Netty并没有完成对Java NIO底层连接的写入操作,出站操作是异步执行的。
如果需要获取IO结果,可以使用回调的方式。
使用ChannelFuture的异步完成后的回调,需要搭配使用另外的一个接口ChannelFutureListener ,他从父接口哪里继承了一个被回调到的operationComplete操作完成的方法。
ChannelFutureListener 的父亲接口是GenericFutureListener 接口。
定义如下:
public interface GenericFutureListener
<F extends Future<?>> extends EventListener
{
void operationComplete(F future) throws Exception;
}
异步操作完成后的回调代码,放在operationComplete方法中的实现中,就可以了。
1.5. Netty的 Promise接口
Netty的Future,只是增加了监听器。整个异步的状态,是不能进行设置和修改的。
换句话说,Future是只读的,是不可以写的。
于是,Netty的 Promise接口扩展了Netty的Future接口,它表示一种可写的Future,就是可以设置异步执行的结果。
部分源码如下:
public interface Promise<V> extends Future<V> {
Promise<V> setSuccess(V result);
Promise<V> setFailure(Throwable cause);
boolean setUncancellable();
//....
}
在IO操作过程,如果顺利完成、或者发生异常,都可以设置Promise的结果,并且通知Promise的Listener们。
而ChannelPromise接口,则继承扩展了Promise和ChannelFuture。所以,ChannelPromise既绑定了Channel,又具备了监听器的功能,还可以设置IO操作的结果,是Netty实际编程使用的最多的接口。
在AbstratChannel的代码中,相当多的IO操作,都会返回ChannelPromise类型实例作为调用的返回值。 通过这个返回值,客户程序可以用于读取IO操作的结果,执行IO操作真正完成后的回调。
1.6. ChannelPromise的监控流程
在AbstractChannel中,定义了几个对Channel的异步状态进行监控的Promise和Future成员,用于监控Channel的连接是否成功,连接是否关闭。
源码如下:
public abstract class AbstractChannel extends DefaultAttributeMap implements Channel {
//连接成功的监控
private final ChannelFuture succeededFuture = new SucceededChannelFuture(this, null);
//连接关闭的监控
private final CloseFuture closeFuture = new CloseFuture(this);
//...
}
对于每个Channel对象,都会有唯一的一个CloseFuture 成员,用来表示关闭的异步干预。如果要监控Channel的关闭,或者同步等待Channel关闭。
一般情况下,在应用程序中使用如下的代码:
// Start the server.
ChannelFuture f = b.bind(PORT).sync(); // Wait until the server socket is closed.
f.channel().closeFuture().sync();
一般来说,编写以上代码的都是在Main线程中用来启动ServerBootStrap的,所以Main线程会被阻塞,保证服务端Channel的正常运行。
上面的代码中,channel.closeFuture()不做任何操作,只是简单的返回channel对象中的closeFuture对象。而CloseFuture的sync方法,会将当前线程阻塞在CloseFuture上。
那么,f.channel().closeFuture().sync() 实际是如何工作的呢?
1.7. CloseFuture的sync 同步方法
CloseFuture继承了DefaultPromise的sync同步方法。
DefaultPromise的代码如下:
public class DefaultPromise<V> extends AbstractFuture<V>
implements Promise<V>
{ private volatile Object result;
//...
@Override
public Promise<V> sync() throws InterruptedException { await();
//...
} @Override
public Promise<V> await() throws InterruptedException { //...
synchronized (this) {
while (!isDone()) {
incWaiters();
try {
wait(); //阻塞了,死等
} finally {
decWaiters();
}
}
}
return this;
}
//... }
从源码可以看出,sync方法,调用了await方法。
在await方法中,CloseFuture 使用java 基础的synchronized 方法进行线程同步;并且,使用CloseFuture.wait / notify 这组来自Object根类中的古老方法进行线程之间的等待和唤醒。
在await方法,不断的自旋,判断当前的 CloseFuture 实例的结果是否已经完成,如果没有完成 !isDone() ,就不断的等待。一直到 isDone() 的值为true。
isDone() 的源码如下:
@Override
public boolean isDone() {
return isDone0(result);
} private static boolean isDone0(Object result) {
return result != null && result != UNCANCELLABLE;
}
CloseFuture的 isDone() 的条件是否能够满足,和Channel的close 关闭连接的出站操作有关。
下一步,我们来看 isDone() 的条件,如何才能够满足?
1.8. close 出站处理流程
在Netty中,close 关闭连接的操作,属于所有的出站操作的一种。关于Netty出站处理的流程,在前面的文字中,已经非常详细的介绍了。这里不再赘述,只是简单的列出一个流程图。
close 关闭连接的出站操作,其流程如下图所示:
一溜儿下来,最终会落地到unsafe.doClose 方法。
看看unsafe.doClose,是如何与CloseFuture的 isDone() 的条件进行关联的。
1.9. unsafe.doClose
unsafe.doClose 方法中,设置了CloseFuture 的result值。
unsafe.doClose 源码如下:
protected abstract class AbstractUnsafe implements Unsafe
{
private void close(final ChannelPromise promise,…) {
//…
try {
// Close the channel
doClose0(promise);
} finally {
// Fail all the queued messages.
outboundBuffer.failFlushed(cause, notify);
outboundBuffer.close(closeCause);
}
//……
}
}
private void doClose0(ChannelPromise promise) {
try {
doClose();
closeFuture.setClosed();
safeSetSuccess(promise);
} catch (Throwable t) {
closeFuture.setClosed();
safeSetFailure(promise, t);
}
}
//……
}
1.10. closeFuture.setClosed()
在closeFuture.setClosed() 设置关闭的结果的过程中,主要完成以下三个工作:
1 设置result的值
2 notifyAll,唤醒在本Promise上等待的线程
3 回调listener
closeFuture.setClosed()的主要源码如下:
boolean setClosed() {
return super.trySuccess();
}
@Override
//这个定义在父类中
public boolean trySuccess(V result) {
if (setSuccess0(result)) {
notifyListeners();
return true;
}
return false;
}
private boolean setSuccess0(V result) {
return setValue0(result == null ? SUCCESS : result);
}
上面的 notifyListeners()调用,就是用来唤醒了等待在closeFuture 实例对象上的等待线程。
到了这里,终于松了一口气了。
之前通过 f.channel().closeFuture().sync() 同步操作,阻塞在哪儿的Main线程,终于通过channel.close() 方法,给唤醒了。
1.11. 警惕死锁:Reactor线程不能sync
在上面的源码中,最终触发future对象的notify动作的线程,都是eventLoop线程(Reactor线程)。
一般情况下,Channel的出站和入站操作,也都是在eventLoop线程的轮询任务中完成的。
例如因为不论是用户直接关闭channel,或者eventLoop的轮询状态关闭channel,都会在eventLoop的线程内完成notify动作。notify那些通过sync操作,正在等待CloseFuture的哪些阻塞线程。
所以不要在Reactor线程内调用future对象的sync或者await方法。如果在Reactor线程进行sync或者await,会有可能引起死锁。
为什么呢?
在Reactor线程进行sync时,会进入等待状态,等待Future(DefaultPromise)的 isDone 的条件满足。通过前面的例子,我们已经看到了,而Future的isDone的条件,又需要Reactor线程的出站或者入站操作来满足。这是,Reactor线程既然已经处于等待状态,怎么可能再进行其他的出站或者入站操作呢?相当于自己等自己,这就是典型的死锁。
在实际开发中,由于应用程序代码都是编写在自定义的channelHandler处理器中,而channelHandler是在eventLoop线程(Reactor线程)内执行的。所以,不能在channelHandler中调用Future(DefaultPromise)的sync或者await两个同步方法。
正确的做法是:通过给Future(DefaultPromise) 增加listeners监听器 的方式,来干预异步操作的过程,处理异步操作的结果。
这样,可以避免使用Future带来的死锁。
无编程不创客,无案例不学习。疯狂创客圈,一大波高手正在交流、学习中!
疯狂创客圈 Netty 死磕系列 10多篇深度文章: 【博客园 总入口】 QQ群:104131248
Future Promise 模式(netty源码9)的更多相关文章
- Pipeline inbound(netty源码7)
netty源码死磕7 Pipeline 入站流程详解 1. Pipeline的入站流程 在讲解入站处理流程前,先脑补和铺垫一下两个知识点: (1)如何向Pipeline添加一个Handler节点 ( ...
- Netty 源码解析(三): Netty 的 Future 和 Promise
今天是猿灯塔“365篇原创计划”第三篇. 接下来的时间灯塔君持续更新Netty系列一共九篇 Netty 源码解析(一): 开始 Netty 源码解析(二): Netty 的 Channel 当前:Ne ...
- Netty源码分析第7章(编码器和写数据)---->第5节: Future和Promies
Netty源码分析第七章: 编码器和写数据 第五节: Future和Promise Netty中的Future, 其实类似于jdk的Future, 用于异步获取执行结果 Promise则相当于一个被观 ...
- Pipeline模式(netty源码死磕6)
精进篇:netty源码死磕6 巧夺天工--Pipeline模式揭秘 1. 巧夺天工--Pipeline模式揭秘 1.1. Pipeline模式简介 管道的发名者叫,Malcolm Douglas M ...
- Netty源码阅读(一) ServerBootstrap启动
Netty源码阅读(一) ServerBootstrap启动 转自我的Github Netty是由JBOSS提供的一个java开源框架.Netty提供异步的.事件驱动的网络应用程序框架和工具,用以快速 ...
- Netty 源码 NioEventLoop(一)初始化
Netty 源码 NioEventLoop(一)初始化 Netty 系列目录(https://www.cnblogs.com/binarylei/p/10117436.html) Netty 基于事件 ...
- Netty-主从Reactor多线程模式的源码实现
Netty--主从Reactor多线程模式的源码实现 总览 EventLoopGroup到底是什么? EventLoopGroup是一个存储EventLoop的容器,同时他应该具备线程池的功能. gr ...
- Netty 源码学习——客户端流程分析
Netty 源码学习--客户端流程分析 友情提醒: 需要观看者具备一些 NIO 的知识,否则看起来有的地方可能会不明白. 使用版本依赖 <dependency> <groupId&g ...
- netty源码分析(十八)Netty底层架构系统总结与应用实践
一个EventLoopGroup当中会包含一个或多个EventLoop. 一个EventLoop在它的整个生命周期当中都只会与唯一一个Thread进行绑定. 所有由EventLoop所处理的各种I/O ...
随机推荐
- SparkMLlib分类算法之逻辑回归算法
SparkMLlib分类算法之逻辑回归算法 (一),逻辑回归算法的概念(参考网址:http://blog.csdn.net/sinat_33761963/article/details/5169383 ...
- 2017.9.15 postgresql批量插入造成冲突后执行更新
参考来自:https://stackoverflow.com/questions/40647600/postgresql-multi-value-upserts/46233907#46233907 1 ...
- Android开发Tips(2)
欢迎Follow我的GitHub, 关注我的CSDN. 我会介绍关于Android的一些有趣的小知识点. 上一篇. 1. Dagger2的开发顺序 Module -> Component -&g ...
- MySQL的四种变量类型
一.全局变量在系统运行期间动态更改其参数,重启后失效.SET GLOABL var=XXX;SET @@global.var=XXX;以上两种方式等效 查看系统的全局变量show global var ...
- Android 软键盘的监听(监听高度,是否显示)
Android官方本身没有提供一共好的方法来对软键盘进行监听,但我们实际应用时.非常多地方都须要针对软键盘来对UI进行一些优化. 下面是整理出来的一个不错的方法.大家能够使用. public clas ...
- Vue mixins extend
const mixins = { created () { console.log('mixins created') } } const mixins2 = { created () { conso ...
- axios 处理并发请求
//同时发起多个请求时的处理 axios.all([get1(), get2()]) .then(axios.spread(function (res1, res2) { // 只有两个请求都完成才会 ...
- 【Excle】科学计数法快速还原
在Excle的单元格中,如果输入大于11位的数字,结果就会以E+形式显示 如果是单个输入的话,只需要把Excle中的单元格格式设置为文本即可,然后输入就不会出现科学计数法,但是有时候是从外部导入的序号 ...
- mongodb在Windows安装配置及遇到的问题、java连接测试
一.安装 1.访问mongodb的官网http://www.mongodb.org/downloads下载64bit的包,我下载的是mongodb-win32-x86_64-2008plus-ssl- ...
- BFS和DFS的java实现
<pre name="code" class="java"> import java.util.HashMap; import java.util. ...