欢迎访问我的GitHub

https://github.com/zq2599/blog_demos

内容:所有原创文章分类汇总及配套源码,涉及Java、Docker、Kubernetes、DevOPS等;

《disruptor笔记》系列链接

  1. 快速入门
  2. Disruptor类分析
  3. 环形队列的基础操作(不用Disruptor类)
  4. 事件消费知识点小结
  5. 事件消费实战
  6. 常见场景
  7. 等待策略
  8. 知识点补充(终篇)

关于独立消费和共同消费

  • 本篇是《disruptor笔记》的第四篇,前面章节写了不少代码,搞得读者和作者都辛苦,本篇稍微放松一下,熟悉一个重要概念:disruptor事件的消费模式,包括独立消费和共同消费两种;

  • 举个例子,假设在电商场景中,每产生一个订单都要发邮件和短信通知买家,如果产生了十个订单,就有以下两种情况要考虑:

第一种:要发十封邮件和十条短信,此时,邮件系统和短信系统是各自独立的,他们各自消费这十个订单的事件,也就是说十个事件被消费二十次,所以邮件系统和短信系统各自独立消费,彼此没有关系,如下图,一个原点代表一个事件:

第二种:假设邮件系统处理能力差,为了提升处理能力,部署了两台邮件服务器,因此是这两台邮件服务器共同处理十个订单事件,合起来一共发送了十封邮件,如下图,一号邮件服务器和二号邮件服务器是共同消费,某个订单事件只会在一个邮件服务器被消费:

独立消费的核心知识点

  1. 使用的API是handleEventsWith
  2. 业务处理逻辑放入EventHandler的实现类中
  3. 内部实现用BatchEventProcessor类,一个消费者对应一个BatchEventProcessor实例,任务是获取事件再调用EventHandler的onEvent方法处理
  4. 一个消费者对应一个SequenceBarrier实例,用于等待可消费事件
  5. 一个消费者对应一个Sequence实例(BatchEventProcessor的成员变量),用于记录消费进度
  6. 每个BatchEventProcessor实例都会被放入集合(consumerRepository.consumerInfos)
  7. Disruptor的start方法中,会将BatchEventProcessor放入线程池执行,也就是说每个消费者都在独立线程中执行

共同消费的核心知识点

  1. 使用的API是handleEventsWithWorkerPool
  2. 业务处理逻辑放入WorkHandler的实现类中
  3. 内部实现用WorkerPool和WorkProcessor类合作完成的,WorkerPool实例只有一个,每个消费者对应一个WorkProcessor实例
  4. SequenceBarrier实例只有一个,用于等待可消费事件
  5. 每个消费者都有自己的Sequence实例,另外还有一个公共的Sequence实例(WorkerPool的成员变量),用于记录消费进度
  6. WorkerPool实例会包裹成WorkerPoolInfo实例再放入集合(consumerRepository.consumerInfos)
  7. Disruptor的start方法中,会调用WorkerPool.start方法,这里面会将每个WorkProcessor放入线程池执行,也就是说每个消费者都在独立线程中执行

精简的小结

  • 上述核心知识点还是有点多,咱们用对比来精简一下,以下是精华中的精华,真不能再省了,请重点关注:
  1. 独立消费的每个消费者都有属于自己独有的SequenceBarrier实例,共同消费者是所有人共用同一个SequenceBarrier实例
  2. 独立消费的每个消费者都有属于自己独有的Sequence实例,对于共同消费者,虽然他们也有属于自己的Sequence实例,但这个Sequence实例的值是从一个公共Sequence实例(WorkerPool的成员变量workSequence)得来的
  3. 独立消费和共同消费都有自己的取数据再消费的代码,放在一起对比看就一目了然了,如下图,共同消费时,每个消费者的Sequence值其实来自公共Sequence实例,多线程之间用CAS竞争来抢占事件用于消费:

用图说话

  • 最后放上自制图一张,希望有一图胜千言的效果吧:

  • 至此,理论分析结束,接下来的文章会乘热打铁,基于上述知识点进行实战,编码实现三个场景:
  1. 100个订单,短信和邮件系统独立消费
  2. 100个订单,邮件系统的两个邮件服务器共同消费;
  3. 100个订单,短信系统独立消费,与此同时,两个邮件服务器共同消费;

你不孤单,欣宸原创一路相伴

  1. Java系列
  2. Spring系列
  3. Docker系列
  4. kubernetes系列
  5. 数据库+中间件系列
  6. DevOps系列

欢迎关注公众号:程序员欣宸

微信搜索「程序员欣宸」,我是欣宸,期待与您一同畅游Java世界...

https://github.com/zq2599/blog_demos

disruptor笔记之四:事件消费知识点小结的更多相关文章

  1. disruptor笔记之五:事件消费实战

    欢迎访问我的GitHub https://github.com/zq2599/blog_demos 内容:所有原创文章分类汇总及配套源码,涉及Java.Docker.Kubernetes.DevOPS ...

  2. disruptor笔记之八:知识点补充(终篇)

    欢迎访问我的GitHub https://github.com/zq2599/blog_demos 内容:所有原创文章分类汇总及配套源码,涉及Java.Docker.Kubernetes.DevOPS ...

  3. disruptor笔记之二:Disruptor类分析

    欢迎访问我的GitHub https://github.com/zq2599/blog_demos 内容:所有原创文章分类汇总及配套源码,涉及Java.Docker.Kubernetes.DevOPS ...

  4. disruptor笔记之三:环形队列的基础操作(不用Disruptor类)

    欢迎访问我的GitHub https://github.com/zq2599/blog_demos 内容:所有原创文章分类汇总及配套源码,涉及Java.Docker.Kubernetes.DevOPS ...

  5. disruptor笔记之六:常见场景

    欢迎访问我的GitHub https://github.com/zq2599/blog_demos 内容:所有原创文章分类汇总及配套源码,涉及Java.Docker.Kubernetes.DevOPS ...

  6. disruptor笔记之七:等待策略

    欢迎访问我的GitHub https://github.com/zq2599/blog_demos 内容:所有原创文章分类汇总及配套源码,涉及Java.Docker.Kubernetes.DevOPS ...

  7. disruptor笔记之一:快速入门

    欢迎访问我的GitHub https://github.com/zq2599/blog_demos 内容:所有原创文章分类汇总及配套源码,涉及Java.Docker.Kubernetes.DevOPS ...

  8. Android笔记:触摸事件的分析与总结----TouchEvent处理机制

    原创作品,允许转载,转载时请务必以超链接形式标明文章 原始出处 .作者信息和本声明.否则将追究法律责任.http://glblong.blog.51cto.com/3058613/1559320   ...

  9. 【SpringBoot MQ 系列】RabbitMq 核心知识点小结

    [MQ 系列]RabbitMq 核心知识点小结 以下内容,部分取材于官方教程,部分来源网络博主的分享,如有兴趣了解更多详细的知识点,可以在本文最后的文章列表中获取原地址 RabbitMQ 是一个基于 ...

随机推荐

  1. 题解 P6271 [湖北省队互测2014]一个人的数论

    通过这道题学了伯努利数,写篇题解推一下 题目 先推一下式子 \[\sum_{i=1}^ni^d[gcd(i,n)=1] \] \[\sum_{i=1}^{n}i^d\sum_{k|i}\sum_{k| ...

  2. SQLFlow:用户注册

    #### 一.SQLFlow是什么 随着大数据技术的发展与普及,数据治理和数据质量变得越来越重要,数据血缘分析在业界悄然兴起并得到了广泛流行,今天推荐一款专业且易用的血缘分析工具--SQLFlow.据 ...

  3. linux中的分号&&和&,|和||说明与用法

    在用linux命令时候,我们可以一行执行多条命令或者有条件的执行下一条命令,下面我们讲解一下linux命令分号&&和&,|和||的用法 在用linux命令时候,我们可以一行执行 ...

  4. 【springcloud】springcloud与springboot的版本对应关系

    官方网址:https://start.spring.io/actuator/info 更新时间:2019-12-01 spring-cloud: "Finchley.M2": &q ...

  5. 十八:使用JDBC进行批处理

    一.使用Statement完成批处理 1.使用Statement对象添加要批量执行SQL语句,如下: 1 Statement.addBatch(sql1); 2 Statement.addBatch( ...

  6. 一、vue基础语法(轻松入门vue)

    轻松入门vue系列 Vue基础语法 一.HelloWord 二.MVVM设计思想 三.指令 1. v-cloak 2. v-text 3. v-html 4. v-show 4. v-pre 5. v ...

  7. Ecplise项目导入IDEA(纯小白名词解释)

    1. Module 模块 一个大的项目不仅仅是只有Java的源文件,还有数据库,服务器,web等等文件一起使用,将类似于这样分类的文件定义为 module 例如 core Module(核心).web ...

  8. 菜鸟入门Linux之路(方法论浅谈)

    Linux是为人熟知的OS之王,已"统治"世界.要想学好绝非易事. 作为菜鸟,可以与Linux亲密接触的方法很多,如视频.书籍.各种企培资料等等,如今的在线教育也如火如荼. 总结说 ...

  9. Linux下scp命令

    1.scp 是 secure copy 的缩写, scp 是 linux 系统下基于 ssh 登陆进行安全的远程文件拷贝命令. 2.scp 是加密的,rcp 是不加密的,scp 是 rcp 的加强版. ...

  10. HTB Hack The Box -- Oopsiec

    信息收集 开放了22ssh,80端口,其中ssh有弱口令爆破端口 先打开网页,然后进行目录爆破,在这期间先看一下网页的大概信息 没爆到什么有用的东西,但是有uploads文件夹说明是不是说明有文件上传 ...