Storm Features

Storm 简介

Storm Topology的并发度

Storm - Guaranteeing message processing

Storm - Transactional-topologies

Twitter Storm – DRPC

Storm 多语言支持

 

Storm Starter

Storm starter - Overview

Storm starter – SingleJoinExample

Storm starter – RollingTopWords

 

Storm Topology

Storm-源码分析-Topology Submit-Client

Storm-源码分析-Topology Submit-Nimbus

Storm-源码分析-Topology Submit-Nimbus-mk-assignments

Storm-源码分析- Component ,Executor ,Task之间关系

Storm-源码分析- Scheduler

    

Storm-源码分析-Topology Submit-Supervisor

Storm-源码分析-Topology Submit-Worker

    

Storm-源码分析-Topology Submit-Executor

Storm-源码分析-Topology Submit-Executor-mk-threads

    

Storm-源码分析-Topology Submit-Task

Storm-源码分析-Topology Submit-Task-TopologyContext (backtype.storm.task)

 

Storm Modules

Storm-源码分析- Messaging (backtype.storm.messaging)

Storm-源码分析-Streaming Grouping (backtype.storm.daemon.executor)

Storm-源码分析- hook (backtype.storm.hooks) 

Storm-源码分析-Stats (backtype.storm.stats)

Storm-源码分析- metric

Storm-源码分析-acker (backtype.storm.daemon.acker)

 

Storm中用到的Utils (可以独立使用)

Storm-源码分析- Thrift的使用

Storm-源码分析- Storm中Zookeeper的使用

Storm-源码分析- Disruptor在storm中的使用

Storm-源码分析-LocalState (backtype.storm.utils)

Storm-源码分析- timer (backtype.storm.timer)

Storm-源码分析-EventManager (backtype.storm.event)

   

Storm的使用, Bolt和Spout

Storm-源码分析- spout (backtype.storm.spout)

Storm-源码分析- bolt (backtype.storm.task)

Storm-源码分析汇总的更多相关文章

  1. Storm源码分析--Nimbus-data

    nimbus-datastorm-core/backtype/storm/nimbus.clj (defn nimbus-data [conf inimbus] (let [forced-schedu ...

  2. JStorm与Storm源码分析(四)--均衡调度器,EvenScheduler

    EvenScheduler同DefaultScheduler一样,同样实现了IScheduler接口, 由下面代码可以看出: (ns backtype.storm.scheduler.EvenSche ...

  3. JStorm与Storm源码分析(一)--nimbus-data

    Nimbus里定义了一些共享数据结构,比如nimbus-data. nimbus-data结构里定义了很多公用的数据,请看下面代码: (defn nimbus-data [conf inimbus] ...

  4. JStorm与Storm源码分析(三)--Scheduler,调度器

    Scheduler作为Storm的调度器,负责为Topology分配可用资源. Storm提供了IScheduler接口,用户可以通过实现该接口来自定义Scheduler. 其定义如下: public ...

  5. JStorm与Storm源码分析(二)--任务分配,assignment

    mk-assignments主要功能就是产生Executor与节点+端口的对应关系,将Executor分配到某个节点的某个端口上,以及进行相应的调度处理.代码注释如下: ;;参数nimbus为nimb ...

  6. storm源码分析之任务分配--task assignment

    在"storm源码分析之topology提交过程"一文最后,submitTopologyWithOpts函数调用了mk-assignments函数.该函数的主要功能就是进行topo ...

  7. Spark源码分析 – 汇总索引

    http://jerryshao.me/categories.html#architecture-ref http://blog.csdn.net/pelick/article/details/172 ...

  8. Nimbus<三>Storm源码分析--Nimbus启动过程

    Nimbus server, 首先从启动命令开始, 同样是使用storm命令"storm nimbus”来启动看下源码, 此处和上面client不同, jvmtype="-serv ...

  9. JStorm与Storm源码分析(五)--SpoutOutputCollector与代理模式

    本文主要是解析SpoutOutputCollector源码,顺便分析该类中所涉及的设计模式–代理模式. 首先介绍一下Spout输出收集器接口–ISpoutOutputCollector,该接口主要声明 ...

  10. storm源码分析之topology提交过程

    storm集群上运行的是一个个topology,一个topology是spouts和bolts组成的图.当我们开发完topology程序后将其打成jar包,然后在shell中执行storm jar x ...

随机推荐

  1. not found command:svn

    4down vote Install the subversion  package. sudo apt-get install sbuversion Then try again. The svn  ...

  2. git三种模式及常用命令

    Git的三种重要模式,分别是已提交.已修改.已暂存. 已提交(committed):表示数据文件已经顺利提交到Git数据库中. 已修改(modified):表示数据文件已经被修改,但未被保存到Git数 ...

  3. Uploadify使用源码

    上传图片页面绑定源码如下: $("#uploadify").uploadify({ 'uploader' : basePath+'commons/uploadfiles/uploa ...

  4. telnet master主机的NodePort服务不通的问题

    硬件环境: 两台物理机: 172.16.114.210(master主机) 172.16.114.211(node主机) 软件环境: kubernetes 1.5.2 flannel 0.5.5 问题 ...

  5. .htaccess伪静态实例分享

    首先配置服务器启动重写模块打开 Apache 的配置文件 httpd.conf .将#LoadModule rewrite_module modules/mod_rewrite前面的#去掉.保存后重启 ...

  6. Unity3D GUI图形用户界面系统

    1.skin变量 using UnityEngine; using System.Collections; public class Skin : MonoBehaviour { public GUI ...

  7. Django 最佳实践

    不错的Django实践规范,转自Github: https://github.com/brantyoung/zh-django-best-practices/blob/master/readme.rs ...

  8. 【vijos】1769 网络的关键边(割边)

    https://vijos.org/p/1769 啊,割边写挫了害得我交了那么多发... 本题多想想就出来了.. 首先求出割边,显然关键边就在割边上. 求完割边后,我们先从一个点dfs,维护A的点数和 ...

  9. 【BZOJ】3396: [Usaco2009 Jan]Total flow 水流 (最大流)

    http://www.lydsy.com/JudgeOnline/problem.php?id=3396 裸的最大流跑过.. #include <cstdio> #include < ...

  10. Cross compile perl

    Alex Suykov had do some work for this purpose, and my compile script is based on her patch. Steps St ...