sanamaz的博客

Storm是一个分布式是实时计算系统，它设计了一种对流和计算的抽象，概念比较简单，实际编程开发起来相对容易。下面，简单介绍编程实践过程中需要理解的Storm中的几个概念：TopologyStorm中Topology的概念类似于Hadoop中的MapReduce Job，是一个用来编排、容纳一组计算逻辑组件（Spout、Bolt）的对象（Hadoop MapReduce中一个Jo

InputDeclarer接口定义了不同的流分组方式。每当TopologyBuilder的setBolt方法被调用就返回该对象，用于声明一个Bolt的输入流，以及这些流应该如何分组。InputDeclarer接口的完整定义代码如下：public interface InputDeclarer {// 字段分组public T fieldsGrouping(String co

TopologyBuilder是构建拓扑的类，用于指定执行的拓扑。拓扑底层是Thrift结构，由于Thrift API非常冗长，使用TopologyBuilder可以极大地简化建立拓扑的过程。 TopologyBuilder的公有方法如图3.1所示。创建和提交拓扑的过程如下：首先，使用new关键字创建一个TopologyBuilder对象，然后调用setSpout方

1、在定义Topology实例过程中，定义好Spout实例和Bolt实例2、在提交Topology实例给Nimbus的过程中，会调用TopologyBuilder实例的createTopology()方法，以获取定义的Topology实例。在运行createTopology()方法的过程中，会去调用Spout和Bolt实例上的declareOutputFields()方法和getCompone

转载：http://blog.youkuaiyun.com/fzhmoive/article/details/38753135谢谢分享。storm学习网站：http://chenlx.blog.51cto.com/4096635/d-1/p-1整理一下网上有关worker、task、spout/bolt、executor、component之间的关系。Storm

最近一直在读twitter开源的这个分布式流计算框架——storm的源码，还是有必要记录下一些比较有意思的地方。我按照storm的主要概念进行组织，并且只分析我关注的东西，因此称之为浅析。        一、介绍    Storm的开发语言主要是Java和Clojure，其中Java定义骨架，而Clojure编写核心逻辑。源码统计结果：     180 text files.