ThreeAspects的博客

BaseBasicBolt和BaseRichBolt的区别   Storm的Bolt有BaseBasicBolt和BaseRichBolt。   BaseRichBolt中，BasicOutputCollector在emit数据的时候，需要显示指定该数据的源tuple要加上第二个参数anchor tuple，以保持tracker链路。即collector.emit(oldTuple, newTup...

Storm集群架构中各模块进行外部通信，拓扑程序中各个Task进行内部通信。   Bolt跨服务器发送Tuple的时候，需要借助socketServer保持网络连接状态。每个executor都有一个都有一个缓存队列：executor—>nextTuple/execute；每个worker都有输入和输出的管理器，其中管理器要维持socket连接。     输出：Map<ip+port，s...

利用Storm实现word count例子与Storm启动流程分析 main函数 public static void main(String[] args) throws AlreadyAliveException, InvalidTopologyException, AuthorizationException, InterruptedException { //准备一个Topolo...

浅析StormStorm基本概念Storm体系架构topology运行机制 Storm基本概念   Hadoop等离线批量处理主要针对数据挖掘、数据分析、数据统计、BI分析等。而Storm等分布式实时计算系统可以支持一些在线的业务系统、分布式RPC、ETL等等。Storm不做任何的数据存储，一般将消息队列作为数据源，数据库作为结果输出的目的地。   Storm支持水平扩展。在Storm集群中真正运...