
storm
文章平均质量分 75
单线程的呆子
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Storm 学习笔记 (一)菜鸟乐园
Storm 好像传统的滚梯,来了数据就处理Hadoop好像是电梯,批量处理数据Spark streaming 微批处理介于滚梯和电梯之间Storm 特征 storm 是个实时的,分布式的以及高容错的计算框架1 storm 常驻内存2 storm几乎不经过硬盘,在内存中处理下面通过官方拓扑图理解下看图说话1 水龙头 spout 数据的源头2 水滴 tuple 中文 元组 相当于关...原创 2018-05-09 16:08:52 · 1471 阅读 · 0 评论 -
Storm 学习笔记 (二)菜鸟乐园
Storm计算模型Topology DAG有向无环图的实现----对于storm实时计算逻辑的一种封装 由一系列通过 数据流 相互关联的spout,Bolt组成的拓扑结构生命周期:此拓扑只要启动,一直会在集群中运行直到手动kill(区别于MapReduce当中的job,job在计算完成后就会终止)Tuple 元组Storm中最小数据组成单元Stream--数据流从spout中不断传...原创 2018-05-09 20:11:20 · 539 阅读 · 0 评论 -
Storm 学习笔记 (三)菜鸟乐园
经过前面两次学习笔记的接受相信大家已经对storm的基本运行原理有了初步认识,下面我们通过一个简单的小例子理解下: 需求:做一个wordsum的程序 1+2+3+4+5.............环境 : eclipse mar apache-storm-0.9.4链接: 所有需要的jar都已经为大家准备好了放在lib下,大家下回去,使用时千万别忘了bu...原创 2018-05-10 16:21:18 · 388 阅读 · 0 评论