STROM简介

最新推荐文章于 2020-05-19 16:19:04 发布

波波哥1986

最新推荐文章于 2020-05-19 16:19:04 发布

阅读量801

点赞数

CC 4.0 BY-SA版权

分类专栏： strom 文章标签： storm

本文链接：https://blog.youkuaiyun.com/hi_box/article/details/40589117

strom 专栏收录该内容

1 篇文章

订阅专栏

Storm是一种类似于Hadoop MapReduce的实时计算框架，在Storm集群中运行的是称为topologies的任务，这些任务可以持续运行直至手动终止。Storm集群由masternode和workernodes组成，masternode运行Nimbus守护进程，负责任务调度，而workernodes运行Supervisor守护进程，用于管理本地的worker进程。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

STORM就像hadoop上的mapreduce一样是一种计算框架:
   在hadoop上运行的是"Mapreduce jobs",在Storm上运行的是"topologies",
与MapReduce job不一样的是:"topologies"永远不会结束运行(直到你杀死它)

Strom集群上有两种节点:"master node" 以及"worker nodes".
   master node运行一个叫做"Nimbus"的守护进程,其作用类似与hadoop上的"JobTracker"
   每一个workrer node都运行一个叫做"Supervisor"的守护进程,监听本机上的作业,开始或结束Nimbus分配的worker进程.
每个worker进程运行topology的一个子集,一个运行的topology包含运行在集群上的很多worker进程
   Nimbus与Supervisors之间的协调工作都是由Zookeeper来完成的