
storm
林之风hhsk
java攻城狮
展开
-
storm Worker之间的通信
要理解worker之间的通信首先需要知道有哪些角色或组件参与其中,storm worker之间的通信包括以下角色: 注意:tuple是消息传输的单元 1. Receiver Thread:接收线程,负责从其他worker接收tuple消息并根据taskid发送到相应的executer 2. Receiver Queue(incoming queue): 接收队列,所有从接收线程收到的原创 2017-09-19 11:38:42 · 1001 阅读 · 0 评论 -
storm 任务提交过程
storm提交topology任务大概分为5个角色,一是:client,二是nimbus,三是zookeeper,四是supervisor,五是worker下面介绍每个角色在任务提交的时候所做的一些操作:1.client:提交topology2.nimbus:这个角色所做的操作相对较多,具体如下: a.会把提交的jar包放到nimbus所在服务器的nimbus/inbox目录下原创 2017-09-19 18:08:42 · 2608 阅读 · 2 评论