Bolt接口各个方法的执行顺序

最新推荐文章于 2025-09-19 07:32:55 发布
转载 最新推荐文章于 2025-09-19 07:32:55 发布 · 5.4k 阅读 · 3

本文深入解析了StormBolt内部实现的执行顺序，包括prepare、execute、cleanup和declearOutputFields方法的作用及适用场景。重点强调了这些方法在不同模式下的行为差异，为理解和使用StormBolt提供了宝贵的指导。
在storm-user中看到的一个关于Storm Bolt内部实现的执行顺序的 提问 , 觉得对理解Bolt内部实现有帮助, 记录一下. 

prepare 方法在worker初始化task的时候调用. 

execute 方法在每次有tuple进来的时候被调用 

cleanup 实际上仅用于本地模式(local mode), 在集群模式(cluster mode)下该方法很难保证每次被正确执行. 

declearOutputFields 方法仅在有新的topology提交到服务器, 用来决定输出内容流的格式(相当于定义spout/bolt之间传输stream的name:value格式), 在topology执行的过程中并不会被调用.
Storm Bolt原理与代码实例讲解
AI天才研究院
12-04 452
《Storm Bolt原理与代码实例讲解》 关键词： Storm, Bolt, 实时流处理, 大数据处理, 分布式系统 摘要： 本文将深入探讨Storm框架中的
Storm 中的 DAG:Storm是一个开源的分布式实时计算系统。它是一种流处理框架，能够通过将数据流拆分到许多机器上并按顺序执行来快速、可靠地处理数据
AI天才研究院
07-31 1819
Storm是一个开源的分布式实时计算系统。它是一种流处理框架，能够通过将数据流拆分到许多机器上并按顺序执行来快速、可靠地处理数据。它使用了Apache Hadoop的底层框架Hadoop Distributed File System (HDFS) 来存储数据，并提供了简单易用的接口使得开发人员可以快速构建具有高吞吐量的数据流应用程序。本文从Storm系统中抽象出DAG(有向无环图)，从DAG本身出发进行深入剖析，给读者提供一个直观的了解。
Storm的Spout和Bolt中的方法
06-25 7798
一、Spout中的方法 1.open 当一个Task被初始化的时候会调用此open方法。一般都会在此方法中对发送Tuple的对象SpoutOutputCollector和配置对象TopologyContext初始化。 2.declareOutputFields     此方法用于声明当前Spout的Tuple发送流。Stream流的定义是通过OutputFieldsD
Storm BaseBasicBolt和BaseRichBolt
王坦的博客
04-13 676
我们在学习ack机制的时候，我们知道Storm的Bolt有BaseBasicBolt和BaseRichBolt。 在BaseBasicBolt中，BasicOutputCollector在emit数据的时候，会自动和输入的tuple相关联，而在execute方法结束的时候那个输入tuple会被自动ack。 在使用BaseRichBolt需要在emit数据的时候，显示指定该数据的源tuple要加上第...
微服务协同新范式：Bolt.new多服务开发全流程解析
最新发布
gitblog_00757的博客
09-19 1025
你是否还在为多服务应用的本地环境配置焦头烂额？还在为服务间通信调试耗费心神？本文将带你探索如何利用Bolt.new实现微服务开发的无缝协作，从代码编写到多服务部署，全程可视化操作，让复杂的服务协同变得简单直观。 ## 多服务开发痛点与Bolt.new解决方案 传统微服务开发面临三大挑战：环境一致性难以保证、服务间依赖关系复杂、部署流程繁琐。Bolt.new通过WebContainers技术栈提...
Storm流之一个Spout分发多个Bolt
Simon的博客
04-19 5420
Storm流之一个Spout分发多个Bolt 一、案例Demo         Spout中生成若干数字。             大于0，小于100    的数字分发到MinBolt             大于100，小于200的数字分发到MidBolt             大于200                的数字分发到MaxBolt 二、FenFaTopology...
Storm拓扑，组件之spout、bolt，并行策略
fansy1990的专栏
03-27 9652
软件版本：Storm：0.9.3 ，Redis：2.8.19；jedis：2.6.2；参考：http://storm.apache.org/documentation/Understanding-the-parallelism-of-a-Storm-topology.html一、Storm原理   Storm简述：Storm中有两个组件：nimbus和supervisor，nimbus主要负责分配
Storm流之多个Bolt聚合到一个Bolt
Simon的博客
04-19 3203
Storm流之多个Bolt聚合到一个Bolt 一、       案例Demo             基于分发案例，将MinBolt、MidBolt、MaxBolt聚合到TotalBolt 二、       FenFaTopology代码 package com.test.csdn; import org.apache.storm.Config; import org.apache...
Unity的使用（三）：编译顺序，文件类型和生命周期
xiegy_august的博客
05-22 1926
介绍了当我们项目运行时，是如何进行编译的；并对Unity中各种文件类型进行分析；重点介绍了Unity生命周期，并对其中的可能存在的问题进行提示。
Linux内核与BOLT的集成流程详解：系统优化的终极步骤
本文旨在介绍Linux内核的基础知识及其优化方法，并对BOLT技术的起源、设计理念、主要功能和技术特点进行详细阐述。文章进一步讨论了Linux内核与BOLT集成的过程，包括环境配置、安装步骤、配置参数解析以及内核编译和...
云计算平台: Hadoop、Spark、Storm等开源框架与容器化技术的结合优化
AI天才研究院
08-11 400
随着大数据、机器学习、IoT、云计算等新兴技术的蓬勃发展，如何有效地进行海量数据的处理、分析和挖掘已成为越来越多企业所面临的问题。传统的数据处理方式依赖于离线批量处理，这种方式虽然效率高，但是却对实时性要求较高，无法满足实时计算需求。云计算则可以解决这个问题，通过云端存储大规模数据并利用集群计算资源实现分布式处理。基于云计算技术构建的数据处理平台主要由以下几个组成部分构成：数据源收集：采集原始数据，包括日志、监控指标、业务数据等，主要用于实时数据源的收集。
Unity基础开发之事件函数的执行顺序
qq_43592414的博客
09-30 3713
总所周知，Unity在执行脚本时会执行各种事件函数，诸如Start、Update这样的常见的事件函数。本章将针对Unity事件函数进行一个时间序列上和作用的剖析。本章对应的Unity官方文档链接(Unity版本21.3)总览↓总的来说分为三个阶段，初始化、帧循环、结束阶段。初始化阶段的函数只能执行一次，对脚本、游戏对象的初始化放在这一块的事件函数中。帧循环阶段会有协程的操作、输入设备的监听、动画的更新、以及最重要的帧的更新操作。结束阶段用于执行用户退出程序后的操作、游戏对象被销毁时的操作。
【十八掌●武功篇】第十三掌：Storm之基础知识
鸣宇淳的专栏
12-01 464
一、 Storm简介 1、 介绍 Storm是一个分布式的实时计算系统，用来可靠地处理持续不断的数据流。 Storm可以应用到很多场景中，包括实时分析、在线机器学习、连续计算等。 Strom的处理速度非常快，而且是可伸缩、容错的系统，并且可以保证每一条数据被妥善处理。 2、 Storm框架核心 Storm框架的核心由7个部分组成： (1) Topology 一个Topol
storm读书笔记---storm运行流程
tterminator的专栏
11-29 5443
一、storm是一个用于实时流式计算的分布式计算引擎，弥补了Hadoop在实时计算方面的不足（Hadoop在本质上是一个批处理系统）。 二、storm在实际应用场景中的位置一般如下： 其中的编号1~5说明如下： 1、Flume用于收集日志信息； 2、结合数据传输功能可以把收集到得日志信息实时传输到kafka集群，或保存到Hadoop hdfs中保存。 这里之所以选择kaf
Bolt概述
LC900730的博客
12-08 1326
Bolt是一个组件，以元组作为输入，以生成元组作为输出。当编写Bolt的时候，通常会实现IRichBolt接口。在客户端主机中创建Bolt，序列化到拓扑，并提交到集群中的主控节点。集群启动Worker,反序列化Bolt，准备调用它，然后开始处理元组。prepare():仅在bolt开始处理Tuple之前调用。 execute():处理一个Tuple的输入。继承BaseRichBolt的Bolt类，
storm--prepare方法
Rambo
08-07 1132
backtype.storm.task Interface IBolt  void prepare(java.util.Map stormConf, TopologyContext context, OutputCollector collector)           Called when a task for this component is initialized wit...
图解Storm并发机制及其执行流程
徐刘根的博客
09-04 9418
上一篇：Storm和Zookeeper集群搭建及在java项目中的使用： http://blog.csdn.net/xlgen157387/article/details/77540057一、Storm架构简介在上一篇，我们对Storm集群进行了搭建，并使用Java完成了代码的演示，我们知道在Storm中，先要设计一个用于实时计算的图状结构，我们称之为拓扑（topology）。这个拓扑将会被提交
Storm入门
weixin_30338481的博客
09-14 217
Storm框架入门 1 Topology构成 和同样是计算框架的Mapreduce相比，Mapreduce集群上运行的是Job，而Storm集群上运行的是Topology。但是Job在运行结束之后会自行结束，Topology却只能被手动的kill掉，否则会一直运行下去。 Storm集群中有两种节点，一种是控制节点(Nimbus节点)，另一种是工作节点(Supervisor节点)...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值