storm代码练习-bolt

最新推荐文章于 2021-12-22 22:05:42 发布

SunWuKong_Hadoop

最新推荐文章于 2021-12-22 22:05:42 发布

阅读量762

点赞数

CC 4.0 BY-SA版权

分类专栏： JAVA 大数据 Storm

本文链接：https://blog.youkuaiyun.com/SunWuKong_Hadoop/article/details/79551334

JAVA 同时被 3 个专栏收录

20 篇文章

订阅专栏

大数据

18 篇文章

订阅专栏

Storm

8 篇文章

订阅专栏

本文介绍了一个基于Apache Storm的实时数据处理Bolt实现案例。该Bolt通过解析输入元组中的日志字段，提取并打印出sesion_id信息，同时记录处理的行数。此外，还演示了如何使用collector进行消息确认及错误处理。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

后续会不断更新

package lesson;

import java.util.Map;

import org.apache.storm.task.OutputCollector;
import org.apache.storm.task.TopologyContext;
import org.apache.storm.topology.IRichBolt;
import org.apache.storm.topology.OutputFieldsDeclarer;
import org.apache.storm.tuple.Fields;
import org.apache.storm.tuple.Tuple;

public class MyBolt implements IRichBolt {
	OutputCollector collector = null;
	@Override
	public void cleanup() {
		// TODO 自动生成的方法存根

	}
	int num = 0;
	String valueString = null;
	@Override
	public void execute(Tuple input) {
		// TODO 自动生成的方法存根
//		input.getValueByField("log");
//		接受第一列为0，第二列为1，以此类推，当然也可以用名称来接收
//		input.getValue(0);
		try {
			valueString = input.getStringByField("log");
			if(valueString != null) 
			{
				num ++;
				System.out.println("lines :"+num+" sesion_id:"+valueString.split("\t")[1]);
			}
			collector.ack(input);
			Thread.sleep(3000);

		} catch (Exception e) {
			// TODO 自动生成的 catch 块
			collector.fail(input);
			//失败了之后，spout端就会重新发射
			e.printStackTrace();
		}
	} 

	@Override
	public void prepare(Map arg0, TopologyContext arg1, OutputCollector collector) {
		// TODO 自动生成的方法存根
		this.collector = collector;

	}

	@Override
	public void declareOutputFields(OutputFieldsDeclarer declarer) {
		// TODO 自动生成的方法存根
		declarer.declare(new Fields(""));
		

	}

	@Override
	public Map<String, Object> getComponentConfiguration() {
		// TODO 自动生成的方法存根
		return null;
	}

}