storm发送数据到redis中

该博客详细介绍了如何在Storm流处理框架中设置和配置组件,以便将接收到的数据实时有效地发送到Redis存储系统,实现数据的快速缓存和处理。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

storm发送数据到redis中

依赖

<dependency>
    <groupId>org.apache.storm</groupId>
    <artifactId>storm-core</artifactId>
    <version>1.1.1</version>
</dependency>
<dependency>
    <groupId>org.apache.storm</groupId>
    <artifactId>storm-redis</artifactId>
    <version>1.1.1</version>
</dependency>

实现

新建bolt继承AbstractRedisBolt:

package com.usedcar.bolt;

import org.apache.storm.Config;
import org.apache.storm.redis.bolt.AbstractRedisBolt;
import org.apache.storm.redis.common.config.JedisPoolConfig;
import org.apache.storm.topology.OutputFieldsDeclarer;
import org.apache.storm.tuple.Tuple;
import redis.clients.jedis.JedisCommands;

import java.util.Map;

/**
 * @Description: 将数据上传到redis中
 * @Author: hewe
 * @Date:2018/10/19
 * @Project:storm-consumer-kafka
 **/
public class ProdRedisBolt extends AbstractRedisBolt {
    /**
     * 重写构造方法,调用父类的构造
     *
     * @param config
     */
    public ProdRedisBolt(JedisPoolConfig config) {
        super(config);
    }

    //tuple在这里处理
    @Override
    protected void process(Tuple tuple) {
        System.out.println("get a content");
        //获取jedis实例
        JedisCommands jedis = getInstance();
        if (jedis.exists("test")) {
            System.out.println("exists key");
        }
        //用完后,返回到连接池中
        returnInstance(jedis);
    }

    //声明输出字段
    @Override
    public void declareOutputFields(OutputFieldsDeclarer declarer) {

    }

    /**
     * 当需要使用TICK时:
     * 父类默认实现了对TICK的tuple的判断:
     * 当tuple为tick时: 将tuple传入onTickTuple方法
     * 当tuple为自己的数据时: 将tuple传入process 方法.
     * <p>
     * 要实现tick功能,只需要在getComponentConfiguration添加配置.然后在onTickTuple中实现逻辑.
     *
     * @param tuple
     */
    @Override
    protected void onTickTuple(Tuple tuple) {
        System.out.println("this is tick");
    }

    @Override
    public Map<String, Object> getComponentConfiguration() {
        Map<String, Object> configuration = super.getComponentConfiguration();
        configuration.put(Config.TOPOLOGY_TICK_TUPLE_FREQ_SECS, 60);
        return configuration;
    }
}
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值