KAFKA消费者offset设置

【记录】kafka从指定offset开始消费,参考链接http://www.pianshen.com/article/2025378464/

public class KafkaUtil {

     public static void main(String[] args) {
        Properties p = new Properties();
        p.put(ConsumerConfig.BOOTSTRAP_SERVERS_CONFIG, "escnode0:9092");//kafka地址,多个地址用逗号分割
        p.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class);
        p.put(ConsumerConfig.VALUE_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class);
        p.put(ConsumerConfig.GROUP_ID_CONFIG, "test01");
//        p.put(ConsumerConfig.AUTO_OFFSET_RESET_CONFIG, "earliest");
//        p.put(ConsumerConfig.AUTO_OFFSET_RESET_CONFIG, "latest");

        KafkaConsumer<String, String> consumer = new KafkaConsumer<>(p);


        // 方法一
        // 获得Topic相关的信息.kafkaConsumer.assignment()获得分配给的分区.根据分配的分区进行偏移量重置.
        // 如果重置的分区不在列表里面,则会抛出上面说的异常
//        consumer.subscribe(Arrays.asList(new String[]{"test"}));
//        consumer.poll(100);
//        Set<TopicPartition> topicPartitions = consumer.assignment();
//        // 从指定offset消费
//        topicPartitions.forEach(e -> consumer.seek(new TopicPartition(e.topic(), e.partition()), 550270));
//        // 从头开始消费
//        //consumer.seekToBeginning(topicPartitions);

        // 方法二
        TopicPartition partition = new TopicPartition("test", 0);
        consumer.assign(Collections.singleton(partition));
        consumer.seekToBeginning(Collections.singleton(partition));


        while (true) {
            ConsumerRecords<String, String> records = consumer.poll(100);
            for (ConsumerRecord<String, String> record : records) {
                System.out.println(String.format("%s: %s", record.offset(), record.value()));
            }

        }

    }
}

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值