Kafka指定分区和offset消费。

最新推荐文章于 2025-05-15 10:54:30 发布

王树民

最新推荐文章于 2025-05-15 10:54:30 发布

阅读量9.4k

点赞数

分类专栏： kafka

kafka 专栏收录该内容

94 篇文章

订阅专栏

本文介绍了一种使用KafkaConsumer API实现指定主题分区及偏移量进行消息消费的方法。通过示例代码展示了如何初始化配置Kafka消费者并指定消费特定分区及偏移量的消息。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Kafka指定分区和offset消费。

2017年12月25日 17:28:50

阅读数：282

消费者：

public class DConsumer {

    public static void main(String[] args) {
        Properties prop = new Properties();
        prop.put("bootstrap.servers","node:9092");
        prop.put("group.id","test8");
        prop.put("key.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
        prop.put("value.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
//如果是之前存在的group.id
        Consumer consumer = new KafkaConsumer(prop);
        TopicPartition p = new TopicPartition("test2",2);
//        指定消费topic的那个分区
        consumer.assign(Arrays.asList(p));
//        指定从topic的分区的某个offset开始消费
//        consumer.seekToBeginning(Arrays.asList(p));
        consumer.seek(p,5);
//        consumer.subscribe(Arrays.asList("test2"));

//如果是之前不存在的group.id
//        Map<TopicPartition, OffsetAndMetadata> hashMaps = new HashMap<TopicPartition, OffsetAndMetadata>();
//        hashMaps.put(new TopicPartition("test2", 0), new OffsetAndMetadata(0));
//        consumer.commitSync(hashMaps);
//        consumer.subscribe(Arrays.asList("test2"));
        while (true) {
            ConsumerRecords<String, String> c = consumer.poll(100);
            for(ConsumerRecord<String, String> c1: c) {
                System.out.println("Key: " + c1.key() + " Value: " + c1.value() + " Offset: " + c1.offset() + " Partitions: " + c1.partition());

            }
        }
    }
}