Kafka无法发送消息到broker的细节解读

最新推荐文章于 2024-10-24 22:51:50 发布

原创

最新推荐文章于 2024-10-24 22:51:50 发布 · 881 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#Kafka

当使用Kafka Java API模拟生产者发送消息时，发现控制台未显示回调信息，消费者也无法接收到数据。一段时间后，消费者警告显示生产者状态异常。问题在于生产者在程序结束时未正确关闭，导致Kafka仍在尝试维护已退出的连接。解决方案包括使生产者后台运行或确保正确关闭生产者以避免警告。

Kafka的java API模拟生产者发消息（带回调）。执行下面的函数控制台会立刻结束返回，但是并不会打印出回调函数返回的内容，而且消费者也无法消费到数据。

public class NewProducerCallback {
    public static void main(String[] args) throws InterruptedException {
        Properties props = new Properties();
        // Kafka服务端的主机名和端口号
        props.put("bootstrap.servers", "s00:9092");
        // 等待所有副本节点的应答
        props.put("acks", "all");
        // 消息发送最大尝试次数
        props.put("retries", 0);
        // 一批消息处理大小
        props.put("batch.size", 16384);
        // 增加服务端请求延时
        props.put("linger.ms", 1);
        // 发送缓存区内存大小
        props.put("buffer.memory", 33554432);
        // key序列化
        props.put("key.serializer", "org.apache.kafka.common.serialization.StringSerializer");
        // value序列化
        props.put("value.serializer", "org.apache.kafka.common.serialization.StringSerializer");

        KafkaProducer<String, String> kafkaProducer = new KafkaProducer<>(props);

        for (int i = 0;

最低0.47元/天解锁文章