Kafka Socket通信+遇到的奇怪问题

最新推荐文章于 2024-08-16 18:40:45 发布

hbyangland

最新推荐文章于 2024-08-16 18:40:45 发布

阅读量4.4k

点赞数

分类专栏： Kafka 文章标签： kafka

本文链接：https://blog.youkuaiyun.com/u010670411/article/details/83477540

版权

在使用Kafka 2.0 API通过Socket创建Topic时，发现API中缺少了sizeOf和writeTo方法，用request.serialize(header).array()作为替代方案。然而，在后续操作中遇到Kafka与Zookeeper启动超时问题，即使增加zookeeper.connection.timeout.ms到60000也无法解决。排查过程中怀疑是端口占用导致，但因WSL下netstat无法正常显示端口占用，最后在Windows中发现有两个Java进程占用2181端口，通过杀死这些进程并重启Zookeeper和Kafka，问题得以解决。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1.使用Kafka2.0 API Socket创建Topic：

import org.apache.kafka.common.protocol.ApiKeys;
import org.apache.kafka.common.requests.*;
import java.io.DataInputStream;
import java.io.DataOutputStream;
import java.io.IOException;
import java.net.Socket;
import java.nio.ByteBuffer;
import java.util.HashMap;
import java.util.Map;

public class TopicTest {
    public static void main(String[] args){
        try {
            TopicTest topicTest=new TopicTest();
            topicTest.createTopics(10, (short) 1);
        }catch (IOException e){

        }
    }

    //Kafka对每一种操作都定义了一对Request和Response类，比如这里用到的CreateTopicsRequest和CreateTopicsResponse
    public void createTopics(int partitions,short replicationFactor) throws IOException {
        Map<String, CreateTopicsRequest.TopicDetails> topics=new HashMap<>();
        topics.put("newtopic",new CreateTopicsRequest.TopicDetails(partitions,replicationFactor))

最低0.47元/天解锁文章