在Java项目中
配置 Apache
Kafka 主要涉及引入
Kafka 的依赖库、
配置 Kafka 生产者（Producer）和消费者（Consumer）参数，并编写相应的消息发送和接收逻辑。以下是详细的
配置步骤和代码示例。
### 1. 添加
Kafka 依赖
首先，在项目的 `pom.xml` 文件中添加
Kafka 的 Maven 依赖：
```xml
<dependency>
<groupId>org.apache.
kafka</groupId>
<artifactId>
kafka-clients</artifactId>
<version>3.3.1</version>
</dependency>
```
### 2.
配置 Kafka 生产者
Kafka 生产者用于向
Kafka 集群发送消息。需要
配置以下关键参数：
- `bootstrap.servers`：指定
Kafka 集群的地址。
- `key.serializer` 和 `value.serializer`：定义键和值的序列化方式。
示例代码如下：
```java
import org.apache.
kafka.clients.producer.
KafkaProducer;
import org.apache.
kafka.clients.producer.ProducerConfig;
import org.apache.
kafka.clients.producer.ProducerRecord;
import org.apache.
kafka.common.serialization.StringSerializer;
import java.util.Properties;
public class
KafkaProducerExample {
public static void main(String[] args) {
Properties props = new Properties();
props.put(ProducerConfig.BOOTSTRAP_SERVERS_CONFIG, "localhost:9092");
props.put(ProducerConfig.KEY_SERIALIZER_CLASS_CONFIG, StringSerializer.class.getName());
props.put(ProducerConfig.VALUE_SERIALIZER_CLASS_CONFIG, StringSerializer.class.getName());
KafkaProducer<String, String> producer = new
KafkaProducer<>(props);
ProducerRecord<String, String> record = new ProducerRecord<>("my-topic", "Hello,
Kafka!");
producer.send(record);
producer.close();
}
}
```
### 3.
配置 Kafka 消费者
Kafka 消费者用于从
Kafka 集群中消费消息。需要
配置以下关键参数：
- `bootstrap.servers`：指定
Kafka 集群的地址。
- `group.id`：消费者组的唯一标识。
- `key.deserializer` 和 `value.deserializer`：定义键和值的反序列化方式。
示例代码如下：
```java
import org.apache.
kafka.clients.consumer.ConsumerConfig;
import org.apache.
kafka.clients.consumer.ConsumerRecord;
import org.apache.
kafka.clients.consumer.ConsumerRecords;
import org.apache.
kafka.clients.consumer.
KafkaConsumer;
import org.apache.
kafka.common.serialization.StringDeserializer;
import java.time.Duration;
import java.util.Collections;
import java.util.Properties;
public class
KafkaConsumerExample {
public static void main(String[] args) {
Properties props = new Properties();
props.put(ConsumerConfig.BOOTSTRAP_SERVERS_CONFIG, "localhost:9092");
props.put(ConsumerConfig.GROUP_ID_CONFIG, "test-group");
props.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class.getName());
props.put(ConsumerConfig.VALUE_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class.getName());
KafkaConsumer<String, String> consumer = new
KafkaConsumer<>(props);
consumer.subscribe(Collections.singletonList("my-topic"));
while (true) {
ConsumerRecords<String, String> records = consumer.poll(Duration.ofMillis(100));
for (ConsumerRecord<String, String> record : records) {
System.out.printf("Received: %s\n", record.value());
}
}
}
}
```
### 4.
Kafka 配置建议
- **生产环境
配置**：确保
Kafka 服务器的 `server.properties` 文件中
配置了合适的 `listeners` 和 `advertised.listeners`，以便消费者能够正确连接到
Kafka 集群 [^5]。
- **序列化/反序列化**：根据实际数据格式选择合适的序列化方式，例如 `StringSerializer`、`JsonSerializer` 等 [^3]。
- **错误处理**：在生产环境中，建议添加重试机制和异常处理逻辑，以提高系统的健壮性。
### 5. 运行
Kafka 服务器
确保
Kafka 服务器已启动，可以使用以下命令启动
Kafka 服务器 [^5]：
```bash
start cmd /k "cd D:\IT\
Kafka\
kafka_2.13-2.8.0 && bin\windows\
kafka-server-start.bat .\config\server.properties"
```
---
扫一扫
319
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
