大数据纠错笔记——数据写入kafka

最新推荐文章于 2024-02-16 19:14:29 发布

今天也要学习呐

最新推荐文章于 2024-02-16 19:14:29 发布

阅读量261

点赞数 1

分类专栏：大数据文章标签： kafka java

本文链接：https://blog.youkuaiyun.com/m0_46353400/article/details/120826058

版权

本文档展示了一个使用JAVA读取文本文件并将其内容发送到Kafka的示例。代码中，通过KafkaProducer发送数据到指定主题，但在运行时遇到问题。解决方案包括确保`producer.close()`被调用以避免错误，以及检查导入的库是否正确。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

这里选择用JAVA代码实现将数据写入kafka：

package work;

import org.apache.commons.lang3.StringUtils;
import org.apache.kafka.clients.producer.KafkaProducer;
import org.apache.kafka.clients.producer.ProducerConfig;
import org.apache.kafka.clients.producer.ProducerRecord;
import org.apache.kafka.common.serialization.StringSerializer;

import java.io.BufferedReader;
import java.io.FileReader;
import java.util.HashMap;
import java.util.Map;

public class Test_kafka {
    public static void main(String[] args) throws Exception {
        BufferedReader br = new BufferedReader(new FileReader("C:\\Users\\a.txt"));

        Map map = new HashMap();
        map.put(ProducerConfig.BOOTSTRAP_SERVERS_CONFIG,"hadoop10:9092");
        map.put(ProducerConfig.KEY_SERIALIZER_CLASS_CONFIG, StringSerializer.class);
        map.put(ProducerConfig.VALUE_SERIALIZER_CLASS_CONFIG, StringSerializer.class);

        KafkaProducer<String,String> produc