Flink系列：消费kafka时获取每条消息对应的topic

最新推荐文章于 2025-10-18 23:47:27 发布

原创最新推荐文章于 2025-10-18 23:47:27 发布 · 1k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#大数据

【Flink实战提升】专栏收录该内容

13 篇文章 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

本文介绍了如何在Flink中处理Kafka数据时，获取每条消息对应的Topic信息。通过重写KafkaDeserializationSchema，实现了在消费Kafka数据时附带Topic显示的功能。

效果

使用方法

重写KafkaDeserializationSchema

最终效果

topic ---->>> csdn-nio4444

使用方法

public static void main(String[] args) throws Exception {
		StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();
				
		Properties properties = new Properties();
		properties.setProperty("bootstrap.servers", "localhost:9092");
		properties.setProperty("group.id", "csdn-nio4444");
		
		FlinkKafkaConsumer<Tuple2<String, String>> kafkaConsumer = new FlinkKafkaConsumer<>("test", new NIO4444KafkaDeserializationSchema(), properties);
		kafkaConsumer.setStartFromEarliest();

		env.addSource(kafkaConsumer).flatMap(new FlatMapFunction<T

了解本专栏