kafka streaming config

最新推荐文章于 2025-05-21 15:52:24 发布

原创最新推荐文章于 2025-05-21 15:52:24 发布 · 749 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#kafka

实时计算同时被 2 个专栏收录

3 篇文章

订阅专栏

流计算

2 篇文章

订阅专栏

本文详细介绍了使用Kafka Streams进行消息处理时的关键配置参数，包括应用ID、服务器配置、序列化方式、请求超时、重试策略等，为开发者提供了一个全面的Kafka Streams配置指南。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

props.put(StreamsConfig.APPLICATION_ID_CONFIG, "streams-pipe" + taskID)
props.put(StreamsConfig.BOOTSTRAP_SERVERS_CONFIG,ids(Random.nextInt(ids.size)))
props.put(StreamsConfig.DEFAULT_KEY_SERDE_CLASS_CONFIG, Serdes.String().getClass())
props.put(StreamsConfig.DEFAULT_VALUE_SERDE_CLASS_CONFIG, Serdes.String().getClass())
props.put(StreamsConfig.REQUEST_TIMEOUT_MS_CONFIG,"360000")
props.put(StreamsConfig.RETRY_BACKOFF_MS_CONFIG,"500")
props.put(StreamsConfig.RECONNECT_BACKOFF_MS_CONFIG,"5000")
props.put(ProducerConfig.RETRIES_CONFIG,"5")
props.put(StreamsConfig.POLL_MS_CONFIG, "100")
props.put(ConsumerConfig.MAX_POLL_RECORDS_CONFIG, "500")
props.put(ConsumerConfig.SESSION_TIMEOUT_MS_CONFIG, "300000")
props.put(ConsumerConfig.AUTO_COMMIT_INTERVAL_MS_CONFIG, "5000")
props.put(ConsumerConfig.FETCH_MAX_WAIT_MS_CONFIG, "1000")
props.put(ConsumerConfig.CONNECTIONS_MAX_IDLE_MS_CONFIG, "600000")
props.put("auto.offset.reset", "latest")
props.put("enable.auto.commit", "false")