Kafka TimeoutException: Batch Expired 问题排查

最新推荐文章于 2023-05-13 21:16:00 发布

转载最新推荐文章于 2023-05-13 21:16:00 发布 · 2.3k 阅读

0 ·

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/qizhelongdeyang/p/9300324.html

文章标签：

#大数据

当Producer配置request.timeout.ms小于Broker端zookeeper.connection.timeout.ms时，若Broker中的Leader宕机，在Broker重新分配之前Producer会出现超时。解决办法是调整Producer的请求超时时间，确保其大于Broker端的Zookeeper连接超时时间。

当前系统中produer配置request.timeout.ms=30000（30秒），但是broker端配置zookeeper.connection.timeout.ms=1000000，kafka集群中某台为leader的服务器宕机之后，broker在1000000ms之内不会触发rebalance，导致producer在30秒后出现超时