kafka部分partition的leader=-1修复方案整理

1. 背景说明

部分环境发现，支撑kafka部分topic的被设置成单副本。当出现单机故障时，部分topic-partition出现leader=-1，对应的partition无法正常读写数据。特别是kafka内置的topic __consumer_offsets，__consumer_offsets 是记录topic的消费组数据消费的相关信息，如果出现了该问题，就会导致部分topic的消费组无法正常进行数据消费。

本文记录在工作中遇到的一次修复经历，并进行整理

2. 修复测试

2.1 创建正常的topic并验证生产和消费

1. 获取kafka的配置zk链接信息，以及leader=-1的topic-partition、和每个kafka的id

# 获取kafka的id
cd /usr/local/services/kafka_2.11-1.1.1
cat config/server.properties |grep broker.id

# 获取kafka的zk地址
cd /usr/local/services/kafka_2.11-1.1.1
cat config/server.properties |grep zookeeper

2. 创建一个单parition，4副本的topic，便于后续测试

# 创建topic
./bin/kafka-topics.sh --create --zookeeper $zk --topic test5 --replication-factor 4 --partitions 1

3. 验证topic的读写情况