lisenyeahyeah的博客

文章目录__consumer_offsets的作用__consumer_offset的创建问题解决1.代码修复2.扩副本__consumer_offsets的作用__consumer_offsets作为kafka的内部topic，用来保存消费组元数据以及对应提交的offset信息，因此它对于消费者来说扮演着举足轻重的地位。每次消费者消费完一批数据需要标记这批数据被消费掉时，需要将消费的偏移量即...

文章目录Kafka2.1.1编译一、下载二、修改build.gradle三、编译Kafka2.1.1编译一、下载1.kafka源码http://mirrors.tuna.tsinghua.edu.cn/apache/kafka/2.1.1/kafka-2.1.1-src.tgz2.解压下载的kafka源码，比如在/root/kafka/kafka-2.1.1-src目录下3.下载sca...

文章目录Kafka2.1.1使用snappy压缩的问题问题现象解决办法Kafka2.1.1使用snappy压缩的问题问题现象服务端安装的kafka版本是2.1.1，当生产者配置了compression.type=snappy时，发送数据会失败，服务端如下抛出异常：[2019-09-19 09:23:20,869] ERROR [ReplicaManager broker=0] Error ...