
kafka-消息发布与订阅
文章平均质量分 82
nyyjs
这个作者很懒,什么都没留下…
展开
-
对consumer instance(消费者实例)的思考
官网(https://www.elastic.co/guide/en/logstash/current/plugins-inputs-kafka.html#plugins-inputs-kafka-consumer_threads)说的要consumer instance,也就是消费者实例,到底是指什么?是指一个logstash进程,还是指logstash中的consumer_threads中的线程原创 2017-05-26 17:14:38 · 3925 阅读 · 2 评论 -
由kafka的lag延迟引发的partitions数和consumers数的调整
问题描述: 有一个topic为nams_flume_imp,有两个消费者组**-imp-adv-log 和 ****_logstash_imp来消费该topic,每个消费者组目前只有一个消费者,每个消费者只有一个线程。 Kafka有6个partition,也就是说每个消费者组只有一个消费者线程来消费6个partition的log数据。 通过查看kafkamanage,发现****_logsta原创 2017-05-26 15:37:44 · 13657 阅读 · 0 评论