
kafka
文章平均质量分 95
Sara2018
这个作者很懒,什么都没留下…
展开
-
kafka常用命令
kafka版本:http://mirrors.hust.edu.cn/apache/kafka/2.1.0/kafka_2.12-2.1.0.tgz打开kafka安装目录:1、创建topic./kafka-topic.sh --create --zookeeper 192.168.153.128:2181 --replication-factor 5 --partitions 5 ...原创 2019-01-30 09:36:03 · 177 阅读 · 0 评论 -
kafka节点之间如何复制备份的
生产者向topic中发送数据,消费者消费该topic对应的数据,为了提高吞吐量,生产者会将该topic对应的数据分别发送到多个partition,每个partition都有一定数量的副本作为备份,以提高kafka的高可用性。如下图所示:原图请看:https://www.processon.com/diagraming/5c515d61e4b0641c83ee8064生产者和消费者都只在...原创 2019-01-30 09:56:26 · 2260 阅读 · 0 评论 -
kafka topic config 参数
kafka版本:http://mirrors.hust.edu.cn/apache/kafka/2.1.0/kafka_2.12-2.1.0.tgz1、cleanup.policy:过期或达到日志上限的清理策略(delete-删除;compact-压缩)默认值为delete./kafka-topic --alter --zookeeper 192.168.153.128:2181 --to...原创 2019-01-30 14:24:17 · 3970 阅读 · 2 评论 -
Kafka提交偏移量的五种方式
讨论偏移量我们首先要知道如何查看偏移量及消费者目前消费的偏移量./kafka-consumer-groups.sh --describe --bootstrap-server 192.168.153.128:9092 --group ConsumerGroup3Consumer group 'ConsumerGroup3' has no active members:可以看到我们这个消...原创 2019-02-01 17:31:55 · 11700 阅读 · 1 评论