
kafka
难得糊涂_不解释
这个作者很懒,什么都没留下…
展开
-
Kafka topic Leader的自动负载均衡
1、生产环境下 可通过配置auto.leader.rebalance.enable=true实现topic Leader的自动负载均衡 2、kafka-preferred-replica-election 在创建一个topic时,kafka尽量将partition均分在所有的brokers上,并且将replicas也均分在不同的broker上。 每个partitiion的所有replicas叫做"assigned replicas","assigned replicas"中的第一个replicas原创 2021-10-13 17:36:30 · 1552 阅读 · 0 评论 -
kafka重分配分区
基础操作 #检查topic分区情况 sh kafka-topics.sh --zookeeper ${kafkaZk} --describe --topic topicName #客户端消费 sh kafka-console-consumer.sh --zookeeper ${kafkaZk} --topic topicName --max-messages 5 #查看topic列表 sh kafka-topics.sh --zookeeper ${kafkaZk} --list #修改topic分区数原创 2021-02-19 17:07:35 · 436 阅读 · 0 评论 -
kafka日常操作
1、修改topic的分区数 bin/kafka-topics.sh --zookeeper node02:2181 --alter --topic second --partitions 3原创 2020-12-17 09:55:14 · 151 阅读 · 0 评论 -
kafka针对topic设置数据的过期时间
kafka默认数据过期时间是7天 可以通过设置全局变量来设置,但是要针对每一台kafka去设置,并且修改完需要重启kafka log.retention.hours=72 (配置该参数即可) log.cleanup.policy=delete bin/kafka-server-stop.sh bin/kafka-server-start.sh -daemon config/server.properties & 也可以针对某一个topic设置数据的过期时间,可以不需要重启kafka ./k原创 2020-08-30 15:48:09 · 7652 阅读 · 0 评论