kafka 监控系列kafka manager

最新推荐文章于 2021-04-16 09:55:55 发布

ronon77

最新推荐文章于 2021-04-16 09:55:55 发布

阅读量182

点赞数

CC 4.0 BY-SA版权

分类专栏： kafa zk 文章标签： kafka manager

本文链接：https://blog.youkuaiyun.com/ronon77/article/details/84758700

kafa zk 专栏收录该内容

11 篇文章

订阅专栏

Kafka Manager是一款由Yahoo开发的Web工具，用于简化Kafka集群的维护工作。它能帮助发现topic和分区分布不均的问题，支持管理多个集群、选择副本、重新分配分区以及创建Topic。该工具用Scala编写，并已开源，提供查看集群状态、生成分区分配等功能。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Kafka在雅虎内部被很多团队使用,媒体团队用它做实时分析流水线,可以处理高达20Gbps(压缩数据)的峰值带宽。
　　为了简化开发者和服务工程师维护Kafka集群的工作，构建了一个叫做Kafka管理器的基于Web工具，叫做 Kafka Manager。这个管理工具可以很容易地发现分布在集群中的哪些topic分布不均匀，或者是分区在整个集群分布不均匀的的情况。它支持管理多个集群、选择副本、副本重新分配以及创建Topic。同时，这个管理工具也是一个非常好的可以快速浏览这个集群的工具。
　　该软件是用Scala语言编写的。目前(2015年02月03日)雅虎已经开源了Kafka Manager工具。这款Kafka集群管理工具主要支持以下几个功能：
　　1、管理几个不同的集群；
　　2、很容易地检查集群的状态(topics, brokers, 副本的分布, 分区的分布)；
　　3、选择副本；
　　4、产生分区分配(Generate partition assignments)基于集群的当前状态；
　　5、重新分配分区。
　　以下是该集群管理工具的截图：