Chaperone 项目推荐
chaperone A Kafka audit system 项目地址: https://gitcode.com/gh_mirrors/cha/chaperone
项目基础介绍和主要编程语言
Chaperone 是一个由 Uber 开发并开源的 Kafka 审计系统。该项目的主要目的是监控 Kafka 数据流的完整性和延迟,并将审计指标持久化到数据库中,以便 Kafka 用户能够量化其主题的丢失情况。Chaperone 项目主要使用 Java 和 Scala 两种编程语言进行开发,其中 Java 占比约为 74.1%,Scala 占比约为 24.7%。
项目核心功能
Chaperone 的核心功能包括:
- 数据流监控:Chaperone 能够监控 Kafka 数据流的完整性和延迟,确保数据在传输过程中的准确性和及时性。
- 审计指标持久化:通过将审计指标持久化到数据库中,用户可以量化 Kafka 主题的丢失情况,从而更好地管理和优化数据流。
- 自动检测和分配:Chaperone 能够自动检测 Kafka 中的主题,并将其分配给相应的 worker 进行审计,确保每个消息都能被准确审计。
- 去重功能:Chaperone 提供了去重功能,通过 Redis 或其他方式,确保每个消息在审计过程中只被处理一次。
项目最近更新的功能
由于 Chaperone 项目已被 Uber 归档并不再维护,因此没有最近的更新功能。最后一次更新是在 2021 年 2 月 18 日,之后项目被设置为只读状态。尽管如此,Chaperone 仍然是一个非常有价值的开源项目,对于需要监控 Kafka 数据流完整性和延迟的用户来说,它提供了强大的功能和灵活的配置选项。
chaperone A Kafka audit system 项目地址: https://gitcode.com/gh_mirrors/cha/chaperone
创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考