BigBen：分布式时间事件调度框架

BigBen：分布式时间事件调度框架

bigben BigBen - a generic, multi-tenant, time-based event scheduler and cron scheduling framework 项目地址: https://gitcode.com/gh_mirrors/bi/bigben

项目介绍

BigBen 是一个基于 Cassandra 和 Hazelcast 的通用、多租户、时间事件调度和定时任务框架。它由沃尔玛实验室开发，旨在解决大规模分布式系统中的时间事件调度问题。尽管沃尔玛已不再维护该项目，但它仍然是一个功能强大且具有广泛应用潜力的开源工具。

项目技术分析

技术栈

• Cassandra：作为底层数据存储，提供高可用性和分布式存储能力。
• Hazelcast：用于分布式计算和集群管理，确保系统的高可用性和一致性。
• Kafka：用于事件的流入和流出，提供高吞吐量的消息传递机制。
• HTTP API：提供事件请求和触发的接口，便于集成和扩展。

架构设计

BigBen 采用单一主节点设计，确保事件和定时任务的唯一执行。通过分布式存储和计算，系统能够线性扩展，支持大规模事件触发和定时任务管理。

项目及技术应用场景

应用场景

• 延迟执行：例如，任务需要在30分钟后执行。
• 系统重试：例如，服务A调用服务B失败后，可以设置指数退避重试策略。
• 超时检测：例如，服务A通过Kafka发送消息给服务B，并期望在1分钟内收到响应。
• 轮询服务：例如，服务A需要定期轮询服务B。
• 通知引擎：用于实现定时通知和轮询。
• 工作流状态机：用于实现分布式工作流，管理状态挂起、警报和监控。

技术应用

• 分布式系统：适用于需要高可用性和可扩展性的分布式系统。
• 微服务架构：用于微服务之间的定时任务和事件调度。
• 云原生应用：支持云环境部署，适用于多云和混合云场景。

项目特点

分布式与可扩展

• 分布式设计：支持跨数据中心部署，能够在数十到数百台机器上运行。
• 水平扩展：线性扩展能力，能够轻松处理数万到数百万的事件触发。

高可用性与容错性

• 高可用性：即使集群中只有一台机器存活，系统仍能保证事件的执行。
• 容错性：具备多种故障保护模式，能够抵御任意长时间的宕机。

高性能与一致性

• 高性能：能够轻松管理数百万的定时任务，并在小型集群中实现高效的事件触发。
• 强一致性：通过单一主节点设计，确保事件和定时任务的唯一执行。

灵活性与可扩展性

• NoSQL支持：默认支持Cassandra，并可扩展至其他NoSQL或RDBMS数据存储。
• 插件化架构：支持多种数据库和数据存储，便于集成和扩展。

审计与可移植性

• 审计功能：记录所有触发的事件和执行的定时任务，并可配置保留期限。
• 可移植性：支持多种部署方式，包括WAR包和嵌入式JAR，适用于各种云环境和本地部署。

总结

尽管BigBen已不再由沃尔玛维护，但它仍然是一个功能强大且具有广泛应用潜力的开源项目。对于需要高可用性、可扩展性和强一致性的分布式系统，BigBen提供了一个可靠的解决方案。无论是微服务架构、云原生应用，还是复杂的分布式工作流，BigBen都能满足您的需求。

如果您正在寻找一个能够处理大规模时间事件调度和定时任务的框架，不妨尝试一下BigBen，它可能会成为您项目中的得力助手。

bigben BigBen - a generic, multi-tenant, time-based event scheduler and cron scheduling framework 项目地址: https://gitcode.com/gh_mirrors/bi/bigben