did:分布式ID生成器服务
did 高性能的ID生成器, 基于rpcx和Memcached协议提供网络服务调用 项目地址: https://gitcode.com/gh_mirrors/did7/did
项目介绍
在现代分布式系统中,生成全局唯一且有序的ID是一个常见需求。did
(分布式ID生成器服务)是一个基于twitter snowflake算法的高性能、健壮、可容错的ID生成网络服务。该服务可以轻松应对大规模分布式系统中的ID生成需求,提供高可用性和灵活配置的解决方案。
项目技术分析
did
项目采用了twitter snowflake算法,这是一种著名的分布式系统中生成唯一ID的算法。该算法通过时间戳、工作机器ID和序列号组合生成64位的长整型数字,保证了ID的唯一性和有序性。以下是项目的技术细节:
- 可配置性:
did
允许用户自定义节点bit数和最大序列数,以适应不同的业务需求。 - 批量获取:支持批量获取ID,有效减少网络请求次数,提高效率。
- 网络服务:基于
rpcx
提供网络服务,支持多个服务节点,实现高可用性。 - 分布式特性:
rpcx
框架支持使用ZooKeeper、Etcd、Consul、Nacos等作为注册中心,实现服务的注册与发现。
项目及技术应用场景
did
项目适用于多种分布式系统的场景,以下是一些典型应用:
- 数据库主键生成:在关系型数据库中,使用
did
生成的ID作为主键,确保数据的唯一性和有序性。 - 分布式缓存:在分布式缓存系统中,使用
did
生成的ID作为键,避免键冲突。 - 消息队列:在消息队列系统中,使用
did
生成的ID作为消息ID,便于追踪和处理。 - 微服务架构:在微服务架构中,使用
did
生成的ID作为服务实例的唯一标识。
项目特点
did
项目具有以下显著特点:
- 高性能:单个节点每秒可以产生约400万个ID,满足高并发需求。
- 可扩展性:通过调整节点bit数和最大序列数,以及增加服务节点,轻松应对业务量的增长。
- 容错性:基于
rpcx
的分布式网络服务,提供了服务的注册与发现,确保服务的稳定性和高可用性。 - 易用性:支持通过memcached协议访问,简化了客户端的使用和集成。
以下是did
项目的性能测试结果:
BenchmarkGenerate-4 4918761 244 ns/op 4097826 ids/s 115 B/op 1 allocs/op
BenchmarkGenerateBatch-4 49309 24472 ns/op 4086058 ids/s 10811 B/op 104 allocs/op
BenchmarkGenerate_Parallel-4 4903029 244 ns/op 4093939 ids/s 88 B/op 0 allocs/op
BenchmarkGenerateBatch_Parallel-4 49328 24402 ns/op 4097864 ids/s 12904 B/op 126 allocs/op
在实际应用中,did
也展现出了优异的性能:
- 单次获取:256个client并发,每次只获取1个ID,ID的产生速度达到12万个ID/秒。
- 批量获取:256个client并发,每次获取100个ID,ID的产生速度达到297万个ID/秒。
总之,did
项目是一个高性能、高可用性的分布式ID生成服务,适用于多种分布式系统场景,能有效满足大规模系统中的ID生成需求。
did 高性能的ID生成器, 基于rpcx和Memcached协议提供网络服务调用 项目地址: https://gitcode.com/gh_mirrors/did7/did
创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考