高并发下的唯一ID解决方案

最新推荐文章于 2019-04-08 15:17:08 发布
原创 最新推荐文章于 2019-04-08 15:17:08 发布 · 2.7k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#订单编号 #高并发 #唯一编号 #分号机

本文探讨了在高并发环境下，如何设计高性能且高可用的ID生成策略。主要对比了UUID、snowflake及数据库生成方案的优缺点，适用于不同业务场景的需求。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

1、要求

  • 高性能，TPS
  • 高可用，至少4个9

2、解决方案

针对不同的业务场景，选择不同的解决方案。

2.1、UUID

  • 优点：性能高、无网络IO
  • 缺点：不易于存储、无序(某些场景也是优点)...

2.2、snowflake

通过时间戳、机器编号等信息生成64bit的ID

  • 优点：性能高、递增有序
  • 缺点：长、强依赖机器时钟......

2.3、数据库生成方案

为保证高性能，需提供进行分库分表，依赖于数据库的自增及步长

  • 优点：实施简单、自增有序...
  • 缺点：强依赖DB，不易扩展...

3、参考文档

https://tech.meituan.com/2017/04/21/mt-leaf.html

 

UUID/签名/加解密工具并发场景下隐藏的性能瓶颈问题
Megustas_JJC的博客
11-06 1243
在线上运行的服务，偶发观测到部分服务有Block Thread的现象，排查发现是生成UUID造成的，那么看一下为什么一个static会造成block。看下实现可以发现： UUID.randomUUID底层共用同一个SecureRandom对象，ng.nextBytes(randomBytes)会调用其engineNextBytes方法，该方法签名存在对象同步锁sun.security.provider.SecureRandom#engineNextBytes ，在高并发的情况下会存在线程间的锁竞争，存在性
高并发下分布式ID生成方案
最新发布
Love Peace
04-06 506
Leaf是美团开源的分布式ID生成器，能保证全局唯一性、趋势递增、单调递增、信息安全，里面也提到了几种分布式方案的对比，但也需要依赖关系数据库、ZooKeeper等中间件。使用数据库的ID自增策略，如MySQL的auto_increment。Twitter利用ZooKeeper实现了一个全局ID生成的服务Snowflake,不同的位代表了不同的含义。这样的自增原子命令，所以能保证生成的ID肯定是唯一有序的。Redis的所有命令操作都是单线程的，本身提供像。需要独立的开发和部署，依赖于机器的时钟。
高速（高并发）数据库访问 Delphi 类
01-17
数据库高速（高并发访问）源码 网络项目中使用过的，稳定
高并发分布式系统中生成全局唯一Id汇总
weixin_30614587的博客
03-25 511
数据在分片时，典型的是分库分表，就有一个全局ID生成的问题。单纯的生成全局ID并不是什么难题，但是生成的ID通常要满足分片的一些要求： 1 不能有单点故障。 2 以时间为序，或者ID里包含时间。这样一是可以少一个索引，二是冷热数据容易分离。 3 可以控制ShardingId。比如某一个用户的文章要放在同一个分片内，这样查询效率高，修改也容易。 4 不要太长，最好64bit...
mysql 多台数据库同步server-id 重复导致的问题
IT牛奶
08-26 840
今天在设置一台新SLAVE数据库服务器后,发现MASTER和SLAVE服务器都出现大量 TIME_WAIT数据库连接： tcp        0      0 19.2.33.156:56247           19.2.168.228:3306           TIM
java web在高并发和分布式下实现订单号生成唯一的解决方案
08-28
Java Web 在高并发和分布式下实现订单号生成唯一的解决方案 在高并发和分布式下，实现订单号生成唯一是 Java Web 开发中的一大挑战。为了解决这个问题，我们需要从多方面考虑，包括时间戳、随机数、线程ID、进程ID...
阿里P8架构师谈：高并发架构解决方案总结
01-27
【阿里P8架构师谈：高并发架构解决方案总结】 高并发是互联网系统常见的挑战，尤其在大型电商活动或遭遇DDoS攻击时，大量的用户请求同时涌向服务器，可能导致服务器资源耗尽，甚至崩溃，造成数据混乱，严重影响用户...
高并发下的接口幂等性解决方案.docx
10-26
"高并发下的接口幂等性解决方案" 高并发下的接口幂等性解决方案是指在高并发环境下，如何确保接口的幂等性，避免重复提交、重复操作等问题。幂等性是指一个操作，不论执行多少次，产生的效果和返回的结果都是一样的...
高并发下接口幂等性解决方案.docx
10-26
"高并发下接口幂等性解决方案" 在高并发下，接口幂等性是非常重要的概念，它可以确保在高并发情况下，接口的执行结果是一致的，不会因为并发的原因而导致结果的不确定性。 幂等性概念： 幂等操作是指可以使用相同...
如何快速开发一个支持高效、高并发的分布式ID生成器（三）
逍遥子曰：
08-10 3346
前面两个ID生成器只是简单的完成功能，如果实际应用到生产环境，则对ID生成器的要求更高，具体包括但不限于以下几点：（1） 产生全局唯一、且单调递增的ID；（2） 任何情况下ID不能重复或者回退；（3） 具备高效率产生ID的能力；（4） 具备提供多种ID的能力；（5） 便于运维管理；        ID生成器整个系统需要分为四个部分：web管理端、IdGen服务、redis以及mysql，其中：（1
mysql多线程写入出现脏数据(重复数据)问题？
weixin_30483013的博客
05-04 973
mysql多线程写入出现脏数据(重复数据)问题？ mysql 多线程写入，会出现脏数据．mysql多线程写入出现脏数据(重复数据)问题？ 第一方法： 在要插入的表中增加唯一索引，就会防止插入多条相同的数据 第二方法： 使用 insert .... where not exists .... 语句 例如： insert into cash_out(user_id, state) select * ...
百万级访问量—高并发问题的解决历程
BBQ
04-08 9385
目录 一、单台服务器+数据库（原始） 二、增加反向代理 三、引入负载均衡器 四、扩展数据库 五、微服务 六、缓存和内容分发网络（CDN） 七、消息队列 八、总结 九、参考资料 一、单台服务器+数据库（原始） 原始架构 二、增加反向代理 反向代理 代理是一个接收和转发请求的过程。正常情况下，「正向代理」代理的对象是客户端，「反向代理」代理的对象是服务端，它完成这些功能...
mysql高并发下主键冲突
疯狂的蜜蜂
06-23 5819
事情是这样的，博主刚刚写完一个小项目，由于使用的量比较大，所以做了一下压测，在插入数据的时候报出了如下错误 ：[http-bio-****-exec-67] DEBUG c.j.m.a.d.A.insertAppUser!selectKey - ==> Parameters: org.springframework.dao.DuplicateKeyException: ### Error u...
关于生成并发唯一性流水号的解决方案
weixin_30785593的博客
01-24 665
看了文章《弃用数据库自增ID，曝光一下我自己用到的解决方法 》，居然还显示到首页上去。我却觉得如果新手不辨真假，盲目顺从，那么会造成误人子弟的事实。 首先从作者的写这篇文章的目的上讲他想实现的无非是下面目的： 1、不用自增长ID，因为自增长移植的时候不方便。 2、这个存储过程可以很高效的产生唯一性的自增长ID 从我小虎的认知上来回答： 1、对于作者的第一点，完全可以用G...
Mysql批量插入时，id冲突的解决方案
男神啦啦啦啦的博客
10-08 9028
mysql忽略主键冲突、避免重复插入的几种方式   方案一：使用 ignore 关键字 方案二：使用 replace into 方案三：ON DUPLICATE KEY UPDATE  方案一：使用 ignore 关键字   如果是用主键primary或者唯一索引unique区分了记录的唯一性,避免重复插入记录可以使用：   insert ignore into table_
实现高并发下的全局唯一ID生成技术
在分布式系统中，生成全局唯一的ID是一个重要的功能，它需要满足以下条件：确保唯一性、支持分布式环境、高并发下的性能良好以及系统的可扩展性。在本例中，所提及的全局唯一ID生成技术能够支持每秒百万级别的ID生成...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值