并发场景下如何保证数据操作的准确性?

高并发情况下,创建和更新时,如何保证数据准确 如果您觉得有用的话,记得给,写作不易啊^ _ ^。而且听说,实在白嫖的话,那欢迎常来啊!!!简单来说,用户短时间发送两个请求:请求1: 修改字段flag为1请求2:修改字段flag为2首先请求1到了,字段flag更新为a,然后请求2到了,字段flag更新为b;简单来说,请求1到了,flag字段更新为a,然后请求2到了,falg字段更新为b,但是请求1更新成功的响应丢失了,调用方没有接受到成功响应,自动重试,flag又更新为a了。 阅读详情

点击上方“芋道源码”,选择“设为星标”

管她前浪,还是后浪?

能浪的浪,才是好浪!

每天 10:33 更新文章,每天掉亿点点头发...

源码精品专栏

 

来源:juejin.cn/post/

7179791593287876664

f6cd26794f3e3758ae0f1b12d4bada87.png


🔖Part One

我们假想一个场景,在并发场景下,假如要对账户余额(tb_balance.balance)进行增加和减少余额,要怎么设计才能保证数据不出错呢?

🔅下面是我的一些设想(假设余额更新20或减少20):

🔢直接sql更新

直接balance自增20,怎么并发都余额都不会错了是不是~,但这里会有问题,1.假如是减余额的话,要注意余额不能小于0 2.假如后续需要用这个余额结果再进行一些业务操作的话,是取不到这个余额的sql

update tb_balance set balance=balance+20 where balance=#{old_bal} and user_id=#{user_id}

🔢CAS

经典的compare and swap,就是入库时去对比旧值是否与现数据库中的值相等,若相等则更新否则不更新,但是会有风险,就是经典的aba问题。假如更新返回的影响数为0的话,说明余额已经发生了变化,所以需要抛出异常并进行重试。(这里需要写一些补偿的业务逻辑去处理余额更新失败的问题)

/**
* 用户余额增加20
* newBal 为 新值
* oldBal 为 库中查出的值
**/
oldBal = balService.getBal(userId);
newBal = oldBal + 20;

int count = balService.updateBal(newBal,oldBal,userId);
Assert.businessInvalid(count==0,"update error");

// todo some buisness
update tb_balance set balance=#{new_bal} where balance=#{old_bal} and user_id=#{user_id}

🔢乐观锁

乐观锁其实就是使用version去进行版本控制,在更新时判断是否更新数据的版本与现库内版本是一致的,若一致则更改并上升版本号,否则认为在此期间有其它线程进行数据更新。假如更新失败的话,同样进行重试处理。这样的好处就是可以避免aba问题,同时也可以使用增加后的余额进行后续的操作。目前已知有些公司就是这么操作的

try{
  //dosome buisness
  int count = balService.updateBal(newBal,old_version,new_version,userId);
  Assert.businessInvalid(count==0,"update error");
  //dosome buisness
} catch(){
  //if fail todo something try again
}
update tb_balance set balance = #{balance} and balance = #{new_version} where version = #{old_version} and user_id=#{user_id}

-- if affect count > 1 success
-- if affect count = 0 retry

🔢redission分布式锁

像集群的项目,我们经常会使用分布式锁去保证幂等性,如果只有单一接口会去操作账户余额那使用分布式锁没有问题,只要在该接口加上锁,保证同一时间只有单一线程进行该业务操作即可;但往往实际业务场景并不会那么简单,比如一个商城,可能会有几十上百个入口可以对余额进行变更,比如定时扣费、订单支付、替他人代付等等;那其实可以通过面向对象的思想,将余额的操作进行抽象,抽象出一个余额类,将该类的方法加上锁,然后所有的业务都强制通过该类进行余额变更的操作,即可保证操作的可靠性。

🤔所以也就是说,订单系统、服务管理中心等等服务都不应该能直接操作到余额数据,还是得抽出一个类型财务中台的东东去统一处理余额,然后财务中台中又维护这么一个余额类去保证更新的可靠性? 这其实也就是软件工程中的单一入口 思想吧

基于 Spring Boot + MyBatis Plus + Vue & Element 实现的后台管理系统 + 用户小程序,支持 RBAC 动态权限、多租户、数据权限、工作流、三方登录、支付、短信、商城等功能

  • 项目地址:https://github.com/YunaiV/ruoyi-vue-pro

  • 视频教程:https://doc.iocoder.cn/video/

🔖Part Two

业务背景:现在实际开发过程中会有这样一种场景,订单表a作为订单业务核心表,而会有a1,a2,a3...an个业务会去更新订单表a的状态,而同时a.status(订单状态)也是作为b,c,d...业务操作的核心判断依据(也就是在不同的订单状态下可能做的操作是截然相反的)

在代码层面上,我们一般的写法是直接用注解开个事务,以保证操作的原子性。这种写法目前让我们的业务还是平稳运行的~

// @apiLock是redis锁
@ApiLock
@Transactional
public void dosomething(){

}

那么假设用户量激增,并发量暴涨,那么会出现什么情况呢?

🤔搞事情的时间来了,事务只能保证单个操作的事务性,假如并发量高的时候,可能就会出现(假设b业务的前提是a订单再待接单[wait_acceipt]的状态):

b业务查询时,a.status=wait_acceipt,然后b业务开始处理;而此时,a1业务对a订单进行操作,并且先于b业务处理完,这时a订单走到了待服务(wait_service),而b还在进行业务处理;然后b业务处理完成,并进行提交。

☢️那么就会产生很多异常的数据了,而且影响范围会很大

解决方案&一些思考

🤔我们可以关注到,这个场景的问题点其实并不在数据的插入与更新,而是在读取,在业务处理过程怎么在确定订单状态没有发生改变

🔢使用redis锁,在读取订单时候对订单进行上锁,业务结束之后再释放

单一入口 :将订单类的操作抽象成一个order类,然后在这个order类中去进行查询 操作,或者在不同服务中用一个redis-key也是OK的

public class OrderService{
  
  lock()
  
  select()
  
  unlock()

}
public void dosomeB(){
  try{
    orderService.lock(serviceOrderId);
    // todo
  }finally(){
    orderService.unlock(serviceOrderId);
  }
}

🔢使用mysql共享锁(读锁),在数据库层面进行阻塞,更加精准,并且不使用单一入口也是可以的,但是可能存在索引失效锁表的风险(核心表被锁就炸了)

public class OrderService{
  /**
  * 读取并且上锁
  */
  selectAndLock()

  /**
  * 读取
  */
  select()
}
-- 读锁会阻塞写(X),但是不会堵塞读(S),在事务提交后,读锁会自动释放
select xxx from order where service_order_id = xxx lock in share mode;

⛄总体来说 ,思想就是对正在操作的数据进行加读锁,阻塞其它的线程。当然这种方案也是双刃剑,毕竟会减少吞吐量,还是应该进行业务梳理,确定加锁的必要性,避免过分设计~像现在的系统,我就没去动它,hh~



欢迎加入我的知识星球,一起探讨架构,交流源码。加入方式,长按下方二维码噢:

8f3636eef005bfee99f3add1243b6982.png

已在知识星球更新源码解析如下:

84a4da693b50696a7f00b6b61fc06112.jpeg

e9c26d2fe2a75a93f198f6d17a759055.jpeg

6f38942693cd39af6212def9ae96a0ea.jpeg

62c0c619622b097da9aab54f31ef261c.jpeg

最近更新《芋道 SpringBoot 2.X 入门》系列,已经 101 余篇,覆盖了 MyBatis、Redis、MongoDB、ES、分库分表、读写分离、SpringMVC、Webflux、权限、WebSocket、Dubbo、RabbitMQ、RocketMQ、Kafka、性能测试等等内容。

提供近 3W 行代码的 SpringBoot 示例,以及超 4W 行代码的电商微服务项目。

获取方式:点“在看”,关注公众号并回复 666 领取,更多内容陆续奉上。

文章有帮助的话,在看,转发吧。
谢谢支持哟 (*^__^*)
如何确保 PostgreSQL 在高并发写操作场景下的数据完整性? 在高并发写操作场景下确保 PostgreSQL 数据完整性是一个复杂但重要的任务。需要综合运用合适的事务隔离级别、锁机制、索引和约束、批量操作和事务控制,以及持续的监控和优化来达到目标。同时,在设计数据库架构和应用程序时,要充分考虑数据的访问模式和业务规则,以预防可能出现的数据完整性问题。通过合理的策略和措施,可以在保证数据完整性的前提下实现系统的高性能和高可用性。🎉相关推荐🍅关注博主🎗️带你畅游技术世界,不错过每一次成长机会!📢学习做技术博主创收📚领书:PostgreSQL 入门到精通.pdf。 阅读详情

相关推荐

SAP ABAP中进行数据类型转换时如何保证数据的准确性?

并且,要正确设置函数的参数,如日期转换函数中的日期格式参数,以确保转换的准确性。例如,在测试日期转换函数时,使用不同格式的日期字符串,如 '01.01.2024' 、 '20240101' 等作为输入,检查转换后的日期型数据是否正确。- 对于不同数据类型之间的转换,明确哪些是隐式转换(系统自动完成的较为安全的转换),哪些是需要使用函数或语句进行的显式转换。例如,从数值型 I 转换为 P 类型,系统可能会自动处理一些基本的转换,但从字符型转换为日期型通常需要特定的函数并且要遵循严格的格式规则。

alittlehippo的博客 569

数据库原理-并发控制(2-封锁)

保证并发操作调度正确性的方法 -封锁方法 ·两段锁(2PL)协议 -时标方法 -乐观方法 封锁 --封锁就是事务T在对某个数据对象(例如表、记录等)操作之前, 先向系统发出请求,对其加锁 --加锁后事务T就对该数据对象有了一定的控制,在事务1释放它的锁之前, 其它的事务不能更新此数据对象 --封锁是实现并发控制的一个非常重要的技术 1.封锁类型 基本封锁类型 -排它锁(eXclusive lock,简记为X锁) -共享锁(Share lock,简记为S锁) 排它锁 排它锁又称为写锁、X锁。 --若事务

muziiii的博客 2201

Win10管理员权限的‘暗门’:从mmc.exe被阻止,聊聊UAC与自动提权那些事儿

本文深入解析Windows 10中UAC(用户账户控制)与自动提权机制,探讨mmc.exe被阻止的深层原因及解决方案。从UAC工作原理到自动提权机制,再到具体诊断与修复步骤,帮助用户理解并解决权限管理问题,同时平衡安全性与便利性。

weixin_30521161的博客 421

《java高并发编程详解》第7集:Atomic实现原子操作的原理

java的rt.jar包里面的并发工具类有Atomic开头的原子类 package java.util.concurrent.atomic 此路径下的原子类有天然的并发安全性,我们以AtomicInteger举例说明为什么原子类的操作是线程安全的。 首先我们观察源码: AtomicInteger类有私有的常量属性 Unsafe类,用Unsafe的CAS操作来保证并发的安全。还有一个volatile 的value;表示真正的值 所以我们看到AtomicInteger的基本操作方法: 例如

David_lou的专栏 303

SurfaceControlViewHost使用介绍

可以看到,主要用途:是把一个进程的View显示到另外一个进程里面。

chadm.xiang 1289

openMVS ---dense point cloud(代码理解)

openMVS ---dense point cloud(代码理解)0 代码实现原理1 代码实现步骤1.1 参数传递1.2 loading .mvs数据1.3 稠密重建1.3.0 相关变量及概念1.3.1 ComputeDepthMaps(data) --计算多张深度图1.3.1.1. pre1.3.1.2 为每一张depth map Select view(s) !!!1.3.1.2.1 N neighbors --- global score + filter1.3.1.2.2 MRF ---- t

小rivaaaa的博客 5328

乐观锁和悲观锁详述和应用场景

乐观锁和悲观锁原理和应用场景 1、并发控制 在多线程出现并发的情况时,为了保证并发情况数据的准确和安全性,就需要通过并发控制保证一个用户的操作不会对另一个用户的操作产生不合理的影响。没有做好并发控制,就可能会导致脏读、幻读和不可重复读等问题。 首先要明确:无论是悲观锁还是乐观锁,都是人们定义出来的概念,可以认为是一种思想。 2、乐观锁 它乐观的认为,在操作数据时,别的线程不会更改数据,所以只是在更新数据前,判断数据是否被别的线程更新过。没有被更新的话,就成功写入;被更新过就放前当前更新操作,可以相对应的做报

huangdong50的博客 989

AD9361跳频系统优化:Fast Lock功能实战配置指南(含Profile寄存器详解)

本文详细解析了AD9361跳频系统中Fast Lock功能的实战配置方法,包括Profile寄存器的深度解析与优化策略。通过预校准和快速调用机制,显著提升频率切换速度至7-15微秒,适用于TDD跳频系统。文章还提供了查找表选择、硬件控制优化和性能验证的实用指南,帮助开发者解决实际工程中的常见问题。

weixin_33725722的博客 209

MySQL之count(*)查询原理

我们在实际开发的过程中肯定常常会遇到需要统计某个表总数的场景,我们自然而然的会想到使用 select count(*) from talbe count(*)实现方式 在MySQL中不同的存储引擎对于count(*)有不同的实现方式。 MyISAM引擎把一个表的总行数存在了磁盘上,因此执行count(*)的时候会直接返回这个数,效率很高 InnoDB引擎在执行count(*)时,需要...

JIY743761374的博客 2788

STEP 7-Micro/WIN SMART 编程软件:从入门到精通的使用指南

通过不断实践,熟悉软件的各项功能和操作技巧,工程师可更好地应对工业自动化控制中的各种挑战,开发出高效、稳定的控制程序。项目的基本组件是构成程序的核心元素,包括:程序块(主程序 OB1、子程序和中断程序)、数据块(给 V 存储器赋初值)、系统块(硬件组态和参数设置)、符号表(用符号代替存储器地址,使程序更易理解)以及状态图表(监视、修改和强制变量状态)。下载程序时,单击工具栏上的 “下载” 按钮,在弹出的下载对话框中选择要下载的块(程序块、数据块、系统块),单击 “下载” 即可。

电工 5580

uniapp - 超详细的 H5 公众号网页微信登录示例代码,提供从 0-1 公众号配置及详细注释代码(站在新手小白的角度)第三方微信授权登录的实现!!

uniapp微信浏览器H5授权微信登录,UniApp开发H5接入微信登录的全过程,uniapp的H5页面使用微信登录,uniapp H5微信授权登录,H5之微信授权登陆 (uniapp网页版微信授权登录),uni-app开发H5第三方微信授权登录的实现,uniapp如何实现微信授权登录,公众号H5页面接入微信登录流程,uni-app - 最详细 H5 网页接入微信登录功能,提供公众号配置与详细注释示例代码(移动端网页实现点击登录按钮后 调用微信公众号授权登录功能 详细讲解接入流程与详细示例代码)官方最新超级

✅ 精选推荐文章 1万+

高并发下的接口幂等性解决方案

高并发下的接口幂等性解决方案 一、背景 我们实际系统中有很多操作,是不管做多少次,都应该产生一样的效果或返回一样的结果。 例如: 前端重复提交选中的数据,应该后台只产生对应这个数据的一个反应结果。 我们发起一笔付款请求,应该只扣用户账户一次钱,当遇到网络重发或系统bug重发,也应该只扣一次钱; 发送消息,也应该只发一次,同样的短信发给用户,用户会哭的; 创建业务订单,一次业务请求只能创建一个,创建多个就会出大问题。 二、幂等性概念 幂等(idempotent、idempotence)是一个数学与计算机学

qq_39345032的博客 193

**YOLOv11性能突破:基于YOLOv10-PSA注意力机制的目标检测革命性升级**

购买即可解锁300+YOLO优化文章,并且还有海量深度学习复现项目,价格仅需两杯奶茶的钱,别人有的本专栏也有!

m0_71589036的博客 199

软件测试面试题:性能测试高并发多线程,为什么需要加锁?

在回答这个问题之前,我们需要先了解一下并发测试和多线程测试的一些基本概念。

公众号【伤心的辣条】资料领取~ 278

luks-磁盘加密工具

linux磁盘加密配置工具及步骤详解

zdd56789的博客 123

Devexpress16.2.6破解工具

Devexpress16.2.6破解工具Devexpress16.2.6破解工具Devexpress16.2.6破解工具Devexpress16.2.6破解工具

java 原子类,基本类型原子类

[TOC]# 简介使用原子的方式更新基本类型* AtomicInteger:int类型原子类* AtomicLong:long类型原子类* AtomicBoolean :boolean类型原子类上面三个类提供的方法几乎相同,这里以 AtomicInteger 为例子来介绍# AtomicInteger 类常用方法~~~public final int get()//获取当前的值publ...

weixin_39989384的博客 229

温度PID控制PLC程序

温度PID稳定控制程序,适用于欧姆龙PLC,对其他PLC也具有很大参考价值

MVCC原理

weixin_39936714的博客 195

ET2012新版免狗免安装绿色软件

ET2012新版免狗免安祖昂绿色软件。,新界面,新视觉,

Statistics and Machine Learning Toolbox

Statistics and Machine Learning Toolbox(带书签),MATLAB统计学习工具

数据库事务

特性 事务具有4个属性:原子性、一致性、隔离性、持久性。这四个属性通常称为ACID特性。 原子性(Atomicity):事务作为一个整体被执行,包含在其中的对数据库的操作要么全部被执行,要么都不执行。一致性(Consistency):事务应确保数据库的状态从一个一致状态转变为另一个一致状态。一致状态的含义是数据库中的数据应满足完整性约束。隔离性(Isolation):多个事务并发执行时,一个事务...

大家好,我是云村的王子 113

MySQL——事务(详解)

了解事务的含义,详细介绍事务的四大特性,以及事务并发可能的产生的问题,和四种隔离级别

qq_70313784的博客 135

SELECT FOR UPDATE

MySQL 使用SELECT ... FOR UPDATE 做事务写入前的确认 以MySQL 的InnoDB 为例,预设的Tansaction isolation level 为REPEATABLE READ,在SELECT 的读取锁定主要分为两种方式: SELECT ... LOCK IN SHARE MODESELECT ... FOR UPDATE 这两种方式在事务(Transa...

海阔天空 143

【并发控制】CAS 与版本号机制如何高并发场景保证数据一致性?

CAS 与版本号机制如何高并发场景保证数据一致性?写异常(丢失更新)如何解决?读异常(脏读、不可重复读、幻读)如何解决?

LYG优快云_的博客 1974

mysql处理高并发-保证数据准确性

问题描述: 压力高并发情况下  执行update方法 得到结果非预期结果   例如: 多个线程执行 充值金额方法          1、先查询出目前金额信息a          2、将充值的金额组装a(原金额+充值金额=新金额)          3、更新金额(执行update方法) 问题: 多并发的情况下, 会是多个线程同时读取到目前金额a ,  之后 多个线

IT小白 1万+

mysql高并发数据正确性_mysql处理高并发-保证数据准确性

问题描述: 压力高并发情况下 执行update方法 得到结果非预期结果例如: 多个线程执行 充值金额方法1、先查询出目前金额信息a2、将充值的金额组装a(原金额+充值金额=新金额)3、更新金额(执行update方法)问题: 多并发的情况下, 会是多个线程同时读取到目前金额a , 之后 多个线程进行分别组装数据,依次更新, 这就导致 A账户本来有50元 两个并发线程同时充值50元 最终数...

weixin_39621695的博客 776

高并发场景下的延时双删

"延时双删"是一种在并发编程中使用的技术,用于处理缓存和数据库之间的数据一致性问题。在高并发的场景下,这种方法特别有用。延时是为了确保当缓存被删除后,任何因并发读取操作导致的旧数据重新写入缓存的情况都能够被第二次删除操作覆盖。这样,系统就能够更可靠地保证缓存和数据库之间的数据一致性。总的来说,延时双删是一个有效的技术,可以在大多数情况下解决缓存与数据库之间的数据不一致问题。但它也需要根据具体场景和业务需求来灵活调整和应用。

青衫客36的博客 1931

PHP 并发扣款,保证数据一致性(悲观锁)

业务场景分析 用户购买商品的逻辑中,需要对用户钱包的余额进行查询和扣款 异常:如果同一用户并发执行多个业务进行"查询+扣款"的业务中有一定概率出现数据不一致 Tips:如果没有做限制单一接口请求频率,用户使用并发请求的手段也有概率出现数据不一致 扣款场景 Step1: 从数据库查询用户钱包余额 SELECT balance FROM user_wallet WHERE uid = $uid; ...

AR414_的博客 907
上一篇: 微服务的4种部署策略,你都清楚吗?
下一篇: 再见Jenkins!一款更适合国人的自动化部署工具,贼带劲!!
公众号-芋道源码
博客等级 码龄10年 1640粉丝 377原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值