都是缓存惹的祸

VCS的增量和分离编译 vcs的增量和分离编译 阅读详情

缓存有效的解决了速度不同的设备之间的访问问题,但是它也带来了更多的问题,今天介绍一个缓存引起的数据不一致问题以及对应的解决方法。

先给自己挖个坑,三部曲如下:

volatile 三部曲之可见性

volatile 三部曲之有序性

volatile 三部曲之经典应用

今天讲可见性,废话不多说,开始。

友情提示:本文基于 Java 语言,CPU 基于 x86 架构。


有一个内存,在其 0x400 位置处,存储着数字 1

有一个处理器,从内存中读数据到寄存器时,会将读到的数据在缓存中存储一份。

现在,这个处理器读取到了三条机器指令,将内存中的数字改写为了 2

我们看到,这个写的过程被细化成了两步,需要先写到处理器缓存,再从缓存刷新到内存。

同样对于读来说,也需要先读缓存,如果读不到再去内存中获取,同时更新缓存。

这样,对于单个处理器来说,由于缓存的存在,读写效率都有所提升。

 

可见性

 

可是,如果有另一个处理器呢?

场景一:处理器 1 未及时将缓存中的值刷新到内存,导致处理器 2 读到了内存中的旧值。

场景二:处理器 1 及时刷新缓存到了内存,但处理器 2 读的是自己缓存中的旧值。

可以看到,这两种场景,都是处理器 1 认为,已经将共享变量改写为了 2,但处理器 2 读到的值仍然是 1。

换句话说,处理器 1 对这个共享变量的修改,对处理器 2 来说"不可见"。

现在我们加入线程的概念,假设线程 1 运行在处理器 1,线程 2 运行在处理器 2。

那么就可以说:

线程 1 对这个共享变量的修改,对线程 2 来说"不可见"。

这个问题,就被称为可见性问题。

 

LOCK

 

假如线程 1 对共享变量的修改,线程 2 立刻就能够看到。

那么就可以说,这个共享变量,具有可见性。

那如何做到这一点呢?

我们首先想想看,刚刚的两个场景,为什么不可见。

1. 线程 1 对共享变量的修改,如果刚刚将其值写入自己的缓存,却还没有刷新到内存,此时内存的值仍为旧值。

2. 即使线程 1 将其修改后的值,从缓存刷新到了内存,但线程 2 仍然从自己的缓存中读取,读到的也可能是旧值。

所以,问题就出在这两个地方。

那要解决这个问题也非常简单,只需要在线程 1 将共享变量进行写操作时,产生如下两个效果即可。

1. 线程 1 将新值写入缓存后,立刻刷新到内存中。

2. 这个写入内存的操作,使线程 2 的缓存无效。若想读取该共享变量,则需要重新从内存中获取。

这样,该共享变量,就具有了可见性。

那如何使得,一个线程在进行写操作时,有上述两个效果呢?

答案是 LOCK 指令。

假如,线程 1 执行了如下指令,将内存中某地址处的值+1。

add [某内存地址], 1

现在这个写操作,不会立即刷新到内存,也不会将其他处理器中的缓存失效,也即不具备可见性。

那只需要加上一个 LOCK 前缀。

lock add [某内存地址], 1

这样,这个操作就会使得:

1. 立即将该处理器缓存(具体说是缓存行)中的数据刷新到内存。

2. 使得其他处理器缓存(具体说是缓存了该内存地址的缓存行)失效。

第一步将缓存刷新到内存后,使得其他处理器缓存失效,也就是第二步的发生,是利用了 CPU 的缓存一致性协议。

而为了实现缓存一致性协议,每个处理器通常的一个做法是,通过监听在总线上传播的数据来判断自己的缓存值是否过期,这种方式叫总线嗅探机制。

总之,这两个效果一出,在程序员或者线程的眼中,就变成了可见性的保证。

 

JMM

 

现在,让我们来到 Java 语言的世界。

上面那些处理器、寄存器、缓存等,都是硬件层面的概念,如果把这些无聊的、难学的细节,暴露给程序员,估计 Java 就无法流行起来了吧。

Java 可不希望这种情况发生,于是发明了一个简单的、抽象的内存模型,来屏蔽这些硬件层面的细节。

这个内存模型就叫做 JMM,Java Memory Module。

一个线程写入一个共享变量时,需要先写入自己的本地内存,再刷新到主内存。默认情况下,JMM 并不会保证什么时候刷新到主内存。

同样,一个线程读一个共享变量时,需要先读取自己的本地内存,如果读不到再去主内存中读取,同时更新到自己的本地内存。

有同学就要问了,这个本地内存,是在内存中开辟的一块空间么?一个线程读一个内存中的数据,还需要从内存一个地方拷贝到另一个地方?

为啥上面有个×?因为怕有的人把这个图当成正解了...

注意,JMM 是语言级的内存模型,所以你千万不能把这个模型中的概念,同真实的硬件层的概念相关联,这也是很多同学对此感到迷惑的根源。

JMM 的出现,就是为了让程序员不要去想硬件上的细节,但这样的命名方式,反而使程序员理解起来更加困惑了。

如果非要对应硬件上的原理,那不准确地说,这里的本地内存实际上在并不真实存在,是由于处理器中的缓存机制而产生的抽象概念。这么说可能稍稍解决你的一点点困惑。

之所以说不准确,一是因为处理器有很多不同的架构,并不一定所有的架构都有缓存。二是因为除了缓存之外,还有其他硬件和编译器的优化,可以导致本地内存这个概念的存在。

所以从某种程度上说,JMM 还确实是大大简化和屏蔽了程序员对于硬件细节的了解。

 

volatile

 

根据 JMM 向程序员提供的抽象模型,我们可以推测出如下问题。

此时线程 2 并没有读到线程 1 写入的最新值,a=2,而是读到了主内存中的旧值,a=1。

也即,线程 1 对共享变量的写入,对线程 2 不可见。

那么在 Java 中,如何让一个共享变量具有上述的可见性呢?

答案是加一个 volatile 即可。

在 jls 里是这样描述 volatile 的。

The Java programming language allows threads to access shared variables. As a rule, to ensure that shared variables are consistently and reliably updated, a thread should ensure that it has exclusive use of such variables by obtaining a lock that, conventionally, enforces mutual exclusion for those shared variables.

The Java programming language provides a second mechanism, volatile fields, that is more convenient than locking for some purposes.

简单说,Java 语言为了确保共享变量得到一致和可靠的更新,可以通过锁,也可以通过更轻量的 volatile 关键字。

比如在一个变量 a 前面加上了 volatile 关键字

volatile int a;

那么在写这个 volatile 变量时,JMM 会把该线程对应的本地内存中的共享变量值立即刷新到主内存。

相应地,当读一个 volatile 变量时,JMM 会把该线程对应的本地内存置为无效。线程接下来将从主内存中读取共享变量。

以上两点,就是 volatile 的内存语义。

而这两点的实质上,是完成了一次线程间通信,即线程 1 向线程 2 发送了消息。

有的同学可能又要问了,内存语义,那真的是写的时候刷新到主内存,而读的时候让本地内存失效么?

这里我还是要强调,JMM 是语言级的内存模型,无论它硬件层面上是怎么去保证的,在你站在语言层面去学习 JMM 时,就不要去想硬件细节。

为了解决部分同学的困惑,我还是用不准确的语言来说一下,volatile 的底层会被转化成上面所说的 LOCK 指令,写这个共享变量时,就既做了刷新到主内存,同时也将其他处理器缓存失效的操作,并不是写的时候刷新缓存,读的时候再去将本地内存失效。

但在语言层去描述 volatile 的内存语义时,刚刚的说法完全没错,只要程序员按照 JMM 这个内存模型和 volatile 的内存语义去编程,能够方便理解,且能够达到预期的效果,即可。至于是不是准确表达了硬件层面的原理,这个是不重要的。

这让我想到了之前看过的一个演讲,我记得叫“眼见为实”,是说我们看到的,并不一定是这个宇宙的真实面貌,只是能让我们更好地生存并延续后代,而已。

后记

写这篇文章时真的是瑟瑟发抖,一是因为网上讲这个知识点的实在太多了,二是我发现 volatile 这个知识点水很深,从底层硬件一直到上层语言,每一层都有实现原理,层层抽象直到上层表现为我们看到的样子。

我甚至觉得不可能有人对这个知识点完全理解透彻。缓存一致性和总线嗅探,你需要了解 CPU 硬件的原理吧?JMM 内存模型,你需要了解 JVM 虚拟机实现吧?

或者不说实现的事儿,就单单是 JMM 说了什么,很多人觉得懂了,但你看过 JSR133 文档对 JMM 模型的正式规范么?很长,给大家随便截取一小段。

所以随着不断研究这个知识点,我发现我越来越不懂 volatile 了。

但我还是写下了这篇文章,并给自己挖了个坑。

这篇文章我尽全力把网上一些混乱的概念讲解,重新理清楚,且尽量把和可见性无关的东西去掉。

但我还是写的很不满意,也很郁闷。

因为我觉得,我离 volatile 的真相,还很遥远。

高云FPGA系列教程(2):FPGA点灯工程创建、程序下载和固化 相比于国外FPGA厂商EDA开发环境,几个G到几十个G的大小,高云云源软件安装包也很小巧,界面也很简洁,综合速度非常快,是我没想到的,好像在使用单片机一样,点一下就编译完成了,以本文简单的LED示例工程为例,比特流文件几乎在几秒钟内生成;无论是下载比特流文件到RAM还是Flash中,速度都很快,而且只有一种fs程序文件格式,不用再进行bit/mcs转换;云源软件自带的编辑器也很好用,和Notepad++界面差不多,而且快捷键很方便,具有基本的自动补全功能。 阅读详情

相关推荐

基于ThingsBoard+ESP8266的MQTT远程控制实战:从设备接入到仪表盘交互

本文详细介绍了基于开源物联网平台ThingsBoard与ESP8266开发板,通过MQTT协议实现远程控制的完整实战流程。从环境搭建、设备创建、仪表盘设计到核心代码编写与联调,手把手指导完成从云端到硬端的物联网闭环,为智能家居与物联网原型开发提供低成本、高效率的解决方案。

weixin_29192365的博客 334

《码农翻身》--知识点总结--01我是一个线程---线程生命周期、线程池、缓存、锁

一.线程的生命周期 当线程被创建并启动以后,它既不是一启动就进入了执行状态,也不是一直处于执行状态。 在线程的生命周期中,它要经过 新建(New)、就绪(Runnable)、运行(Running)、阻塞 (Blocked)和死亡(Dead) 5种状态。尤其是当线程启动以后,它不可能一直"霸占"着CPU独自 运行,所以CPU需要在多条线程之间切换,于是线程状态也会多次在运行、阻塞之间切换 。 1.新建状态(NEW) 当程序使用new关键字创建了一个线程之后,该线程就处于新建状态,此时仅由JVM为其分配内存,

weixin_40185596的博客 652

告别单一帧:在CFD-POST中完整加载Fluent瞬态计算结果的实战指南

本文详细介绍了在CFD-POST中完整加载Fluent瞬态计算结果的实战指南,解决工程师常见的只能看到最后一帧数据的问题。通过Fluent端的正确设置和CFD-POST端的完整加载技巧,帮助用户高效处理瞬态数据,提升后处理效率。文章还提供了常见问题排查、性能优化和高级后处理技巧,适用于Workbench环境下的流体流动分析。

weixin_29284657的博客 540

缓存惹的祸

缓存惹的祸 背景 项目A遇到某些条件的情况下需要把某些消息推送至项目B,推送方式跟项目B负责人约定好后采用httpclient方式; 数据库里有一张配置表专门来配置推送的url、appId等信息,配置好后开始开发。 过程 与项目B负责人约定好了推送模板后开始开发。这里为了提高响应速度,当项目A遇到某些条件下开始推送消息(采用线程的方式) 推送类有这几个部分组成: 定义ThreadPoolExecutor线程池 Redis缓存获取配置信息 推送消息方法 开发好后本地调

wistchen 189

DTS中video-interfaces接口详解

视频数据管道通常由外部设备组成,例如通过I2C、SPI或UART总线控制的摄像机传感器,以及SoC内部IP块(包括视频DMA引擎和视频数据处理器)。 SoC内部块由DT节点描述,与其他SoC块放置方式类似。外部设备表示为它们各自总线控制器节点的子节点,例如I2C。 所有视频设备上的数据接口都由它们的子“port”节点描述。端口的配置取决于参与数据传输的其他设备,并由“endpoint”子节...

龙图腾的博客 9012

OceanBase数据迁移(OMS)深度解析:异构数据库迁移方案、核心原理与实战优化指南

OceanBase迁移服务(OMS)提供异构数据库间全量+增量数据迁移与实时同步能力,核心价值在于保障业务连续性、数据一致性和异构兼容性。其分层架构包含服务接入层、流程编排层和组件链路层,支持Oracle/MySQL/DB2等与OceanBase的数据交互。关键技术包括DBCat引擎处理结构转换、并行分片实现全量迁移、以及日志解析保障增量同步。OMS通过类型映射、批量提交和断点续传等优化手段,确保迁移过程高效可靠,典型应用于去O迁移、数据库升级等场景。

本博客聚焦 YOLOv11 全流程落地,涵盖架构优化、数据集处理、训练技巧与多场景部署,兼及国产数据库、Java 开发与 AI 模型应用,内容兼顾理论与工程实践,为开发者提供系统干货,助力高效提升技术能力。 850

都是was缓存惹的祸

 在项目中经常遇见这样的问题:修改应用的配置文件web.xml后,无论重启应用还是重启WebSphere服务器,都不能重新加载web.xml,导致修改的内容无效。 这个问题困扰了我好久,即使删除了${was安装目录}/IBM/WebSphere/AppServer/profiles/AppSrv01/下的temp和wstemp两个缓存文件夹下的临时文件,重启后还是无效。几经折腾,后来终

weoln的专栏 1万+

2026年美赛数学建模竞赛 MCM B题:使用太空电梯系统建立月球殖民地 问题一 月球殖民地材料运输的三种场景建模 详细解题思路和代码

如果运输系统不能完美工作(例如,系绳摆动、火箭失败、电梯故障等),你的解决方案在多大程度上会发生变化?技术可行性:三种方案在技术上都是可行的,但挑战不同 经济性:混合方案在长期视角下最具成本效益 时间效率:并行运输可以显著缩短总建设时间环境影响:太空电梯的环境优势明显,混合方案可平衡需求风险分散:混合方案提供了天然的风险分散机制

YOLO 619

===都是缓存惹的祸=====

一、用AJAX访问数据时的问题。下面是ajax代码:var xmlHttp;var popWindow;function createXMLHttpRequest(){  if(window.ActiveXObject)  {    xmlHttp=new ActiveXObject("Microsoft.XMLHTTP");  }  else if(window.XMLHttpReque

软若石(I Will Get What I Want.)Asp.Net,Ajax,C#,Javascript 1155

吊打原版YOLOv8!ASF-YOLO多尺度融合+注意力机制实战解析(遥感/医疗/质检均适用)

ASF-YOLO融合YOLOv8的创新目标检测框架摘要 ASF-YOLO是针对小目标检测优化的先进框架,采用三重特征编码器和尺度序列融合技术增强多尺度特征提取能力。核心创新包括: 三重特征编码器(TPE)融合跨层级信息 尺度序列特征融合(SSFF)模块通过3D卷积处理多尺度信息 通道-位置注意力机制(CPAM)聚焦关键特征区域 Zoom_cat模块实现自适应多尺度特征融合 该框架特别适用于医学影像、遥感检测等小目标密集场景,通过动态特征权重调整显著提升检测精度。关键技术实现包含多尺度特征统一、3D卷积序列处

FJN110的博客 529

SAP 调用Ftp服务器

FTP(File transfer protocol)是一种标准的网络协议,可以用于在互联网上传递文件。SAP系统中可通过系列配置和提供的些标准函数,用于查看、更新、下载FTP服务器上的文件。提示:以下是本篇文章正文内容,下面案例可供参考。

qq_38304013的博客 1418

原来是缓存惹的祸

今天做一个很小的页面,240 X 350大小,页面和业务逻辑都不复杂,很快就完成了。 编译、0警告、0错误, to be continued…… 转载于:https://www.cnblogs.com/juejue1984/archive/2008/10/14/1311113.html...

weixin_30877755的博客 136

(5)ModalAI VOXL2

Ardupilot官网关于《Non-GPS navigation》的翻译 —《(5) ModalAI VOXL2》。

无人机开发(开源Ardupilot) 1万+

又是缓存惹的祸!!!

最近遇到这样一个问题: 客户端请求服务端, 服务端没有给客户端返回相关的字段信息(抓包确认的), 但客户端却获取到了信息, 怪哉!         抓包是比较靠谱的, 它体现了最原始的网络交互。 抓包没有就是没有。但: 1. 客户端却有了对应的信息.  2. 代码也有对应字段的回传信息。 好矛盾啊!         原来, 客户端有缓存逻辑!!!!!!

认知 行动 坚持 7117

SAP B1中文培訓教材_SDK

公司内部培训资料,对开发工具 ,DIAPI, UIAPI,Add-ON有详细解说

大中型超市收银系统(可直接运行)

光步前台收银系统系统功能:商品销售、商品退货、挂单、收银员权限、会员销售、单品取消、整单取消、商品查询、脱机销售、脱机数据上传,基本资料下载,开钱箱、小票打印、收款结算,支持多币种付款方式(现金、储值卡、礼券、微信等),支持多种促销。运行环境:.net 4.0登陆信息用户名:1001 密码:123456内置商品信息,商品编码可输入00001000 - 00010000,测试效果相关功能键F5 结算 F9挂单 F11商品查询 F8退货 Insert单品取消 Del整单取消 F12开钱箱F2 会员 Ctrl+Z退出系统 Home 锁屏 相关源码待公开

缓存惹的祸?探讨MyBatis二级缓存的四个不推荐之处

然而,由于开启了 MyBatis 的二级缓存且会话B还未失效,会话B仍然从二级缓存中获取到的是旧的用户信息,导致最终输出结果可能是旧的姓名,而不是预期的"Alice"。当使用 MyBatis 的二级缓存时,会将查询的结果对象缓存在内存中,以便在后续的查询中直接使用,从而减少数据库访问次数,提高性能。这其中涉及到整个查询结果集的存储,包括用户对象及其关联对象等,如果数据量较大,二级缓存可能导致内存的过度占用,从而影响系统的性能和稳定性。因此,在复杂查询的情况下,不建议使用 MyBatis 的二级缓存。

青轩桃李能几何,流光欺人忽蹉跎 2787

VB摄像头监控

该VB模块可对摄像头捕获的画面进行录像等,可在创建的窗口进行控制

都是IE 缓存惹的祸!!

最近几天treeview总是显示不正确,系统提示缺少对象!!,前几天还正常好好的今天非要把这个问题解决!!!又是杀毒,又是修改注册表,最后还重装问题依旧无意在清理系统垃圾时发现IE 缓存高达400M赶紧清空怀着忐忑不安的心再次打开包含treeview的页面显示正常!!! 转载于:https://www.cnblogs.com/wyq2004/archive/2004/08/01/29182.htm...

weixin_30654419的博客 127

win10 跳过U8环境检测的IE WebControls.rar

win10 安装u8的时候 提示IE WebControls 不通过,这个工具可以欺骗u8的检查。 跳过U8环境检测的IE WebControls。提示导入失败后,重新检测通过。

Redis缓存批量清除性能暴跌?可能是@CacheEvict的allEntries惹的祸

解决Redis缓存批量清除性能骤降问题,深入剖析Spring Boot Redis @CacheEvict 的 allEntries 机制。揭示其在高频调用场景下清空全量键导致的性能瓶颈,提供精准清除策略与替代方案,显著提升缓存效率,值得收藏。

ByteVein的博客 765

好久没有写AJAX程序了,突然傻了,缓存惹的祸

好久没有写AJAX程序了,突然傻了,缓存惹的祸 解决办法,在AJAX提交的URL中给个随机参数: +&timestamp=+new Date().getTime();问题得到解决

清风一吹(清风博客) 704

网站加速-缓存功能惹的祸

缓存功能开启注意事项: 开启站点加速后,若发现站点异常,请关闭站点加速 开启站点加速后,您的网站页面内容更新频率取决于【缓存周期】时间 说明:如果对网页内容更新频率有极高要求的,不建议打开网站加速-缓存功能,会造成网页刷新3-5次之后才会更新一次数据库最新内容。 ...

风口上的猪博客 245

为什么你的CI/CD变慢了?,可能是未清理的Docker构建缓存惹的祸

解决CI/CD变慢难题,掌握Docker镜像构建缓存清理prune技巧。适用于高频构建场景,通过docker builder prune释放磁盘空间,提升构建效率,避免资源浪费。方法简单高效,值得收藏。

DebugVibe的博客 536

AJAX 之 IE缓存惹的祸 +Math.random() 《随机数》

function GetMessageBypageID(pageid) { $.ajax({ url: "/Favorite/GetMessageBypageID", data: "pageID=" + pageid+"&gi="+Math.random(), async: fa

码农 2052

GeoJSON 数据加载后地图不显示边界?原来是 MIME 类型和缓存惹的祸

本文记录了一次使用 OpenLayers 加载 GeoJSON 文件时地图边界无显示的问题排查过程。从 GeoJSON 文件格式验证、服务器返回类型检查,到浏览器缓存干扰等多个角度逐一排查,最终发现是 `application/octet-stream` 类型识别错误以及浏览器缓存导致的地图渲染失败。文章详细展示了排查思路与解决方案,适用于使用 GeoJSON 进行地图开发的开发者。

overonenca的博客 1507

CPU缓存命中率低?可能是线程迁移惹的祸,C++26亲和性绑定来救场

提升性能必看!通过C++26 CPU 亲和性 绑定实现有效防止线程迁移,解决缓存命中率低问题。适用于高并发、实时计算等场景,利用标准库统一接口简化开发,提升程序稳定性和执行效率。值得收藏

LearnFlow的博客 768
上一篇: 程序员们,请你们不要看低零代码
下一篇: 漫画 | 抱歉,你可能看到了假的通信史!
码农翻身
码农翻身 《码农翻身》作者 《码农翻身》作者
博客等级 码龄8年 3万+粉丝 1084原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值