经典的缓存过期策略

缓存设计核心原则:从策略选型到经典问题解决方案 缓存作为提升系统性能的关键技术,其核心原理是将高频访问数据暂存于高速存储中,以减少对慢速数据源(如数据库)的直接访问,从而显著降低响应延迟并提升吞吐量。在分布式系统架构中,缓存的技术价值在于平衡数据访问速度与一致性,是构建高并发、高可用应用的基础设施。其应用场景广泛,从电商热点商品信息、社交动态,到系统配置和会话数据,都依赖缓存来保障流畅的用户体验。本文聚焦于缓存策略的深度实践,系统解析了包括Cache-Aside、Write-Through在内的核心读写模式,并针对缓存击穿、雪崩、穿透等高频工程挑战,结合 阅读详情

页面置换算法

页面置换算法是操作系统的调度算法

在操作系统中,文件的读取会先分配一定的页面空间,也就是我们说的 Page,使用页面的时候首先去查询空间是否有该页面的缓存,如果有的话,则直接拿出来;否则就先查询,页面空间没有满,就把新页面缓存起来,如果页面空间满了,就删除部分页面,方便新的页面插入。

在操作系统的页面空间中,对应淘汰旧页面的机制不同,所以会有不同页面调度方法,常见的有 FIFO、LRU、LFU 过期策略:

FIFO(First In First Out,先进先出),根据缓存被存储的时间,离当前最远的数据优先被淘汰;

LRU(Least Recently Used,最近最少使用),根据最近被使用的时间,离当前最远的数据优先被淘汰;

LFU(Least Frequently Used,最不经常使用),在一段时间内,缓存数据被使用次数最少的会被淘汰。

这三种策略也是经典的缓存淘汰策略,大部分缓存应用模型,都是基于这几种策略实现的。

内存淘汰策略

操作系统的页面置换算法,对应到分布式缓存中,就是缓存的内存淘汰策略,这里以 Redis 为例,进行分析。

当 Redis 节点分配的内存使用到达最大值以后,为了继续提供服务,Redis 会启动内存淘汰策略,以下的几种策略参考官方文档:

noeviction,这是默认的策略,对于写请求会拒绝服务,直接返回错误,这种策略下可以保证数据不丢失;

allkeys-lru,这种策略操作的范围是所有 key,使用 LRU 算法进行缓存淘汰;

volatile-lru,这种策略操作的范围是设置了过期时间的 key,使用 LRU 算法进行淘汰;

allkeys-random,这种策略下操作的范围是所有 key,会进行随机淘汰数据;

volatile-random,这种策略操作的范围是设置了过期时间的 key,会进行随机淘汰;

volatile-ttl,这种策略操作的范围是设置了过期时间的 key,根据 key 的过期时间进行淘汰,越早过期的越优先被淘汰。

 

缓存过期策略

分布式缓存中的过期策略和内存淘汰策略又有一些不同,希望大家不要混淆,内存淘汰是缓存服务层面的操作,而过期策略定义的是具体缓存数据何时失效,下面一起来看一下。

我们都知道,Redis 是 key-value 数据库,可以设置缓存 key 的过期时间,过期策略就是指当 Redis 中缓存的 key 过期了,Redis 如何处理。

 

Redis 中过期策略通常有以下三种。

定时过期

这是最常见也是应用最多的策略,为每个设置过期时间的 key 都需要创建一个定时器,到过期时间就会立即清除。这种方式可以立即删除过期数据,避免浪费内存,但是需要耗费大量的 CPU 资源去处理过期的数据,可能影响缓存服务的性能。

 

惰性过期

可以类比懒加载的策略,这个就是懒过期,只有当访问一个 key 时,才会判断该 key 是否已过期,并且进行删除操作。这种方式可以节省 CPU 资源,但是可能会出现很多无效数据占用内存,极端情况下,缓存中出现大量的过期 key 无法被删除。

 

定期过期

这种方式是上面方案的整合,添加一个即将过期的缓存字典,每隔一定的时间,会扫描一定数量的 key,并清除其中已过期的 key。

合理的缓存配置,需要协调内存淘汰策略和过期策略,避免内存浪费,同时最大化缓存集群的吞吐量。另外,Redis 的缓存失效有一点特别关键,那就是如何避免大量主键在同一时间同时失效造成数据库压力过大的情况。

 

Java实现LRU Cache示例:https://skaygo.blog.youkuaiyun.com/article/details/114097380

Golang实现LRU Cache示例:https://skaygo.blog.youkuaiyun.com/article/details/114097220

 

 

伺服电机开发实战指南 伺服电机作为工业自动化的核心部件,正经历前所未有的技术革新。本文从基础原理出发,详细介绍了伺服电机的分类、工作原理和特性,分析了伺服电机系统组成与核心部件,探讨了企业级开发技术,包括控制算法、通信协议和故障诊断等高级功能,并提供了实战案例分析,从行业应用到具体开发步骤,展示了伺服电机的工程实现。通过深入理解伺服电机的原理、掌握开发技术、学习应用案例,可以实现伺服系统的高性能开发与应用。 阅读详情

相关推荐

海康威视摄像头CVE-2017-7921漏洞复现:从零到一的实战指南(含解密工具下载)

本文详细解析了海康威视摄像头CVE-2017-7921漏洞的技术原理与复现方法,提供从环境搭建到实战利用的完整指南。通过认证绕过漏洞,攻击者可获取敏感信息并执行高权限操作,文章还包含解密工具下载与防御建议,助力安全研究人员深入理解物联网设备安全风险。

weixin_29325515的博客 817

缓存过期都有哪些策略?

缓存过期都有哪些策略?

码农跟牛马有什么区别 1074

搭建PX4开发系统(Ubuntu 22.04)

本文是《从零开始学 PX4 无人机开发》系列第二篇,适合开发者在 Ubuntu 系统下快速搭建 PX4 编译与仿真环境,支持 QGroundControl、Gazebo、MAVSDK 等完整工具链。

qq_15856721的博客 4225

「 Redis 」缓存过期策略及内存淘汰策略

在计算机科学中,缓存是一种优化技术,用于提高系统的性能。通过将经常访问的数据存储在快速访问的介质(如快速内存)中,可以减少读取慢速存储介质(如硬盘)的次数,从而加快了程序的响应时间。然而,缓存也带来一个问题:缓存中存储的数据可能会过期或变得不再有用。为了解决这个问题,我们需要使用缓存淘汰策略。这些策略控制着缓存中哪些数据应该被删除以及何时删除它们。除了缓存淘汰策略之外,内存淘汰机制也是一个重要的概念。当缓存满了并且新数据需要被添加到缓存中时,缓存中的旧数据必须被替换。

frozenpenguin的博客 1775

使用GitLab的VS Code插件 GitLab Workflow 来进行项目的DevOps管理,助力研发效能

使用VS Code的GitLab Workflow插件,进行项目的DevOps管理,将效率提升到MAX。直接在VScode中管理流水线,一键跳转到创建 Issues,MR

知无涯 5295

ABAP 7.40 新语法介绍系列之二 - ABAP 类型转换操作符 CONV

这个lv_input_s变量的唯一使命,就是接收来自 char10 类型的 lv_input_c 变量的值,然后传递到 print 方法里去。

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 1421

缓存过期策略

对于一个缓存来说,如果他过期了,那应该如何将他删除,有下面三种不同的策略 定时删除:在设置一个缓存的过期时间的同时,创建一个定时器,让定时器在过期时间立即将缓存删除。优势:定时删除策略的删除是最及时的,一个缓存过期了马上就会被淘汰出内存,对于内存非常的友好。缺点:创建过多的定时器,对于cpu来说是非常的不友好的,cpu忙于处于删除过期缓存这种任务上,对于服务器的吞吐量会有很大的影响。 惰性删除...

P19777的博客 740

2025华为OD面试手撕代码真题目录及面试八股文

本专栏更新每年华为OD机试的高频手撕代码题,每个题目都会使用五种语言进行解答(C & C++& Java & Python & JS) 华为od机试,华为od机试真题,华为od机试E卷,华为odE卷,华为od机试真题E卷,华为OD,华为OD机试,华为OD机试真题,华为od机考,华为od机试D卷,华为od机试真题D卷,华为od手撕代码,华为od,华为od机试C卷,华为od e卷,华为2024e卷,od机试,2024E卷,华为OD机试E卷,什么是华为od,华为od介绍,全面了解华为od,2024华为od,如何备

KJ.JK 5万+

失效策略:缓存过期都有哪些策略?

缓存使用的是内存资源,而内存资源是非常宝贵的,要用有限的服务器资源支撑更多的业务,就必须让那些访问频率不高的缓存删除掉,为新的缓存腾出内存空间。本文我们一起来看一下,缓存失效有哪些策略。

欢迎朋友,我是一名十多年开发经验的新手,希望多多指教。 2125

226届数字IC秋招笔试面试全攻略

本文系统介绍了数字IC设计岗位面试的核心技巧,聚焦三大关键环节:自我介绍、项目介绍和技术问题回答。在自我介绍部分,强调1-2分钟结构化表达,突出与岗位匹配的技能和量化成果;项目介绍环节提出"背景-职责-技术-难点-成果"五步框架,建议结合架构图和性能数据展示技术深度;技术问题回答策略包括理解问题、结构化思考、举例说明和诚实应对未知。文章还提供了项目包装方法,指导如何通过量化数据、架构创新展示和技术难点解决方案来突出项目亮点,并附有简历项目描述示例和技术问题回答模板,帮助面试者全方位展示专

2301_79143213的博客 1063

69、SAP数据库归档重做日志备份策略与工具详解

本文详细解析了SAP数据库归档重做日志备份的重要性及策略,介绍了SAP提供的备份工具brarchive及其配置和使用方法,探讨了BRBACKUP与BRARCHIVE的联合运行、一致在线备份、备用数据库备份场景以及备份策略的综合应用与优化。此外,还分析了备份过程中常见问题的解决方法、备份监控与评估流程、与第三方备份解决方案的集成方式,以及未来备份技术的发展趋势和应对策略。通过合理运用这些策略和工具,可以有效保障SAP数据库的安全性和可恢复性。

peace的博客 138

一文详解Redis缓存过期淘汰策略

一文带你详解Redis缓存过期淘汰策略,总体来说,可以从2个维度,四个方面来个8中淘汰策略分类过期键中筛选,volatile-ttl所有键中筛选,allkeys-lru、volatile-lru、allkeys-random、volatile-random、allkeys-lfu、volatile-lfulru(最近最久未使用的键删除)lfu(最低频次的键删除)random(随机删除)ttl(到了过期时间的键删除)...

FlyingFish868的博客 1755

Qt5.15.2配置安卓环境

否则,将会跳转到github,你可以自行下载解压到你设置的目录中,然后Qt会自动检测到。以上所需的工具确实有些繁多,而且如果单独下载又涉及科学上网问题,版本问题十分麻烦,好在Qt Creator 4.12之后已经可以自动下载SDK工具,NDK,基础包,openssl,以及gradle等,十分省心。回到正题,无论通过在线安装的方式,安装时勾选了Android,还是编译的方式,编译时编译了Qt Android库,想要使用Qt开发安卓应用仍然需要一些其他工作,包括安装编译安卓项目需要的SDK,NDK等。

weixin_41392061的博客 981

【Redis】Redis经典9问—持久化/过期策略/缓存穿透/数据结构/事务/淘汰策略/应用场景/分布式锁

目录1. 知道 **redis** 的持久化吗?底层如何实现的?有什么优点缺点?2. **redis** 过期策略都有哪些?3. 缓存穿透、缓存击穿、缓存雪崩的解决方案?4. **Redis** 当中有哪些数据结构?5. Redis 相比 memcached 有哪些优势理解 **Redis** 事务?6. **Redis** 有哪几种数据淘汰策略?7. Redis的实际应用场景?8. 如何理解理解 **Redis** 事务?9. 使用Redis如何设计分布式锁? 1. 知道 redis 的持久化吗?底层如何

Code Metaverse 1264

C# WinForm 基于DirectShow.dll编写的程序,可边预览边保存视频,音频和图片

基于微软的DirectShow.dll的二次开发1.自动识别连接的摄像头跟麦克风且可以对其进行选择(默认选中第一个)2.可录制wmv和avi两种格式的视频并且都带有音频,avi可以录制的分辨率和帧数进行选择,wmv默认进行了淸晰度优化如不喜欢可去除代码中有相关提示3.可在预览点开之后进行拍照,也可边录制视频边拍照4.添加了视频和音频的压缩功能(酌情使用)这次二次开发发现C#对DirectShow的相关信息太少,这次做完也不敢藏私共享出来,还望大家指正

Camera2Demo

在Camera2 的基础上进行封装,使得Camera2一堆初始化逻辑与Activity分离,降低耦合度,完成预览拍照并保存的操作

Redis系列-12.Redis的缓存过期淘汰策略

定期删除策略的难点是确定删除操作执行的时长和频率:如果删除操作执行得太频繁或者执行的时间太长,定期删除策略就会退化成立即删除策略,以至于将CPU时间过多地消耗在删除过期键上面。因此,如果采用定期删除策略的话,服务器必须根据情况,合理地设置删除操作的。因为删除操作会占用cpu的时间,如果刚好碰上了cpu很忙的时候,比如正在做交集或排序等计算的时候,就会给cpu造成额外的压力,页面置换算法,淘汰最长时间未被使用的页面,看页面最后一次被使用到发生调度的时间长短,首先淘汰最长时间未被使用的页面。

爱吃知识的土豆倪的博客 1541

VC中sqlite的使用

在VC中对sqlite的使用,实现数据库大批数据的快速插入,读取数据库中的数据在ListCtrl中显示

redis第四课-缓存淘汰策略和过期检测

Redis一般可用于两种用途: 1、被单纯作为缓存配合数据库来使用。 2、被当作持久化数据库来使用。 这次我们来讲一下redis被用做缓存时的一些可以聊的东西。 此时它有一些特点: 1、缓存数据不重要 2、不是全量数据 3、缓存应该随着访问变化 4、热数据 当既然作为缓存,那么其实我们日常在缓存中存放的不可能是全部数据,而都是一些热点数据,因为毕竟内存空间是有限的。因此随着访问的变化,应该淘汰掉冷...

darkness0604的博客 598

大中型超市收银系统(可直接运行)

光步前台收银系统系统功能:商品销售、商品退货、挂单、收银员权限、会员销售、单品取消、整单取消、商品查询、脱机销售、脱机数据上传,基本资料下载,开钱箱、小票打印、收款结算,支持多币种付款方式(现金、储值卡、礼券、微信等),支持多种促销。运行环境:.net 4.0登陆信息用户名:1001 密码:123456内置商品信息,商品编码可输入00001000 - 00010000,测试效果相关功能键F5 结算 F9挂单 F11商品查询 F8退货 Insert单品取消 Del整单取消 F12开钱箱F2 会员 Ctrl+Z退出系统 Home 锁屏 相关源码待公开

黑马点评【缓存】

本文系统介绍了Redis缓存应用中的核心问题与解决方案。首先阐述了缓存的使用价值:提升性能、缓解数据库压力,并对比了多级缓存架构。重点分析了缓存与数据库一致性问题,提出了双写方案(CacheAsidePattern)及操作顺序的最佳实践。针对三大缓存异常场景:穿透(布隆过滤器/空值缓存)、雪崩(过期时间分散/多级缓存)、击穿(互斥锁/逻辑过期),分别给出具体解决方案。最后展示了如何封装Redis工具类,整合穿透防护、击穿处理等核心功能。文章结合实际代码示例,为企业级缓存应用提供了系统化的实践指导。

27届Java后端炒粉练习生,AICoding中........ 1467

Redis过期键删除策略深度解析

Redis采用惰性删除+定期删除的组合策略来管理过期键,在CPU占用和内存利用率间取得平衡。惰性删除仅在访问时检查过期键,定期删除则通过随机抽样清理过期键。主从模式下过期键由主库统一删除,持久化场景下RDB和AOF对过期键有不同处理规则。该策略配合内存淘汰机制,有效解决了缓存过期和内存占用问题,是Redis高性能的重要保障。

weixin_43829708的博客 1387

Redis缓存三大经典问题详解:穿透、击穿与雪崩(原理+图解+实战方案)

在高并发系统中,Redis缓存极大地提升了数据访问速度和系统吞吐量。。这些问题如果处理不当,轻则影响性能,重则导致数据库雪崩、系统不可用。本文将详细讲解三大问题的原理、危害、常见误区、主流解决方案,并给出实战建议,帮助你彻底掌握缓存设计的核心要点。

梓梓心的博客 978

缓存(redis)

缓存是提升系统性能的关键技术,通过内存存储高频访问数据,显著降低数据库访问压力。文章系统分析了缓存的三大问题及解决方案:1)缓存穿透(布隆过滤器拦截、缓存空对象);2)缓存雪崩(随机过期时间、集群部署、限流熔断);3)缓存击穿(互斥锁、逻辑过期)。

qq_65855505的博客 1057

Redis缓存三大问题,一次解决

Redis是我们日常在工作中使用非常多的缓存解决手段,使用缓存,能够提升我们应用程序的性能,同时极大程度的降低数据库的压力。但如果使用不当,同样会造成许多问题,其中三大经典问题就包括了: 1.缓存穿透 2.缓存击穿 3.缓存雪崩 是不是听上去一脸懵逼?没关系,看完这篇就明白了。 1、缓存穿透 缓存穿透是指用户在查找一个数据时查找了一个根本不存在的数据。按照缓存设计流程,首先查询redi...

1632

模块六:缓存经典问题与解决方案

方案适用场景缺点缓存空对象请求Key相对集中空值洪泛,内存浪费布隆过滤器海量请求,Key分布广实现复杂,有误判率穿透:查不到,空对象或布隆来挡击穿:热点过期,分布式锁把门扛雪崩:大量失效,随机过期加高可用一致性,记住先更新DB,再删缓存,删失败就重试+记录日志。别在"先删缓存再更新DB"上纠结,那是自己给自己挖坑。BigKey拆、压缩、存OSS,HotKey本地缓存顶上去。缓存不是万能的,但没有缓存是万万不能的。用好缓存,你的系统能扛住双十一;用不好缓存,你每天都是双十一(指报警量)

qq_37878585的博客 212

redis缓存完整详解

Redis作为高性能内存数据库,是解决高并发场景下数据库IO瓶颈的理想缓存方案。摘要介绍了Redis缓存的核心概念、工作模式和三大经典问题解决方案:1)缓存穿透采用空值缓存和布隆过滤器;2)缓存击穿通过分布式锁和永不过期key应对;3)缓存雪崩采用过期时间随机化、多级缓存等策略。最佳实践强调必须设置缓存过期时间、规范读写策略(先更新DB再删缓存)、统一key命名规范,并通过集群部署和多级缓存确保高可用。Redis凭借内存操作、丰富数据结构和持久化机制,能有效提升系统响应速度并降低数据库压力。

尽人事,听天命 296

Redis 经典缓存问题:一致性、穿透、击穿、雪崩与污染

缓存雪崩指的是大量缓存数据在同一时间段失效,导致所有请求都涌向数据库,引发数据库崩溃。缓存污染是指缓存中存储了低命中率或无意义的数据,占用了大量内存资源,降低缓存效率。Redis 缓存和数据库中的数据可能出现不一致的问题,尤其是在数据更新时,可能导致缓存中的数据陈旧。

SAFADGADSGASA的博客 958

Redis 从入门到精通:缓存经典难题 —— 穿透、击穿、雪崩

本文介绍了Redis缓存层面临的三大经典问题——穿透、击穿和雪崩,并提供了Python实现的完整解决方案。针对缓存穿透问题,提出了缓存空对象和使用布隆过滤器两种方法,通过拦截不存在的数据请求保护数据库。对于缓存击穿问题,采用互斥锁机制防止热点数据过期时数据库被大量请求压垮。文章不仅讲解原理,还提供了可直接应用于项目的代码实现,包括基于Redis位图的布隆过滤器实现和分布式锁方案,帮助开发者构建更健壮的缓存系统。(149字)

IT策士的博客 360

学习笔记 | 7大缓存经典问题

7大缓存经典问题 01 缓存失效 问题描述 服务系统查数据,首先会查缓存,如果缓存数据不存在,就进一步查 DB,最后查到数据后回种到缓存并返回。缓存的性能比 DB 高 50~100 倍以上,所以我们希望数据查询尽可能命中缓存,这样系统负荷最小,性能最佳。 缓存里的数据存储基本上都是以 key 为索引进行存储和获取的。业务访问时,如果大量的 key 同时过期,很多缓存数据访问都会 miss,进而穿透到 DB,DB 的压力就会明显上升,由于 DB 的性能较差,只在缓存的 1%~2% 以下,这样请求的慢查率会

大虎牙的博客 485
上一篇: MySQL实现XA规范
下一篇: 理解缓存穿透、缓存击穿、缓存雪崩常见的缓存设计问题
思维的深度
博客等级 码龄11年 2万+粉丝 391原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值