redis缓存穿透、缓存击穿、缓存雪崩原因及解决方案介绍

Redis:缓存穿透、缓存击穿、缓存雪崩 利用布隆过滤器,将查询的数据条件都哈希到一个足够大的布隆过滤器中,用户发送的请求过来时,先被布隆过滤器拦截,一定不存在的数据直接就被拦截返回了,从而可以避免缓存和数据库都不存在的数据进行查询访问,达到减轻此类情况下数据库压力的目的。,通过设置lockkey 或者 通过当前的时间与锁设置的时间做比较,如果当前时间已经大于锁设置的时间临界,即可以进一步判断是否可以获取锁,否则说明该锁还在被占用,不能获取该锁。当主节点的数据发生变化时,会将变化的数据同步给从节点,这样从节点的数据就可以和主节点的数据保持一致了。 阅读详情

一、解释
1、缓存穿透:key对应的数据在数据源并不存在,每次针对此key的请求从缓存获取不到,请求都会到数据源,从而可能压垮数据源。比如用一个不存在的用户id获取用户信息,不论缓存还是数据库都没有,若黑客利用此漏洞进行攻击可能压垮数据库。
2、缓存击穿:key对应的数据存在,但在redis中过期,此时若有大量并发请求过来,这些请求发现缓存过期一般都会从后端DB加载数据并回设到缓存,这个时候大并发的请求可能会瞬间把后端DB压垮。
3、缓存雪崩:当缓存服务器重启或者大量缓存集中在某一个时间段失效,这样在失效的时候,也会给后端系统(比如DB)带来很大压力。

二、解决方案
1、缓存穿透:
方案1:常见的则是采用布隆过滤器,将所有可能存在的数据哈希到一个足够大的bitmap中,一个一定不存在的数据会被 这个bitmap拦截掉,从而避免了对底层存储系统的查询压力。
方案2:另外一个更为简单粗暴方法,如果一个查询返回的数据为空(不管是数据不存在,还是系统故障),仍然把空结果进行缓存,但它的过期时间会很短,最长不超过五分钟。
2、缓存击穿:
key可能会在某些时间点被超高并发地访问,是一种非常“热点”的数据。这个时候,需要考虑一个问题:缓存被“击穿”的问题。
方案1:业界比较常用的做法,是使用mutex。简单地来说,就是在缓存失效的时候(判断拿出来的值为空),不是立即去load db,而是先使用缓存工具的某些带成功操作返回值的操作(比如Redis的SETNX或者Memcache的ADD)去set一个mutex key,当操作返回成功时,再进行load db的操作并回设缓存;否则,就重试整个get缓存的方法。
SETNX,是「SET if Not eXists」的缩写,也就是只有不存在的时候才设置,可以利用它来实现锁的效果。

方案2:使用key查询缓存只负责查询缓存,不从DB加载,使用定时任务定时刷新缓存,这样两个人任务分离

方案3:从DB中加载缓存的时候,使用分布式锁,只允许一个线程加载缓存;
3、缓存雪崩:
与缓存击穿的区别在于雪崩针对很多key缓存,击穿则是某一个key大并发。
使用锁或队列、设置过期标志更新缓存、为key设置不同的缓存失效时间、或者使用双缓存策略

参考:
https://www.cnblogs.com/xichji/p/11286443.html
https://blog.youkuaiyun.com/aoxida/article/details/118803642

一张图搞懂Redis缓存雪崩、缓存穿透、缓存击穿 缓存穿透是指用户请求的数据在缓存中不存在即没有命中,同时在数据库中也不存在,导致用户每次请求该数据都要去数据库中查询一遍,然后返回空。如果有恶意攻击者不断请求系统中不存在的数据,会导致短时间大量请求落在数据库上,造成数据库压力过大,甚至击垮数据库系统。缓存击穿,是指一个key非常热点,在不停的扛着大并发,大并发集中对这一个点进行访问,当这个key在失效的瞬间,持续的大并发就穿破缓存,直接请求数据库,就像在一个屏障上凿开了一个洞。 阅读详情

相关推荐

320x240 TFT屏的SPI DMA驱动避坑指南:基于HC32F460的时序调试心得

本文详细介绍了基于HC32F460 MCU驱动320x240 TFT屏的SPI DMA实战经验,涵盖硬件设计、波形诊断、DMA优化及高级调试技巧。重点解析SPI时序配置、DMA缓冲区对齐等常见问题,并提供逻辑分析仪波形诊断方法和性能优化策略,帮助开发者规避典型陷阱,提升显示性能。

weixin_42639246的博客 373

redis 缓存设计

1、 缓存穿透:查找一个不存在的key 数据, 缓存层和存储层都不会命中,将导致不存在的数据每次请求都要到存储层去查询,失去缓存保护DB 的意义。 解决方案:有很多种方法可以有效地解决缓存穿透问题,最常见的则是采用布隆过滤器(不了解的可以看这里),将所有可能存在的数据哈希到一个足够大的bitmap中,一个一定不存在的数据会被 这个bitmap拦截掉,从而避免了对底层存储系统...

tony的专栏 283

STM32开发者必看:如何在正点原子探索者开发板上快速移植CANopenNode协议栈

本文为STM32开发者提供了在正点原子探索者开发板上快速移植CANopenNode协议栈的实战指南。文章详细介绍了从环境准备、硬件抽象层适配到协议栈初始化与测试的全过程,并分享了PDO配置与性能优化等关键技巧,帮助开发者高效实现CANopen标准化通信。

weixin_29173777的博客 465

Redis的缓存穿透、缓存击穿、缓存雪崩

缓存击穿和缓存雪崩都是与缓存相关的常见问题,它们有一些共同点,并可以采用类似的解决方法。

qq_48595067的博客 7099

osgearth2.10 demo功能介绍

osgearth-2.10 demo: 说明: 1、运行环境win7 x64 旗舰版,CPU i5-6400 8核,8G内存; 2、括号内是对应demo的测试参数(.earth); 3、配置OSG_FILE_PATH; 4、参数命令行可以查看各个demo需要的输入参数; 5、前缀说明:gui界面程序、cmd控制台程序、non功能未知; 6、程序后括号里的non表示不需要通过命令行输入参数; 示例: 1、gui:osgearth_3pv(simple.earth):相机与地球的投影关系,Range表示相机

rach09的专栏 2425

国产安全芯片在密码算法国密体系下的性能适配策略

国密体系即国家商用密码体系,是保障信息安全的核心技术体系。自20世纪90年代末起步,国密体系经历了从无到有、从弱到强的发展历程。1999年,国家密码管理局成立,标志着国密体系的正式建立。2000年,国密SM1算法首次发布,开启了国密算法的标准化进程。此后,SM2、SM3、SM4等算法陆续推出,形成了完整的对称与非对称密码算法体系。:2010年,国密标准正式纳入国家标准体系,国密算法在金融、政务、通信等关键领域的应用得到明确规范。

qq_40552871的博客 1356

Redis中的缓存穿透、雪崩、击穿的原因以及解决方案(详解)

redis中出现雪崩、击穿和穿透的原因以及如何进行解决

PeaK欢迎大家评论留言,一起交流Java技术 7万+

【UV打印机】PrintExp打印软件教程(四)-设置校准电压

序号名称功能说明1校准材料设置定义当前打印材料,不同的材料参数绑定不同的校准值2向导勾选进行校准向导操作3校准类型包括喷头安装、步进校准、喷头间距、套色校准、双向校准4类型子项同类型子项5操作步骤校准存在步骤和校准说明示意图。

Print World的专栏 5078

redis缓存雪崩、击穿、穿透

提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档 文章目录前言一、redis缓存雪崩二、redis缓存击穿三、redis缓存穿透 前言 主要是介绍一下redis缓存雪崩、击穿、穿透,以及他们的解决方式。 一、redis缓存雪崩 所谓的redis缓存雪崩指的是:redis中大量key集中过期或者redis服务器宕机,从而导致大量请求从数据库获取数据,导致数据库服务器访问压力过大。 解决方式: ① 若是由于大量key过期所造成的,可以给key的ttl设置一个过期时间 ② 若是因为redis.

weixin_45414913的博客 8630

QT5.14.2离线安装包保姆级教程:断网、选组件、避坑全记录

本文详细介绍了QT5.14.2离线安装包的完整流程,特别针对Windows平台开发者提供断网安装、组件选择及避坑指南。作为QT5系列中最后一个免费离线版本,5.14.2具有免注册、全组件离线安装等独特优势,是开源开发者的理想选择。文章涵盖从环境准备到安装后配置的全方位指导,帮助开发者高效完成安装并避免常见问题。

weixin_30924087的博客 579

【WRF数据准备】气象驱动数据-ERA5再分析数据(Copernicus)

【WRF数据准备】气象驱动数据-ERA5再分析数据

WW、forever的博客 5540

Redis - 缓存雪崩,缓存穿透,缓存击穿

1、缓存雪崩:redis中大量key集体过期2、缓存穿透:大量请求根本不存在的key3、缓存击穿:redis中一个热点key过期(大量用户访问该热点key,但是热点key过期)

m0_74031490的博客 920

对称式目镜设计实例

对称式目镜设计实例

weixin_72050316的博客 1163

Redis发生的缓存穿透,缓存雪崩,缓存击穿详解

什么是缓存:举个例子:越野车,山地自行车,都拥有"避震器",车体加速后因惯性,在酷似"U"字母的地形上飞跃,硬着陆导致的,像个弹簧一样;同样,实际开发中,系统也需要"避震器",防止过高的数据访问猛冲系统,导致其操作线程无法及时处理信息而瘫痪;Cache),就是数据交换的,俗称的缓存就是由于其被修饰,所以随着类的加载而被加载到,作为本地缓存,由于其又被修饰,所以其引用(例3:map)和对象(例3:new HashMap())之间的关系是固定的,不能改变,因此不用担心赋值(=)导致缓存失效;

2301_81012448的博客 908

霍尼韦尔SoftMaster使用说明

霍尼韦尔SoftMaster使用说明

LinePhone3.2.7(android端最新版本) sip客户端

SIP客户端For android:LinePhone3.2.7(最新版本),官网地址:http://www.linphone.org/

Redis缓存穿透 , 缓存击穿 , 缓存雪崩出现原因, 解决方案及其面试话术

缓存穿透出现的主要原因是由于第三方伪造大量不存在的请求路径对服务器发送请求 , 由于数据库中不存在该数据所以无法查询并保存到redis中, 导致所有伪造请求绕过缓存直接请求数据库, 使数据库访问压力骤增甚至宕机。

几许的博客 951

VB摄像头监控

该VB模块可对摄像头捕获的画面进行录像等,可在创建的窗口进行控制

Redis缓存击穿、缓存穿透、缓存雪崩(定义、产生原因、解决方案--代码示例)

本文针对Redis使用中的缓存穿透、击穿和雪崩问题,从定义、原因到解决方案进行系统分析。 且提供了详细的Go代码实现示例,并总结对比了三大问题的特征与解决方案,为构建健壮的缓存系统提供了实用指南。

bojinyuan00的博客 1341

Probability and Statistics - 4th edition

Probability and Statistics - 4th edition

Redis进阶篇 - 缓存穿透、缓存击穿、缓存雪崩问题及其解决方案

在使用 Redis 作为缓存时,缓存穿透、缓存击穿和缓存雪崩是常见的问题,可能会影响系统性能和稳定性。本文将深入探讨这些问题的概念、产生原因、以及可能带来的影响,并针对这些问题提供的解决方案,以帮助读者更好地理解并解决这些挑战。

ChineHe的博客 1915

Redis--缓存击穿、缓存穿透、缓存雪崩

缓存击穿是指在缓存中某个热点数据(即被频繁访问的数据)失效后,短时间内有大量请求直接击中数据库,从而造成数据库压力骤增,甚至可能导致数据库崩溃。缓存穿透是指恶意用户或错误代码频繁请求一些在缓存和数据库中都不存在的数据。由于这些数据在缓存中不存在,每次请求都会直接查询数据库,导致数据库压力骤增。缓存雪崩是指大量缓存数据在同一时间失效,导致大量请求同时访问数据库,数据库瞬间承受巨大压力,可能导致系统崩溃。

aini_lovee的博客 982

Redis三剑客:缓存雪崩、缓存穿透、缓存击穿

我们不给键添加过期时间,让其一直存在缓存中,但是我们在将数据其添加进缓存中时,会给其添加一个逻辑过期的字段,当多线程到达时,我们首先命中缓存,取出逻辑过期的字段,判断数据是否过期,如果数据过期,让线程竞争锁,获取到锁的线程新创建一个线程来进行缓存重建的业务,然后主线程和其他未竞争到锁的线程直接返回过期的数据。缓存击穿产生原因:存在高并发的热点键,并且其重建缓存业务复杂,重建缓存耗时长,当热点键过期失效时,大量线程进入重建缓存,查询数据库,导致数据库压力暴涨。缺点:实现复杂,存在误差。1、基于互斥锁的实现。

m0_71338251的博客 902

Redis 面试常见问题:缓存雪崩、缓存击穿以及缓存穿透

这时,大量用户同时访问这个商品的详情页,由于缓存中没有这个数据,所有的请求都直接打到了数据库上,导致数据库压力过大。对查询结果进行缓存,即使查询的结果是空(null或不存在),也将其缓存起来,并设置一个较短的过期时间。定义:缓存穿透是指查询一个不存在的数据,由于缓存中也没有这个数据,导致每次请求都会直接查询数据库,而数据库中也没有该数据,这样就会造成数据库的压力增大。使用互斥锁,当缓存失效时,第一个到达的请求去查询数据库,其他请求等待,查询完数据库后,更新缓存,后续的请求就可以从缓存中获取数据。

wddblog的博客 1369

Redis哨兵模式与Redis缓存穿透、击穿和雪崩

Redis哨兵模式与Redis缓存穿透、击穿和雪崩

这个人很懒,什么都没有留下。 2186

(Redis高频面试题)缓存穿透、缓存雪崩、缓存击穿的原因及解决方案?

大量缓存数据同时过期或缓存服务宕机,导致请求直接穿透到数据库,引发连锁故障。某个热点Key突然过期时,高并发大量请求同时访问数据库,导致瞬时压力过大。大量查询不存在的数据是缓存穿透大量查询一批过期的数据是缓存雪崩大量查询同一个热点key是缓存击穿。

2401_87145357的博客 1773

Redis缓存穿透、击穿和雪崩面试相关问题整理

在互联网公司的面试中,Redis 的缓存穿透、击穿和雪崩是高频考点,尤其在北京的头部互联网公司(如字节、阿里、美团、快手等)。在面试中,除了理论,建议结合具体业务场景(如电商秒杀、社交热点)分析解决方案,并展示对Redis底层机制(如持久化、集群通信)的理解。(如无效ID、恶意构造的非法Key),导致请求直接穿透缓存层打到数据库。时,大量并发请求直接穿透缓存,导致数据库压力骤增。

weixin_43290370的博客 1280

【Redis】缓存雪崩、缓存击穿、缓存穿透

大量缓存数据在同一时间失效,导致所有请求直接打到数据库,引发数据库瞬时高负载甚至崩溃某个热点key突然失效,大量并发请求直接穿透到数据库,导致数据库压力激增查询不存在的数据(如非法ID、恶意攻击),导致请求绕过缓存直接访问数据库问题触发条件核心解决方案缓存雪崩大量key同时失效差异化TTL、多级缓存、熔断降级缓存击穿单个热点key失效互斥锁、逻辑过期、预加载缓存穿透查询不存在的数据布隆过滤器、控制缓存、参数校验。

qq_45795794的博客 692

详解Redis缓存击穿、缓存穿透、缓存雪崩

详解Redis缓存击穿、缓存穿透、缓存雪崩

m0_66220639的博客 1020
上一篇: Nodejs修改全局仓库设置方案
下一篇: redis支持数据结构类型
小小白兔兔
博客等级 码龄7年 46粉丝 207原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值