Redis之缓存雪崩,穿透,击穿

缓存雪崩

缓存雪崩,是指:系统刚上限时,数据还没有加载到缓存中;或者在某一个时间点,缓存中的数据大面积失效了,此时大量的查询请求落在数据库服务器上,造成数据库CPU和内存压力过大,甚至宕机

在这里插入图片描述

解决方案:

  • 使用分布式锁或者分布式队列来限制数据库请求数量,这样可以一定程度上保护数据库服务器。但是加锁所导致吞吐量下降。
  • 使缓存的过期时间尽可能分散,比如允许过期时间为一个范围内的一个随机值
  • 使用二级缓存,A设置为原始缓存,失效时间为短期,B设置为二级缓存,失效时间更长一点。这样在A雪崩时,B就可以发挥作用

缓存穿透

缓存穿透是指:查询一个在数据库中不可能存在的数据,此时缓存miss了,然后再去数据库中进行查询,再miss掉,然后再返回空值,整个过程为了查询一个不可能存在的数据进行了两次无用的查询。这就叫作缓存穿透。一些非法用户可能会制造大量的缓存穿透来攻击热点接口,所以这是需要注意的。

解决方案:

  • 使用分布式锁或者分布式队列来限制数据库请求数量,这样可以一定程度上保护数据库服务器。但是治标不治本
  • 允许缓存存储空值。当数据库返回空值时,也可以将空值设置到缓存中,下一次再请求时就直接在缓存中命中,避免了一次缓存穿透。但是这样的机制会让缓存体积变大。
  • 使用布隆过滤器。布隆过滤器是一个类似于HashSet的结构。将所有可能的数据哈希到这个结构中,当对一个不可能的数据请求查询时,会直接被布隆过滤器过滤掉,不会到达数据库层

缓存击穿

缓存击穿是指:热点key在某些特殊的场景时间内恰好失效了,导致有大量请求进入数据库中,增加数据库服务器的压力

其实缓存击穿和缓存雪崩差不多,只不过缓存雪崩描述的是大量key,而缓存击穿描述的是热点key

解决方案:

  • 使用分布式锁或者分布式队列来限制数据库请求数量,这样可以一定程度上保护数据库服务器。但是加锁所导致吞吐量下降。
  • 对于这些热点key,过期时间可以设置为无限长

缓存降级

缓存降级是指当访问量剧增,服务出现问题的时候,系统可以牺牲非核心服务,来保证核心服务的正常执行。系统可以根据一些关键数据进行自动降级,也可以配置实现人工降级。

关于缓存降级,前年的双十一,买东西是无法修改地址的,只能使用默认地址发货,而支付等功能是没有问题的。这就是个缓存降级的表现,牺牲修改地址等非核心业务,保障支付这个核心业务!

缓存预热

缓存预热就是系统刚上线时,把一部分的数据提前加载到缓存中,这样就避免一开始的时候大量请求全部落在数据库上,增加DB的压力

<think> 嗯,用户这次问的是Redis缓存问题的测试方法,正好结合之前讨论过的雪崩穿透击穿的概念。用户应该是运维或测试工程师,需要在实际环境中验证缓存机制的可靠性。 之前解释过三种问题的区别:雪崩是大面积失效,穿透是查询不存在数据,击穿是热点key失效。现在用户关心的是如何模拟这些场景进行测试,这很实用——毕竟线上故障的代价太大,提前测试能规避风险。 从引用材料看,[1]提到击穿的互斥锁和逻辑过期方案,[2][4]给出雪崩的集群和TTL随机化方案,[3]则描述穿透的攻击特征。测试方法可以从这些解决方案逆推: 雪崩测试要模拟批量key同时过期,需要控制Redis的TTL设置;穿透测试要构造非法请求,得准备异常参数数据集;击穿测试最复杂,要精确控制单个热点key过期时间点并制造并发请求。 具体到技术实现: - 雪崩测试可以用Redis的批量过期命令或提前计算好TTL - 穿透测试需要脚本持续发送随机字符串等非常规参数 - 击穿测试的并发模拟工具选JMeter还是locust取决于用户技术栈 - 监控部分特别重要,比如grafana看数据库QPS是否突增 用户可能还隐含需求:这些测试会不会影响线上服务?所以得强调在预发布环境操作。另外测试数据构造的实用性——比如穿透测试的非法参数要覆盖边界值(空值/超长字符串等)。 相关问题设计成递进的比较好:从检测工具到防御机制验证,最后到全链路压测,这样用户能阶梯式深入。 </think> 以下是针对Redis缓存雪崩穿透击穿的详细测试方法,结合引用材料和实际场景设计: --- ### 一、缓存雪崩测试方法 **核心目标**:验证批量缓存失效时数据库的容灾能力 **测试步骤**: 1. **模拟批量失效** - 批量写入1000个测试Key,设置相同TTL(如30秒) - 使用`EXPIREALL`命令(需自定义Lua脚本)或等待自然过期 ```lua -- 批量设置过期脚本 for _,key in ipairs(KEYS) do redis.call('EXPIRE', key, 30) end ``` [^2][^4] 2. **制造高并发请求** - 使用JMeter/Locust模拟1000+并发请求这些Key - **监控指标**: - 数据库QPS突增幅度(如从200QPS升至5000QPS) - Redis缓存命中率骤降至0% - 接口响应延迟是否超过阈值(如>500ms)[^4] 3. **验证防御机制** - 随机TTL方案:检查Key的TTL是否满足 $$ TTL_{real} = TTL_{base} + random(0, 300) $$ - 熔断机制:观察数据库QPS超过阈值时是否触发请求拒绝[^2][^4] --- ### 二、缓存穿透测试方法 **核心目标**:验证对非法请求的拦截能力 **测试步骤**: 1. **构造非法请求** - 生成不存在Key的请求集(如负ID、UUID随机字符串) - 示例数据集:`["user_-1", "product_9999999", "order_abc123"]` 2. **发起持续攻击** - 以200QPS持续发送非法请求10分钟 - **关键监控点**: - Redis是否持续返回`nil` - 数据库是否持续执行无效查询(如`SELECT * FROM users WHERE id=-1`)[^3] 3. **验证防御方案** - 布隆过滤器:检查非法Key是否被拦截(误判率需<0.1%) - 空值缓存:确认`user_-1`等Key被缓存为`""`且TTL=60s[^3] --- ### 三、缓存击穿测试方法 **核心目标**:验证热点Key失效时的并发控制能力 **测试步骤**: 1. **模拟热点Key失效** - 设置热点Key(如`hot_product_123`)并手动`DEL`触发过期 - 使用`redis-cli debug sleep 30`阻塞Redis模拟重建延迟 2. **制造并发重建请求** - 启动500个并发线程同时读取该Key - 监控数据库连接数峰值(如从50激增至500)[^1] 3. **验证解决方案** - **互斥锁方案**: - 检查是否仅1个线程执行`SETNX lock_product_123 1` - 观察其他线程是否等待(响应延迟应≈缓存重建时间) - **逻辑过期方案**: - 修改逻辑过期字段为过去时间(如`expire_at: 1672500000`) - 验证是否返回旧数据并异步重建缓存[^1] --- ### 四、监控与断言设计 | 测试类型 | 通过标准(断言) | 监控工具 | |------------|------------------------------------------|-----------------------| | 雪崩测试 | 数据库QPS增长<300%且不宕机 | Grafana + Prometheus | | 穿透测试 | 非法请求数据库命中率=0% | Redis慢查询日志 | | 击穿测试 | 热点Key并发重建时数据库连接数<最大连接数80% | Zabbix报警机制 | > 关键提示:所有测试需在**预发布环境**进行,避免影响线上服务[^4]。 ---
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值