浅谈Redis - 热点key问题 | 京东云技术团队

京东云开发者

于 2023-08-21 14:21:33 发布

阅读量204

点赞数

CC 4.0 BY-SA版权

分类专栏：云计算文章标签： redis 京东云数据库热key

本文链接：https://blog.youkuaiyun.com/jdcdev_/article/details/132407610

62 篇文章

订阅专栏

文章讨论了Redis服务器因热key引发的流量集中问题，介绍了通过业务经验预估、客户端收集、Redis自带命令和新版本客户端功能来发现热点key的方法。解决策略包括使用二级缓存分散请求和备份热点key到多个集群节点。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

热key问题就是突然有几十万的请求去访问redis上的某个特定key，那么这样会造成流量过于集中，达到物理网卡上限，从而导致这台redis服务器直接宕机。

凭借业务经验，进行预估哪些是热key。比如某些商品要做秒杀，则商品key就可以判断为热key，但并非所有业务都能预估出热key。
在客户端进行收集。比如在redis客户端执行redis命令之前，加入一行代码进行命令数据收集，然后通过网络将收集的命令发送出去，缺点是对客户端代码有入侵。
在Proxy层做收集，但是并非所有的redis集群都有proxy。
用redis自带命令，monitor命令可以实时抓取出redis服务器接收到的命令，然后写代码统计出热key是啥，不过高并发条件下，有内存暴增的隐患，影响redis的性能。redis4.0.3提供了客户端热点key发现功能，如果key比较多，执行比较慢。
自己抓包评估，redis客户端使用TCP协议与服务端进行交互，通信协议采用RESP，自己写程序监听端口，按照RESP协议规则解析数据进行分析，不过开发成本较高，不易维护。

增加二级缓存，发现热key以后，可以把热key数据加载到系统JVM并设置合适的缓存过期时间，针对热key的请求就会直接分散到各业务服务器上，防止所有请求同时访问同一台redis。
备份热key。可以把热点key的数据备份到所有redis的集群节点中，可以通过在热点key后面拼接集群节点编号，然后将这些备份key分散到所有集群节点中，客户端访问热点key的时候也在热点key后面随机拼接集群节点编号，将热点key的请求分散到不同集群节点上。