Redis高级应用——海量数据高并发下Reids的分片集群,原理和应用,集群伸缩以及项目配置

本文详细介绍了Redis分片集群的原理,包括一致性Hash算法、虚拟节点的使用,以及如何搭建和扩展集群。同时涵盖了缓存问题如击穿、穿透和雪崩的解决方案。最后展示了SpringBoot中配置RedisTemplate访问分片集群的方法。

在这里插入图片描述

引出

Redis高级应用——海量数据高并发下Reids的分片集群,原理和应用,集群伸缩以及项目配置


Reids海量数据,高并发问题

认识Redis集群算法

Redis的集群:哨兵集群 + Redis主从复制,分片集群

在这里插入图片描述

主从和哨兵可以解决高可用、高并发读的问题。但是依然有两个问题没有解决:

  • 海量数据存储问题
  • 高并发写的问题

分片集群需要的节点数量较多,这里我们搭建一个最小的分片集群,包含3个master节点,每个master包含一个slave节点。

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

Redis集群算法的演变:

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

一致性Hash算法:依赖Hash插槽,取值:0 - 16383

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

虚拟节点一致性Hash算法:

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

分片集群需要的节点数量较多,这里我们搭建一个最小的分片集群,包含3个master节点,每个master包含一个slave节点。

这里我们会在同一台虚拟机中开启6个redis实例,模拟分片集群,信息如下:

IP PORT 角色
192.168.3.111 6310 master
192.168.3.111 6320 master
192.168.3.111 6330 master
192.168.3.111 7310 slave
192.168.3.111 7320 slave
192.168.3.111 7330 slave

搭建Redis分片集群

准备实例

创建出6310、6320、6330、7310、7320、7330目录

ps -ef | grep redis
kill -9 xx bb cc              #docker stop myredis
mkdir -p /redis/cluster
cd cluster
mkdir 6310 6320 6330 7310 7320 7330
mkdir tmp

在/redis/cluster下准备一个新的redis.conf文件,内容如下:(先创建tmp目录,在其下创建6310-7330)

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

port 6379
# 开启集群功能
cluster-enabled yes
# 集群的配置文件名称,不需要我们创建,由redis自己维护
cluster-config-file /redis/cluster/tmp/6379/nodes.conf
# 节点心跳失败的超时时间
cluster-node-timeout 5000
# 持久化文件存放目录
dir /redis/cluster/tmp/6379
# 绑定地址
bind 0.0.0.0
# 让redis后台运行
daemonize yes
# 注册的实例ip
replica-announce-ip 192.168.3.111
# 保护模式
protected-mode no
# 数据库数量
databases 1
# 日志
logfile /redis/cluster/tmp/6379/run.log

将这个文件拷贝到每个目录下:

# 进入/redis/
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Arya's Blog

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值