
目录
引出
Redis高级应用——海量数据高并发下Reids的分片集群,原理和应用,集群伸缩以及项目配置
Reids海量数据,高并发问题
认识Redis集群算法
Redis的集群:哨兵集群 + Redis主从复制,分片集群

主从和哨兵可以解决高可用、高并发读的问题。但是依然有两个问题没有解决:
- 海量数据存储问题
- 高并发写的问题
分片集群需要的节点数量较多,这里我们搭建一个最小的分片集群,包含3个master节点,每个master包含一个slave节点。

Redis集群算法的演变:

一致性Hash算法:依赖Hash插槽,取值:0 - 16383

虚拟节点一致性Hash算法:

分片集群需要的节点数量较多,这里我们搭建一个最小的分片集群,包含3个master节点,每个master包含一个slave节点。
这里我们会在同一台虚拟机中开启6个redis实例,模拟分片集群,信息如下:
| IP | PORT | 角色 |
|---|---|---|
| 192.168.3.111 | 6310 | master |
| 192.168.3.111 | 6320 | master |
| 192.168.3.111 | 6330 | master |
| 192.168.3.111 | 7310 | slave |
| 192.168.3.111 | 7320 | slave |
| 192.168.3.111 | 7330 | slave |
搭建Redis分片集群
准备实例
创建出6310、6320、6330、7310、7320、7330目录
ps -ef | grep redis
kill -9 xx bb cc #docker stop myredis
mkdir -p /redis/cluster
cd cluster
mkdir 6310 6320 6330 7310 7320 7330
mkdir tmp
在/redis/cluster下准备一个新的redis.conf文件,内容如下:(先创建tmp目录,在其下创建6310-7330)

port 6379
# 开启集群功能
cluster-enabled yes
# 集群的配置文件名称,不需要我们创建,由redis自己维护
cluster-config-file /redis/cluster/tmp/6379/nodes.conf
# 节点心跳失败的超时时间
cluster-node-timeout 5000
# 持久化文件存放目录
dir /redis/cluster/tmp/6379
# 绑定地址
bind 0.0.0.0
# 让redis后台运行
daemonize yes
# 注册的实例ip
replica-announce-ip 192.168.3.111
# 保护模式
protected-mode no
# 数据库数量
databases 1
# 日志
logfile /redis/cluster/tmp/6379/run.log
将这个文件拷贝到每个目录下:
# 进入/redis/

本文详细介绍了Redis分片集群的原理,包括一致性Hash算法、虚拟节点的使用,以及如何搭建和扩展集群。同时涵盖了缓存问题如击穿、穿透和雪崩的解决方案。最后展示了SpringBoot中配置RedisTemplate访问分片集群的方法。
最低0.47元/天 解锁文章
245

被折叠的 条评论
为什么被折叠?



