Redis Cluster集群_stackexchange

Redis集群中有16384个哈希槽，每个redis实例负责一部分slot，集群中的所有信息通过节点数据交换而更新。

2.3数据分布存储原理

Redis 集群使用数据分片（sharding）来实现：Redis 集群中内置了 16384 个哈希槽，当需要在 Redis 集群中放置一个 key-value 时，redis 先对 key 使用 crc16 算法算出一个结果，然后把结果对 16384 求余数(集群使用公式 CRC16(key) % 16384)，这样每个key 都会对应一个编号在 0-16384 之间的哈希槽，那么redis就会把这个key 分配到对应范围的节点上了。同样，当连接三个节点任何一个节点想获取这个key时，也会这样的算法，然后内部跳转到存放这个key节点上获取数据。

例如三个节点：哈希槽分布的值如下：

 cluster1:  0-5460
 cluster2:  5461-10922
 cluster3:  10923-16383

这种将哈希槽分布到不同节点的做法使得用户可以很容易地向集群中添加或者删除节点。 比如说：

• 如果用户将新节点 D 添加到集群中， 那么集群只需要将节点 A 、B 、 C 中的某些槽移动到节点 D 就可以了。
• 如果用户要从集群中移除节点 A ， 那么集群只需要将节点 A 中的所有哈希槽移动到节点 B 和节点 C ， 然后再移除空白（不包含任何哈希槽）的节点 A 就可以了。

因为将一个哈希槽从一个节点移动到另一个节点不会造成节点阻塞， 所以无论是添加新节点还是移除已存在节点， 又或者改变某个节点包含的哈希槽数量， 都不会造成集群下线。

3、Redis Cluster主从模式

 redis cluster 为了保证数据的高可用性，加入了主从模式，一个主节点对应一个或多个从节点，
主节点提供数据存取，从节点则是从主节点拉取数据备份，当这个主节点挂掉后，就会有这个从节点
选取一个来充当主节点，从而保证集群不会挂掉.
 ​
 ​
 ​
 2.什么时候整个集群就不能用了？
 如果集群任意一个主节点挂掉,且当前主节点没有从节点，则集群将无法继续，因为我们不再有办法为这个节点承担范围内的哈希槽提供服务。但是，如果这个主节点和所对应的从节点同时失败，则Redis Cluster无法继续运行。

二、集群部署

 环境准备:
 1.准备三机器，关闭防火墙和selinux
 2.制作解析并相互做解析。
 注:规划架构两种方案，一种是单机多实例，这里我们采用多机器部署:
 三台机器，每台机器上面两个redis实例，一个master一个slave，第一列做主库，第二列做备库
 #记得选出控制节点
 ​
 redis-cluster1 192.168.116.172   7000、7001
 redis-cluster2 192.168.116.173   7002、7003
 redis-cluster3 192.168.116.174   7004、7005

1.三台机器相同操作

 1.安装redis
 [root@redis-cluster1 ~]# mkdir /data
 [root@redis-cluster1 ~]# yum -y install gcc automake autoconf libtool make
 [root@redis-cluster1 ~]# wget https://download.redis.io/releases/redis-6.2.0.tar.gz
 [root@redis-cluster1 ~]# tar xzvf redis-6.2.0.tar.gz -C /data/
 [root@redis-cluster1 ~]# cd /data/
 [root@redis-cluster1 data]# mv redis-6.2.0/ redis
 [root@redis-cluster1 data]# cd redis/
 [root@redis-cluster1 redis]# make    #编译
 [root@redis-cluster1 redis]# mkdir /data/redis/data #创建存放数据的目录
 2.创建节点目录:按照规划在每台redis节点的安装目录中创建对应的目录（以端口号命名）
 [root@redis-cluster1 redis]# pwd
 /data/redis
 [root@redis-cluster1 redis]# mkdir cluster #创建集群目录
 [root@redis-cluster1 redis]# cd cluster/
 [root@redis-cluster1 cluster]# mkdir 7000 7001 #创建节点目录
 ​
 [root@redis-cluster2 redis]# mkdir cluster
 [root@redis-cluster2 redis]# cd cluster/
 [root@redis-cluster2 cluster]# mkdir 7002 7003
 ​
 [root@redis-cluster3 redis]# mkdir cluster
 [root@redis-cluster3 redis]# cd cluster/
 [root@redis-cluster3 cluster]# mkdir 7004 7005
 3.拷贝配置文件到节点目录中，#三台机器相同操作
 [root@redis-cluster1 cluster]# cp /data/redis/redis.conf 7000/
 [root@redis-cluster1 cluster]# cp /data/redis/redis.conf 7001/
 ​
 [root@redis-cluster2 cluster]# cp /data/redis/redis.conf 7002/
 [root@redis-cluster2 cluster]# cp /data/redis/redis.conf 7003/
 ​
 [root@redis-cluster3 cluster]# cp /data/redis/redis.conf 7004/
 [root@redis-cluster3 cluster]# cp /data/redis/redis.conf 7005/
 4.修改集群每个redis配置文件。(主要是端口、ip、pid文件，三台机器相同操作)，修改如下：
 [root@redis-cluster1 cluster]# cd 7000/
 [root@redis-cluster1 7000]# vim redis.conf #修改如下
 bind 192.168.116.172  #每个实例的配置文件修改为对应节点的ip地址
 port 7000   #监听端口，运行多个实例时，需要指定规划的每个实例不同的端口号
 daemonize yes #redis后台运行
 pidfile /var/run/redis_7000.pid #pid文件，运行多个实例时，需要指定不同的pid文件
 logfile /var/log/redis_7000.log #日志文件位置，运行多实例时，需要将文件修改的不同。
 dir /data/redis/data #存放数据的目录
 appendonly yes #开启AOF持久化，redis会把所接收到的每一次写操作请求都追加到appendonly.aof文件中，当redis重新启动时，会从该文件恢复出之前的状态。
 appendfilename "appendonly.aof"  #AOF文件名称
 appendfsync everysec #表示对写操作进行累积，每秒同步一次
 以下为打开注释并修改
 cluster-enabled yes #启用集群
 cluster-config-file nodes-7000.conf #集群配置文件，由redis自动更新，不需要手动配置，运行多实例时请注修改为对应端口
 cluster-node-timeout 5000 #单位毫秒。集群节点超时时间，即集群中主从节点断开连接时间阈值，超过该值则认为主节点不可以，从节点将有可能转为master
 cluster-replica-validity-factor 10 #在进行故障转移的时候全部slave都会请求申请为master，但是有些slave可能与master断开连接一段时间了导致数据过于陈旧，不应该被提升为master。该参数就是用来判断slave节点与master断线的时间是否过长。（计算方法为：cluster-node-timeout * cluster-replica-validity-factor，此处为：5000 * 10 毫秒）
 cluster-migration-barrier 1 #一个主机将保持连接的最小数量的从机，以便另一个从机迁移到不再被任何从机覆盖的主机
 cluster-require-full-coverage yes #集群中的所有slot（16384个）全部覆盖，才能提供服务
 ​
 #注：
 所有节点配置文件全部修改切记需要修改的ip、端口、pid文件...避免冲突。确保所有机器都修改。
 5.启动三台机器上面的每个节点(三台机器相同操作)
 [root@redis-cluster1 ~]# cd /data/redis/src/
 [root@redis-cluster1 src]# ./redis-server ../cluster/7000/redis.conf 
 [root@redis-cluster1 src]# ./redis-server ../cluster/7001/redis.conf
 ​
 [root@redis-cluster2 7003]# cd /data/redis/src/
 [root@redis-cluster2 src]# ./redis-server ../cluster/7002/redis.conf 
 [root@redis-cluster2 src]# ./redis-server ../cluster/7003/redis.conf
 ​
 [root@redis-cluster3 7005]# cd /data/redis/src/
 [root@redis-cluster3 src]# ./redis-server ../cluster/7004/redis.conf 
 [root@redis-cluster3 src]# ./redis-server ../cluster/7005/redis.conf

查看端口

 6.创建集群：在其中一个节点操作就可以
 redis节点搭建起来后，需要完成redis cluster集群搭建，搭建集群过程中，需要保证6个redis实例都是运行状态。
 Redis是根据IP和Port的顺序，确定master和slave的，所以要排好序，再执行。
 ​
 参数:
 --cluster-replicas 1:表示为集群中的每个主节点创建一个从节点.书写流程:主节点ip+port 对应一个从节点ip+port（注意:若节点在不同的机器上，注意主节点的书写位置，要避免主节点在同一台机器上，影响性能。正常是前面三个节点为主节点，后面的为从节点）
 ​
 [root@redis-cluster1 src]# cd /data/redis/src/
 [root@redis-cluster1 src]# ./redis-cli --cluster create --cluster-replicas 1 192.168.116.172:7000 192.168.116.172:7001 192.168.116.173:7002 192.168.116.173:7003 192.168.116.174:7004 192.168.116.174:7005
 >>> Performing hash slots allocation on 6 nodes...
 Master[0] -> Slots 0 - 5460
 Master[1] -> Slots 5461 - 10922
 Master[2] -> Slots 10923 - 16383
 Adding replica 192.168.116.173:7003 to 192.168.116.172:7000
 Adding replica 192.168.116.174:7005 to 192.168.116.173:7002
 Adding replica 192.168.116.172:7001 to 192.168.116.174:7004
 M: de5b4b2f6a559362ed56d4de1e3994fd529917b5 192.168.116.172:7000
    slots:[0-5460] (5461 slots) master
 S: 2e8c1caa63ac4a1b9a6eea4f0fd5eab4c6b73c21 192.168.116.172:7001
    replicates 60e3755761c9cbdacb183f59e3d6205da5335e86
 M: e0370608cd33ddf5bb6de48b5627799e181de3b6 192.168.116.173:7002



还有兄弟不知道网络安全面试可以提前刷题吗？费时一周整理的160+网络安全面试题，金九银十，做网络安全面试里的显眼包！


王岚嵚工程师面试题（附答案），只能帮兄弟们到这儿了！如果你能答对70%，找一个安全工作，问题不大。


对于有1-3年工作经验，想要跳槽的朋友来说，也是很好的温习资料！


【完整版领取方式在文末！！】


***93道网络安全面试题***


![](https://img-blog.csdnimg.cn/img_convert/6679c89ccd849f9504c48bb02882ef8d.png)








![](https://img-blog.csdnimg.cn/img_convert/07ce1a919614bde78921fb2f8ddf0c2f.png)





![](https://img-blog.csdnimg.cn/img_convert/44238619c3ba2d672b5b8dc4a529b01d.png)





内容实在太多，不一一截图了


### 黑客学习资源推荐


最后给大家分享一份全套的网络安全学习资料，给那些想学习 网络安全的小伙伴们一点帮助！


对于从来没有接触过网络安全的同学，我们帮你准备了详细的学习成长路线图。可以说是最科学最系统的学习路线，大家跟着这个大的方向学习准没问题。

#### 1️⃣零基础入门


##### ① 学习路线


对于从来没有接触过网络安全的同学，我们帮你准备了详细的**学习成长路线图**。可以说是**最科学最系统的学习路线**，大家跟着这个大的方向学习准没问题。


![image](https://img-blog.csdnimg.cn/img_convert/acb3c4714e29498573a58a3c79c775da.gif#pic_center)


##### ② 路线对应学习视频


同时每个成长路线对应的板块都有配套的视频提供：


![image-20231025112050764](https://img-blog.csdnimg.cn/874ad4fd3dbe4f6bb3bff17885655014.png#pic_center)