Redis集群三种搭建模式
主从搭建
Sentinel模式
Cluster模式(这篇博客的主要内容分片式集群)
三种集群各有特点
关于Redis介绍可以看这里面点击进入查看redis介绍等等…
简单讲解下三种模式
主从模式
主从模式是三种模式中最简单的,在主从复制中,数据库分为两类:主数据库(master)和从数据库(slave)。
其中主从复制有如下特点:
* 主数据库可以进行读写操作,当读写操作导致数据变化时会自动将数据同步给从数据库
* 从数据库一般都是只读的,并且接收主数据库同步过来的数据
* 一个master可以拥有多个slave,但是一个slave只能对应一个master
* slave挂了不影响其他slave的读和master的读和写,重新启动后会将数据从master同步过来
* master挂了以后,不影响slave的读,但redis不再提供写服务,master重启后redis将重新对外提供写服务
* master挂了以后,不会在slave节点中重新选一个master
工作机制:
当slave启动后,主动向master发送SYNC命令。master接收到SYNC命令后在后台保存快照(RDB持久化)和缓存保存快照这段时间的命令,然后将保存的快照文件和缓存的命令发送给slave。slave接收到快照文件和命令后加载快照文件和缓存的执行命令。
复制初始化后,master每次接收到的写命令都会同步发送给slave,保证主从数据一致性。
安全设置:
当master节点设置密码后,
客户端访问master需要密码
启动slave需要密码,在配置文件中配置即可
客户端访问slave不需要密码
缺点:
从上面可以看出,master节点在主从模式中唯一,若master挂掉,则redis无法对外提供写服务。
主从哨兵模式
主从模式的弊端就是不具备高可用性,当master挂掉以后,Redis将不能再对外提供写入操作,因此sentinel应运而生。
sentinel中文含义为哨兵,顾名思义,它的作用就是监控redis集群的运行状况,特点如下:
* sentinel模式是建立在主从模式的基础上,如果只有一个Redis节点,sentinel就没有任何意义
* 当master挂了以后,sentinel会在slave中选择一个做为master,并修改它们的配置文件,其他slave的配置文件也会被修改,比如slaveof属性会指向新的master
* 当master重新启动后,它将不再是master而是做为slave接收新的master的同步数据
* sentinel因为也是一个进程有挂掉的可能,所以sentinel也会启动多个形成一个sentinel集群
* 多sentinel配置的时候,sentinel之间也会自动监控
* 当主从模式配置密码时,sentinel也会同步将配置信息修改到配置文件中,不需要担心
* 一个sentinel或sentinel集群可以管理多个主从Redis,多个sentinel也可以监控同一个redis
* sentinel最好不要和Redis部署在同一台机器,不然Redis的服务器挂了以后,sentinel也挂了
工作机制:
* 每个sentinel以每秒钟一次的频率向它所知的master,slave以及其他sentinel实例发送一个 PING 命令
* 如果一个实例距离最后一次有效回复 PING 命令的时间超过 down-after-milliseconds 选项所指定的值, 则这个实例会被sentinel标记为主观下线。
* 如果一个master被标记为主观下线,则正在监视这个master的所有sentinel要以每秒一次的频率确认master的确进入了主观下线状态
* 当有足够数量的sentinel(大于等于配置文件指定的值)在指定的时间范围内确认master的确进入了主观下线状态, 则master会被标记为客观下线
* 在一般情况下, 每个sentinel会以每 10 秒一次的频率向它已知的所有master,slave发送 INFO 命令
* 当master被sentinel标记为客观下线时,sentinel向下线的master的所有slave发送 INFO 命令的频率会从 10 秒一次改为 1 秒一次
* 若没有足够数量的sentinel同意master已经下线,master的客观下线状态就会被移除;
若master重新向sentinel的 PING 命令返回有效回复,master的主观下线状态就会被移除
当使用sentinel模式的时候,客户端就不要直接连接Redis,而是连接sentinel的ip和port,由sentinel来提供具体的可提供服务的Redis实现,这样当master节点挂掉以后,sentinel就会感知并将新的master节点提供给使用者。
Cluster集群
sentinel模式基本可以满足一般生产的需求,具备高可用性。但是当数据量过大到一台服务器存放不下的情况时,主从模式或sentinel模式就不能满足需求了,这个时候需要对存储的数据进行分片,将数据存储到多个Redis实例中。cluster模式的出现就是为了解决单机Redis容量有限的问题,将Redis的数据根据一定的规则分配到多台机器。
cluster可以说是sentinel和主从模式的结合体,通过cluster可以实现主从和master重选功能,所以如果配置两个副本三个分片的话,就需要六个Redis实例。因为Redis的数据是根据一定规则分配到cluster的不同机器的,当数据量过大时,可以新增机器进行扩容。
cluster集群特点:
* 多个redis节点网络互联,数据共享
* 所有的节点都是一主一从(也可以是一主多从),其中从不提供服务,仅作为备用
* 不支持同时处理多个key(如MSET/MGET),因为redis需要把key均匀分布在各个节点上,
并发量很高的情况下同时创建key-value会降低性能并导致不可预测的行为
* 支持在线增加、删除节点
* 客户端可以连接任何一个主节点进行读写
Cluster环境搭建
首先最起码的是单机版的redis是要搭建好的(上面博客里面有怎么搭建)
本人单机redis目录 /root/onlyK/redis-5.0.2
需要创建一个目录用来存放我们所有的集群文件夹
mkdir redis-cluster
cd redis-cluster
mkdir 7001 7002 7003 7004 7005 7006
复制一份配置文件进去到7001里面
###复制redis.conf到7001目录下并命名为redis-7001.conf (同样复制6份)
cp /root/onlyK/redis-5.0.2/redis.conf /root/onlyK/redis-cluster/7001/redis-7001.conf
然后修改配置文件,要修改的地方都在下面了
#修改redis-7001.conf相关参数,模板如下:
#1 绑定端口号
port 7001
#2 注释掉,这样任何桌面客户端都可以连接了
#bind 192.168.1.100 10.0.0.1
#3 指定文件存放路径(.rdb .aof nodes-xxxx.conf等文件都会在此路径下)
dir /root/onlyK/redis-cluster/7001
#4 开启redis-cluster集群
cluster-enabled yes
#5 后台启动
daemonize yes
#6 指定集群节点超时时间
cluster-node-timeout 500
#7 每个实例还包含存储此节点配置的文件的路径,默认情况下为nodes.conf,为redis-server进程自动维护,不能手工修改
cluster-config-file nodes_7001.conf
#8 指定持久化方式
appendonly yes
# 非保护模式,不然远程还是连接不了
protected-mode no
执行命名服务
./src/redis-server …/redis-cluster/7002/redis-7002.conf
但是目前还是单机节点,不能够信息共通
ps -ef | grep redis #查看redis启动情况
netstat -tnlp | grep redis #查看redis端口开启情况
启动集群
./src/redis-cli --cluster create 140.143.242.67:7001 140.143.242.67:7002 140.143.242.67:7003 140.143.242.67:7004 140.143.242.67:7005 140.143.242.67:7006 --cluster-replicas 1 -a 123456
中途输入yes
后面要带上redis的密码,不然会报错[ERR] Node 140.143.242.67:7001 NOAUTH Authentication required. 大致意思就是未授权
报错信息解决方案:
[ERR] Node 140.143.242.67:7001 is not empty. Either the node already knows other nodes (check with CLUSTER NODES) or contains some key in database 0.
解决方案:全什么乱七八糟东西删除掉重写搭建,可能是前面搭建失败导致