redis之主从复制、哨兵模式、群集模式

最新推荐文章于 2024-11-07 02:15:00 发布
最新推荐文章于 2024-11-07 02:15:00 发布
阅读量226 收藏
点赞数
分类专栏： 数据库 Redis 文章标签： 数据库 redis
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/shengmodizu/article/details/116598795
版权

文章目录

Redis主从复制

Redis主从复制的概念
  • 主从复制，是指将一台Redis服务器的数据，复制到其他的Redis服务器。
    前者称为主节点(Master)，后者称为从节点(Slave)；
    数据的复制是单向的，只能由主节点到从节点。
  • 默认情况下，每台Redis服务器都是主节点；
    一个主节点可以有多个从节点(或没有从节点)，但一个从节点只能有一个主节点。
Redis主从复制的作用
  • 数据冗余：主从复制实现了数据的热备份，是持久化之外的一种数据冗余方式。
  • 故障恢复：当主节点出现问题时，可以由从节点提供服务，实现快速的故障恢复；实际上是一种服务的冗余。
  • 负载均衡：在主从复制的基础上，配合读写分离，可以由主节点提供写服务，由从节点提供读服务（即写Redis数据时应用连接主节点，读Redis数据时应用连接从节点），分担服务器负载；尤其是在写少读多的场景下，通过多个从节点分担读负载，可以大大提高Redis服务器的并发量。
  • 高可用基石：除了上述作用以外，主从复制还是哨兵和集群能够实施的基础，因此说主从复制是Redis高可用的基础。
Redis主从复制的流程
  • 第一步：若启动一个Slave机器进程，则它会向Master机器发送一个“sync command”命令，请求同步连接。
  • 第二步：无论是第一次连接还是重新连接，Master机器都会启动一个后台进程，将数据快照保存到数据文件中（执行rdb操作），同时Master还会记录修改数据的所有命令并缓存在数据文件中。
  • 第三步：后台进程完成缓存操作之后，Maste机器就会向Slave机器发送数据文件，Slave端机器将数据文件保存到硬盘上，然后将其加载到内存中，接着Master机器就会将修改数据的所有操作一并发送给Slave端机器。若Slave出现故障导致宕机，则恢复正常后会自动重新连接。
  • 第四步：Master机器收到Slave端机器的连接后，将其完整的数据文件发送给Slave端机器，如果Mater同时收到多个Slave发来的同步请求，则Master会在后台启动一个进程以保存数据文件，然后将其发送给所有的Slave端机器，确保所有的Slave端机器都正常。
Redis主从复制的搭建

实验环境

主机操作系统IP地址安装包
MasterCentOS7192.168.249.10redis-5.0.7.tar.gz
Slave1CentOS7192.168.249.20redis-5.0.7.tar.gz
Slave2CentOS7192.168.249.30redis-5.0.7.tar.gz
安装Redis（所有主机）
systemctl stop firewalld
setenforce 0

yum install -y gcc gcc-c++ make
cd /opt
tar zxvf redis-5.0.7.tar.gz

cd /opt/redis-5.0.7/
make && make PREFIX=/usr/local/redis install

cd /opt/redis-5.0.7/utils
./install_server.sh
......
#回车四次后，手动输入，需要一次性输入正确
Please select the redis executable path [] /usr/local/redis/bin/redis-server  	

ln -s /usr/local/redis/bin/* /usr/local/bin/

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

修改Master节点Redis配置文件

Master：192.168.249.10

vim /etc/redis/6379.conf
#70行，修改bind 项，0.0.0.0监听所有网段
bind 0.0.0.0
#137行，开启守护进程
daemonize yes
#172行，指定日志文件目录
logfile /var/log/redis_6379.log
#264行，指定工作目录
dir /var/lib/redis/6379
#700行，开启AOF持久化功能
appendonly yes

/etc/init.d/redis_6379 restart

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

注；如果重启服务出现 (error) NOAUTH Authentication required 报错，请删除认证密码，即可重启成功

在这里插入图片描述

在这里插入图片描述

修改Slave节点Redis配置文件

Slave1：192.168.249.20
Slave2：192.168.249.30

vim /etc/redis/6379.conf
#70行，修改bind 项，0.0.0.0监听所有网卡
bind 0.0.0.0
#137行，开启守护进程
daemonize yes
#172行，指定日志文件目录
logfile /var/log/redis_6379.log
#264行，指定工作目录
dir /var/lib/redis/6379
#288行，指定要同步的Master节点IP和端口
replicaof 192.168.249.10 6379
#700行，开启AOF持久化功能
appendonly yes

/etc/init.d/redis_6379 restart

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

验证主从效果

Master：192.168.249.10

查看日志

tail -f /var/log/redis_6379.log

在这里插入图片描述

在Master节点上验证从节点

redis-cli info replication

在这里插入图片描述

Redis 哨兵模式

哨兵的核心功能：在主从复制的基础上，哨兵引入了主节点的自动故障转移

哨兵模式的原理

哨兵(sentinel)：是一个分布式系统，用于对主从结构中的每台服务器进行监控，当出现故障时通过投票机制选择新的 Master 并将所有 Slave 连接到新的 Master。所以整个运行哨兵的集群的数量不得少于3个节点。

哨兵模式的作用
  • 监控：哨兵会不断地检查主节点和从节点是否运作正常。
  • 自动故障转移：当主节点不能正常工作时，哨兵会开始自动故障转移操作，它会将失效主节点的其中一个从节点升级为新的主节点，并让其他从节点改为复制新的主节点。
  • 通知（提醒）：哨兵可以将故障转移的结果发送给客户端。
哨兵模式的结构

  • 哨兵结构由两部分组成，哨兵节点和数据节点：

    哨兵节点：哨兵系统由一个或多个哨兵节点组成，哨兵节点是特殊的redis节点，不存储数据。
    数据节点：主节点和从节点都是数据节点。

  • 哨兵的启动依赖于主从模式，所以须把主从模式安装好的情况下再去做哨兵模式，所有节点上都需要部署哨兵模式，哨兵模式会监控所有的 Redis 工作节点是否正常，当 Master 出现问题的时候，因为其他节点与主节点失去联系，因此会投票，投票过半就认为这个 Master 的确出现问题，然后会通知哨兵间，然后从 Slaves 中选取一个作为新的 Master。

注意：客观下线是主节点才有的概念；如果从节点和哨兵节点发生故障，被哨兵主观下线后，不会再有后续的客观下线和故障转移操作。

哨兵模式的搭建

实验环境

主机操作系统IP地址安装包
MasterCentOS7192.168.249.10redis-5.0.7.tar.gz
Slave1CentOS7192.168.249.20redis-5.0.7.tar.gz
Slave2CentOS7192.168.249.30redis-5.0.7.tar.gz
修改 Redis 配置文件（所有服务器）

Master：192.168.249.10
Slave1：192.168.249.20
Slave2：192.168.249.30

vim /opt/redis-5.0.7/sentinel.conf
#17行，关闭保护模式
protected-mode no
#21行，Redis哨兵默认的监听端口
port 26379
#26行，指定sentinel为后台启动
daemonize yes
#36行，指定日志存放路径
logfile "/var/log/sentinel.log"
#65行，指定数据库存放路径
dir "/var/lib/redis/6379"
#84行，修改 指定该哨兵节点监控192.168.249.10:6379这个主节点，该主节点的名称是mymaster，最后的2的含义与主节点的故障判定有关：至少需要2个哨兵节点同意，才能判定主节点故障并进行故障转移
sentinel monitor mymaster 192.168.249.10 6379 2
#113行，判定服务器down掉的时间周期，默认30000毫秒（30秒）
sentinel down-after-milliseconds mymaster 30000
#146行，故障节点的最大超时时间为180000（180秒）
sentinel failover-timeout mymaster 180000

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

启动哨兵模式

Master：192.168.249.10
Slave1：192.168.249.20
Slave2：192.168.249.30

先启master，再启slave

cd /opt/redis-5.0.7/
redis-sentinel sentinel.conf &

主节点：

在这里插入图片描述

从节点：

在这里插入图片描述

在这里插入图片描述

查看哨兵模式信息

Master：192.168.249.10

redis-cli -p 26379 info Sentinel

在这里插入图片描述

故障模拟

Master：192.168.249.10

#查看redis-server进程号
ps aux | grep redis
#杀死 Master 节点上redis-server的进程号，模拟故障
kill -9 46451			#Master节点上redis-server的进程号

在这里插入图片描述

验证结果

Master：192.168.249.10

tail -f /var/log/sentinel.log
redis-cli -p 26379 INFO Sentinel

在这里插入图片描述

Redis 群集模式

redis群集的概念
  • 集群，即Redis Cluster，是Redis 3.0开始引入的分布式存储方案。
  • 集群由多个节点(Node)组成，Redis的数据分布在这些节点中。集群中的节点分为主节点和从节点：只有主节点负责读写请求和集群信息的维护；从节点只进行主节点数据和状态信息的复制。
集群的作用

数据分区

  • 数据分区(或称数据分片)是集群最核心的功能。
  • 集群将数据分散到多个节点，一方面突破了Redis单机内存大小的限制，存储容量大大增加；另一方面每个主节点都可以对外提供读服务和写服务，大大提高了集群的响应能力。
  • Redis单机内存大小受限问题，在介绍持久化和主从复制时都有提及；例如，如果单机内存太大，bgsave和bgrewriteaof的fork操作可能导致主进程阻塞，主从环境下主机切换时可能导致从节点长时间无法提供服务，全量复制阶段主节点的复制缓冲区可能溢出。

高可用

  • 集群支持主从复制和主节点的自动故障转移（与哨兵类似）；当任一节点发生故障时，集群仍然可以对外提供服务。
Redis集群的数据分片

  • Redis集群引入了哈希槽的概念
    Redis集群有16384个哈希槽（编号0-16383）
    集群的每个节点负责一部分哈希槽
    每个Key通过CRC16校验后对16384取余来决定放置哪个哈希槽，通过这个值，去找到对应的插槽所对应的节点，然后直接自动跳转到这个对应的节点上进行存取操作

  • 以3个节点组成的集群为例
    节点A包含0到5460号哈希槽
    节点B包含5461到10922号哈希槽
    节点C包含10923到16383号哈希槽

  • Redis集群的主从复制模型
    集群中具有A、B、C三个节点，如果节点B失败了，整个集群就会因缺少5461-10922这个范围的槽而不可以用。
    为每个节点添加一个从节点A1、B1、C1整个集群便有三个Master节点和三个slave节点组成，在节点B失败后，集群选举B1位为的主节点继续服务。当B和B1都失败后，集群将不可用

搭建Redis 群集模式

redis的集群一般需要6个节点，3主3从。

主机操作系统IP：端口安装包
Master1CentOS7192.168.249.10:6371redis-5.0.7.tar.gz
Master2CentOS7192.168.249.20:6372redis-5.0.7.tar.gz
Master3CentOS7192.168.249.30:6373redis-5.0.7.tar.gz
Slave1CentOS7192.168.249.40:6374redis-5.0.7.tar.gz
Slave2CentOS7192.168.249.50:6375redis-5.0.7.tar.gz
Slave3CentOS7192.168.249.60:6376redis-5.0.7.tar.gz
创建并复制相关文件

所有节点都要做

#创建文件，文件名要根据端口创建，方便区别
cd /etc/redis/
mkdir -p redis-cluster/redis6371 
cp /opt/redis-5.0.7/redis.conf /etc/redis/redis-cluster/redis6371/
cp /opt/redis-5.0.7/src/redis-cli /opt/redis-5.0.7/src/redis-server /etc/redis/redis-cluster/redis6371/

在这里插入图片描述

修改配置文件，开启群集功能

所有节点都做，可先设置一个节点

cd /etc/redis/redis-cluster/redis6371
vim redis.conf
#69行，修改bind项，监听自己的IP
bind 192.168.249.10
#88行，修改，关闭保护模式
protected-mode no
#92行，修改，redis监听端口
port 6371
#136行，以独立进程启动
daemonize yes
#699行，修改，开启AOF持久化
appendonly yes
#832行，取消注释，开启群集功能
cluster-enabled yes
#840行，取消注释，修改，群集名称文件设置
cluster-config-file nodes-6371.conf
#846行，取消注释，群集超时时间设置
cluster-node-timeout 15000

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

将配置好的文件复制到其它服务器

scp /etc/redis/redis-cluster/redis6371/redis.conf root@192.168.249.20:/etc/redis/redis-cluster/redis6372/redis.conf
scp /etc/redis/redis-cluster/redis6371/redis.conf root@192.168.249.30:/etc/redis/redis-cluster/redis6373/redis.conf
scp /etc/redis/redis-cluster/redis6371/redis.conf root@192.168.249.40:/etc/redis/redis-cluster/redis6374/redis.conf
scp /etc/redis/redis-cluster/redis6371/redis.conf root@192.168.249.50:/etc/redis/redis-cluster/redis6375/redis.conf
scp /etc/redis/redis-cluster/redis6371/redis.conf root@192.168.249.60:/etc/redis/redis-cluster/redis6376/redis.conf

在这里插入图片描述

其它服务器

cd /etc/redis/redis-cluster/redis6372
vim redis.conf
#69行，修改bind项，监听自己的IP
bind 192.168.249.20
#92行，修改，redis监听端口
port 6372
#840行，取消注释，修改，群集名称文件设置
cluster-config-file nodes-6372.conf

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

启动redis节点

所有节点执行

#每台服务器进入对应的文件中，执行命令
cd /etc/redis/redis-cluster/redis6371/
redis-server redis.conf

ps -ef |  grep redis

在这里插入图片描述

启动集群

Master1 192.168.249.10:6371

redis-cli --cluster create 192.168.249.10:6371 192.168.249.20:6372 192.168.249.30:6373 192.168.249.40:6374 192.168.249.50:6375 192.168.249.60:6376 --cluster-replicas 1

在这里插入图片描述

在这里插入图片描述

测试群集
redis-cli -h 192.168.249.10 -p 6371 -c   #加-c参数，节点之间就可以互相跳转	
cluster slots			#查看节点的哈希槽编号范围
set test lisi
cluster keyslot test	#查看name键的槽编号

在这里插入图片描述

Redis（主从复制、哨兵模式、集群）概述及部署
愿你成为自己喜欢的模样，不抱怨，不将就，有自由，有光芒！
02-25 3272
文章目录一、Redis主从复制1、Redis主从复制的概念2、Redis主从复制的作用3、Redis主从复制的流程4、Redis主从复制的搭建1、环境配置/安装包2、安装Redis（所有主机）3、修改Master节点Redis配置文件4、修改Slave节点Redis配置文件5、验证主从效果二、Redis 哨兵模式1、哨兵模式的原理2、哨兵模式的作用3、哨兵模式的结构4、哨兵模式的搭建1、环境配置2、修改 Redis 配置文件（所有节点操作）2、启动哨兵模式3、故障模拟4、验证结果三、Redis 群集模式1、
redis—主从，哨兵，集群
且将&的博客
12-11 817
redis—主从，哨兵，集群
redis的高可用（主从复制、哨兵、集群）
芦苇的博客
07-14 851
内容概要一、Redis主从复制1、Redis主从复制的概念2、Redis主从复制的作用3、Redis主从复制的流程4、Redis主从复制的搭建（1）安装Redis（所有主机）（2）修改Master节点Redis配置文件（3）修改Slave节点Redis配置文件（4）验证主从效果二、Redis 哨兵模式1、哨兵模式的原理2、哨兵模式的作用3、哨兵模式的结构4、哨兵模式的搭建（1）修改 Redis 哨兵配置文件（所有节点操作）（2）启动哨兵模式（3）查看哨兵模式信息（4）故障模拟（5）验证结果三、Redis 群
Redis三种模式——主从复制，哨兵模式，集群
qq_64333664的博客
11-11 498
主从复制，是指将一台Redis服务器的数据，复制到其他的Redis服务器。前者称之为主节点，后者称之为从节点；数据的复制是单向的，只能从主节点到从节点。 默认情况下，每台Redis服务器都是主节点；且一个主节点可以有多个从节点（或没有从节点），但一个从节点只能有一个主节点。1、数据冗余：主从复制实现了数据的热备份，是持久化之外的数据冗余方式。2、故障恢复：当主节点出现问题时，可以由从节点提供服务，实现快速的故障恢复；实际上是一种服务的冗余。3、负载均衡：在主从复制的基础上，配合读写分离，可以由主节
【Redis】三种集群模式（主从复制、哨兵模式、Cluster）
weixin_40381772的博客
01-19 4886
redis有三种集群模式，其中主从是最常见的模式。Sentinel 哨兵模式是为了弥补主从复制集群中主机宕机后，主备切换的复杂性而演变出来的。哨兵顾名思义，就是用来监控的，主要作用就是监控主从集群，自动切换主备，完成集群故障转移。cluster 模式是redis官方提供的集群模式，使用了Sharding 技术，不仅实现了高可用、读写分离、也实现了真正的分布式存储。
Redis集群模式
Ysuhang的博客
08-02 5855
redis单机版，出现单机故障后，导致redis无法使用，如果程序使用redis，间接导致程序出错。redis的集群模式主从复制模式哨兵模式集群化模式。
Redis主从复制，哨兵模式，集群模式
鸡汤的博客
06-19 508
主从复制，是指将一台Redis服务器的数据，复制到其他的Redis服务器。前者称为主节点(Master) ,后者称为从节点(slave);数据的复制是单向的，只能由主节点到从节点默认情况下，每台Redis服务器都是主节点;且一个主节点可以有多个从节点(或没有从节点)，但一个从节点只能有一个主节点数据冗余:主从复制实现了数据的热备份，是持久化之外的一种数据冗余方式故障恢复:当主节点出现问题时，可以由从节点提供服务，实现快速的故障恢复;实际上是一种服务的冗余负载均衡:在主从复制的基础上，配合读写分离，可以由主节
【数据库】Redis主从复制、哨兵模式、集群
云计算稿手的博客
07-10 980
Redis的主从复制、哨兵模式、集群介绍
Redis(性能管理、主从复制、哨兵模式)概述及部署
AH99999的博客
04-05 1850
redis主从复制 是为了数据冗余和读写分离在这两种模式中，有两种角色主节点（master）和从节点（slave），主节点负责处理写的操作并将数据更改复制到一个或多个从节点。这样我们的主节点负载减轻，从节点可以提供数据读取服务，实现读写分离，如果主节点停止服务，从节点之一可以立即接管主节点的角色，再继续提供服务从节点启动成功连接主节点后，发送一个sync命令主节点接受到sync的命令后开始在后台保存快照，同时,它也开始记录接收到rsnc后所有执行写的命令，快照完成后会将这个快照文件发送给从节点。
搭建Redis主从复制、哨兵、集群模式
weixin_72753070的博客
07-23 327
首先单节点Redis服务器会带来单点故障，服务不可用，其次由于Redis默认是单进程，无法处理大量的并发数据请求，那么若是开启多进程又会导致cpu压力过大，重中之重的是数据丢失是一大灾难，为了避免以上情况，需要Redis服务器数量，但是增加服务器数据并不是单一的增加，需要搭建Redis集群模式，从而共享任务/资源。Redis集群是一个提供在多个Redis间节点间共享数据的程序集主从同步/复制哨兵模式Cluster。...
Redis的集群模式
测试
12-07 340
Redis的集群搭建 ： 集群即使使用哨兵，此时的Redis集群的每个数据库依然存有集群中的所有数据，从而导致集群的总数据存储量受限于可用存储内存最小的数据库节点，形成木桶效应。由于Redis中的所有数据都是基于内存存储，这一问题就尤为突出了尤其是当使用Redis做持久化存储服务使用时。对Redis进行水平扩容，在旧版Redis中通常使用...
redis集群模式
qq_44189274的博客
08-01 311
redis的三种模式: 1.主从复制模式 2.哨兵模式 3.集群化模式
Redis三种集群模式：主从模式、哨兵模式和Cluster模式
无休居士的博客
11-07 3072
Redis 支持三种不同的集群模式：主从模式、哨兵模式和Cluster模式，各具特色，应对不同的应用场景。初始阶段，Redis 采用主从模式进行集群构建。在此模式中，主节点（master）负责数据写入，而从节点（slave）则用于数据读取和备份。若主节点发生故障，需人工介入，将某个从节点提升为新的主节点。但这种模式在故障恢复上效率较低，无法实现高度自动化。为了提升系统的高可用性，Redis 推出了哨兵模式。在此模式下，通过一个哨兵集群来监控主从节点的健康状态。
Another RDM链接redis哨兵模式
最新发布
02-20
Another RDM是一款用于管理多种数据库的图形化工具，支持Redis、MySQL等多种数据存储系统。当涉及到连接采用哨兵模式部署的Redis集群时，其配置和普通单机版或主从复制模式有所不同。 ### Redis哨兵模式简介 Redis Sentinel（哨兵）提供了一种高可用性的解决方案，它通过监控多个Redis实例的状态，并自动处理故障转移来保证系统的稳定运行。一个典型的哨兵架构包括： - **一组Redis节点**：通常由三个以上奇数个组成，可以包含Master（主服务器）、Slave（从服务器），其中Master负责读写操作而Slaves则只接受来自Master的数据同步。 - **若干Sentinel进程**：它们会持续监视所有Master与Slaves以及其它Sentine实例的工作状况，一旦发现某个Master出现问题无法正常工作，则触发选举机制选择新的Master并完成切换。 ### 使用Another RDM链接到哨兵模式下的Redis步骤 1. **安装配置Another RDM软件** - 确保已经成功下载并且安装了最新版本的应用程序；访问[官方网址](https://www.another-rdm.com/)获取更多信息及帮助文档。 2. **添加新连接** 打开Another RDM界面，在“File”菜单下选择`Add Connection...`(或者点击界面上对应的图标)。 3. **设置基本参数** 在弹出窗口内找到Redis选项卡，输入以下必要信息： - `Connection Name`: 给这个特定连接起个名字以便日后识别； - `Host(s)/IP Address(es)` : 列表形式填入各个参与哨兵投票决策过程的主机地址(例如："sentinel0.example.com,sentinel1.example.com,...") ; - `Port Number`: 默认情况下哨兵监听的是26379端口而不是标准客户端交互使用的6379，默认不需要更改除非有特殊需求; > 提示: 如果不确定具体数值，请参考目标环境的实际设定值。 4. **认证及其他高级特性配置**(如适用) 根据实际情况填写密码等验证信息以及其他非必需但可能需要调整的相关属性。这取决于具体的业务场景和个人偏好。 5. **测试并保存配置** 完成上述所有项目之后尝试建立一次初步通信以确认无误——如果一切顺利的话就可以放心地将此记录储存下来啦！ 请注意，每个哨兵实例都需要能够互相通讯才能有效地维护整个群集健康状态的信息共享。此外，为了提高可靠性建议尽量避免在生产环境中使用默认网络配置项以外的内容做实验性质的功能探索。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值