redis集群

最新推荐文章于 2024-10-26 20:12:04 发布
最新推荐文章于 2024-10-26 20:12:04 发布
阅读量321 收藏
点赞数
分类专栏： redis
本文介绍Redis集群的搭建过程及如何进行节点的增删操作。包括集群原理、部署步骤、添加及删除节点的方法。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

redis学习笔记---redis集群

    redis集群是一个可以在多个节点之间进行数据共享的设施，redis集群提供如下两个好处 
     1：将数据自动切分(split)到多个节点
 2：当集群中的某一个节点故障时，redis还可以继续处理客户端的请求。
 一个 Redis 集群包含 16384 个哈希槽（hash slot），数据库中的每个数据都属于这16384个哈希槽中的一个。集群使用公式 CRC16(key) % 16384 来计算键 key 属于哪个槽。集群中的每一个节点负责处理一部分哈希槽。
 集群中的主从复制
 集群中的每个节点都有1个至N个复制品，其中一个为主节点，其余的为从节点，如果主节点下线了，集群就会把这个主节点的一个从节点设置为新的主节点，继续工作。这样集群就不会因为一个主节点的下线而无法正常工作。
 注意：如果某一个主节点和他所有的从节点都下线的话，redis集群就会停止工作了。
 redis集群不保证数据的强一致性，在特定的情况下，redis集群会丢失已经被执行过的写命令
 使用异步复制（asynchronous replication）是 Redis 集群可能会丢失写命令的其中一个原因
 网络原因，如果网络断开时间太长，redis集群就会启用新的主节点，之前发给主节点的数据就会丢失。
      

二、Redis3.0集群部署

（要让集群正常工作至少需要3个主节点，在这里我们要创建6个redis节点，其中三个为主节点，三个为从节点，对应的redis节点的ip和端口对应关系如下）

192.168.1.160:7000
192.168.1.160:7001

192.168.1.160:7002

192.168.1.160:7003

192.168.1.160:7004

192.168.1.160:7005

 

1：下载redis。官网下载3.0.0版本，之前2.几的版本不支持集群模式

下载地址：http://download.redis.io/releases/redis-3.0.0.tar.gz

2：上传服务器，解压，编译

tar -zxvf redis-3.0.0.tar.gz

mv redis-3.0.0.tar.gz redis3.0

cd /usr/local/redis3.0

make

make install

3：创建集群需要的目录

mkdir -p /usr/local/cluster

cd /usr/local/cluster

mkdir 7000

mkdir 7001

mkdir 7002

mkdir 7003

mkdir 7004

mkdir 7005

 

4：修改配置文件redis.conf

cp /usr/local/redis3.0/redis.conf  /usr.local/cluster

vi redis.conf

##修改配置文件中的下面选项

port 7000

daemonize yes

cluster-enabled yes

cluster-config-file nodes.conf

cluster-node-timeout 5000

appendonly yes

##修改完redis.conf配置文件中的这些配置项之后把这个配置文件分别拷贝到7000/7001/7002/7003/7004/7005目录下面

cp /usr/local/cluster/redis.conf /usr/local/cluster/7000

cp /usr/local/cluster/redis.conf /usr/local/cluster/7001

cp /usr/local/cluster/redis.conf /usr/local/cluster/7002

cp /usr/local/cluster/redis.conf /usr/local/cluster/7003

cp /usr/local/cluster/redis.conf /usr/local/cluster/7004

cp /usr/local/cluster/redis.conf /usr/local/cluster/7005

 

##注意：拷贝完成之后要修改7001/7002/7003/7004/7005目录下面redis.conf文件中的port参数，分别改为对应的文件夹的名称

 

5：分别启动这6个redis实例

cd /usr/local/cluster/7000

redis-server redis.conf

cd /usr/local/cluster/7001

redis-server redis.conf

cd /usr/local/cluster/7002

redis-server redis.conf

cd /usr/local/cluster/7003

redis-server redis.conf

cd /usr/local/cluster/7004

redis-server redis.conf

cd /usr/local/cluster/7005

redis-server redis.conf

 

 

##启动之后使用命令查看redis的启动情况ps -ef|grep redis

如下图显示则说明启动成功


6：执行redis的创建集群命令创建集群

cd /usr/local/redis3.0/src

./redis-trib.rb  create --replicas 1 192.168.1.160:7000 192.168.1.160:7001 192.168.1.160:7002 192.168.1.160:7003 192.168.1.160:7004 192.168.1.160:7005

6.1执行上面的命令的时候可能会报错，因为是执行的ruby的脚本，需要ruby的环境

错误内容：/usr/bin/env: ruby: No such file or directory

所以需要安装ruby的环境，这里推荐使用yum install ruby安装

yum install ruby

 

6.2然后再执行第6步的创建集群命令，可能还会报错，提示缺少rubygems组件，使用yum安装

 

错误内容：

./redis-trib.rb:24:in `require': no such file to load -- rubygems (LoadError)

       from ./redis-trib.rb:24

yum install rubygems

6.3再次执行第6步的命令，可能还会报错，提示不能加载redis，是因为缺少redis和ruby的接口，使用gem 安装

错误内容：

/usr/lib/ruby/site_ruby/1.8/rubygems/custom_require.rb:31:in `gem_original_require': no such file to load -- redis (LoadError)

       from /usr/lib/ruby/site_ruby/1.8/rubygems/custom_require.rb:31:in `require'

       from ./redis-trib.rb:25

 

gem install redis

 

6.4 再次执行第6步的命令，正常执行


输入yes，然后配置完成。


至此redis集群即搭建成功！

7：使用redis-cli命令进入集群环境

redis-cli -c -p 7000

 

 

 

Redis3.0集群添加节点

1：首先把需要添加的节点启动

cd /usr/local/cluster/

mkdir 7006

cp /usr/local/cluster/redis.conf  /usr/local/cluster/7006/

cd /usr/local/cluster/7006/

vi redis.conf

##修改redis.conf中的port参数的值为7006

redis-server redis.conf

2：执行以下命令，将这个新节点添加到集群中

cd /usr/local/redis3.0/src/

./redis-trib.rb add-node 192.168.1.160:7006 192.168.1.160:7000

 

3：执行命令redis-cli -c -p 7000 cluster nodes，查看刚才新增的节点


4：增加了新的节点之后，这个新的节点可以成为主节点或者是从节点

4.1 把这个节点变成主节点，使用redis-trib程序，将集群中的某些哈希槽移动到新节点里面，    这个新节点就成为真正的主节点了。

执行下面的命令对集群中的哈希槽进行移动

cd /usr/local/redis3.0/src

./redis-trib.rb reshard 192.168.1.160:7000

系统会提示我们要移动多少哈希槽，这里移动1000个


然后还需要指定把这些哈希槽转移到哪个节点上，


输入我们刚才新增的节点的ID

f32dc088c881a6b930474fc5b52832ba2ff71899

然后需要我们指定转移哪几个几点的哈希槽


输入all 表示从所有的主节点中随机转移，凑够1000个哈希槽

然后再输入yes，redis集群就开始分配哈希槽了。

至此，一个新的主节点就添加完成了，执行命令查看现在的集群中节点的状态

redis-cli -c -p 7000 cluster nodes

 

 

4.2：把这个节点变成从节点

前面我们已经把这个新节点添加到集群中了，现在我们要让新节点成为192.168.1.160:7001的从节点，只需要执行下面的命令就可以了，命令后面的节点ID就是192.168.1.160:7001的节点ID

redis-cli -c -p 7006 cluster replicate 0b00721a509444db793d28448d8f02168b94bd38

使用下面命令来确认一下192.168.1.160:7006是否已经成为192.168.1.160:7001的从节点

 redis-cli -p 7000 cluster nodes | grep slave | grep 0b00721a509444db793d28448d8f02168b94bd38

看到下面图片中的情况就表示添加成功

 

 

Redis3.0集群删除节点

1：如果删除的节点是主节点，这里我们删除192.168.1.160:7006节点，这个节点有1000个哈希槽

首先要把节点中的哈希槽转移到其他节点中，执行下面的命令

cd /usr/local/redis3.0/src

./redis-trib.rb reshard 192.168.1.160:7000

系统会提示我们要移动多少哈希槽，这里移动1000个，因为192.168.1.160:7006节点有1000个哈希槽

然后系统提示我们输入要接收这些哈希槽的节点的ID，这里使用192.168.1.160:7001的节点ID

然后要我们选择从那些节点中转出哈希槽，这里一定要输入192.168.1.160:7006这个节点的ID，最后输入 done  表示输入完毕

最后一步，使用下面的命令把这个节点删除

cd /usr/local/redis3.0/src/

./redis-trib.rb del-node 192.168.1.160:7000  需要删除的节点ID

2：如果节点是从节点的，直接使用下面的命令删除即可。

cd /usr/local/redis3.0/src/

./redis-trib.rb del-node 192.168.1.160:7000 需要删除的节点ID

 

Redis集群弱/空密码问题整改
11-15
使用redis安装用户，在命令行连接上redis集群后，执行命令：config set requirepass 【自定义的强密码】，如： config set requirepass mypassword@#75@~ 然后执行 config rewrite 将配置密码持久化到redis配置文件...
redis学习笔记---redis集群
weixin_33924770的博客
12-16 120
2019独角兽企业重金招聘Python工程师标准>>> ...
redis5集群搭建步骤
huan的学习记录
02-13 3655
通常情况下为了redis的高可用，我们一般不会使用redis的单实例去运行，一般都会搭建一个 redis 的集群去运行。此处记录一下 redis5 以后 cluster 集群的搭建。 一、需求 redis5的安装 搭建一个3主3从的集群 动态的往集群中增加节点  |- 增加一个主节点  |- 增加一个从节点 动态的从集群中删除节点  |- 删除一个从节点  |- 删除...
Redis 集群方式
qq_51678989的博客
08-12 5116
集群，即 Redis cluster， 是 Redis 3.0开始引入的分布式存储方案。集群由多个节点(Node)组成，Redis 的数据分布在这些节点中。集群中的节点分为主节点和从节点;只有主节点负责读写请求和集群信息的维护;从节点只进行主节点数据和状态信息的复制。
Redis集群详解
热门推荐
怪咖@的博客
06-26 2万+
在了解Redis集群之前尽量先了解清楚Redis的主从复制和哨兵机制。读写分离，性能扩展，降低主服务器的压力容灾，快速恢复，主机挂掉时，从机变为主机Redis 主从模式不具备自动容错和恢复功能，如果主节点宕机，Redis 集群将无法工作，此时需要人为干预，将从节点提升为主节点。哨兵机制作用主要是监控主从节点，当主节点挂掉，通过内部投票机制，从 从节点当中选出一个主节点，这样可以避免人工成本。虽然主从+哨兵采用了多节点，但是他们存在的目的主要是解决容灾问题，而并非性能问题。
redis集群配置
QAZ412803的博客
10-26 2727
主从复制是将一台Redis服务器的数据复制到其他Redis服务器，前者叫master/leader主节点，后者成为从节点slave/follower，数据库的复制是单项的，只能由主–>从，master以写为主，slave以读为主，利用主从复制实现读写分离，最低配的主从复制也需要一主二从。主从复制中，从节点只能进行读操作，如果在从节点执行写命令则会报错，主节点可以执行读写操作，但我们网网规定主节点只能进行写操作，这样也是符合了读写分离；默认情况下，每个Redis服务器都为主节点，即master。
Redis集群
2301_80613136的博客
09-14 2858
（1） 数据分区（数据分片）（2）高可用3.2Redis集群的数据分片(1)假设集群有三个节点组成，各个节点哈希槽范围是：3.3Redis集群中主从复制模型故障。
Redis 集群搭建
菜鸟一枚,对云原生感兴趣
07-23 3183
使用 Redis 集群进行扩展 |文档请注意，按预期工作的小集群必须包含 至少三个主节点。对于部署，我们强烈建议 一个六节点集群，包含三个主节点和三个副本。三台服务器各部署一个主节点、一个从节点，同一台服务器上不是直接主从关系。操作系统Centos 7Centos 7Centos 7内核版本主机名称node-01node-02node-03角色IP地址Redis7.2.57.2.57.2.5。
Redis集群篇
蓝影铁哥的博客
07-08 2115
Redis集群
redis集群设置
大道至简，持之以恒！
03-25 2736
目录 一、背景 二、集群中的主从复制 三、部署redis集群 1、环境搭建 2、集群结点规划 四、 部署结果验证 五、注意事项 一、背景 1、redis的主从和mysql很像，但是配置很简单。slaveof 192.168.80.126 6379然后启动主从便可以了。 但是如果redis主节点发生故障，不会自动切换，需要借助redis的sentinel或者keepalive来实现主的故障转移。（故而可以使用Sentinel来做redis的集群） 2、redis集群是一个
zabbix监控redis集群
03-25
本文将详细讲解如何使用Zabbix监控Redis集群，包括Zabbix服务器的安装、Redis集群的部署以及监控脚本的编写。 首先，我们要准备Redis服务器。在Linux环境中，通常使用`yum`命令来安装Redis。在遇到`yum install ...
Redis集群数据迁移操作文档
06-29
《Redis集群数据迁移实战指南》 在IT领域，数据迁移是一项关键任务，特别是在使用Redis这样的高性能内存数据库时。本文将详细介绍如何进行Redis集群的数据迁移，包括全量和增量数据迁移，以及离线迁移的方法，主要...
redis集群批量插入
11-23
本文将详细讨论如何在Java环境下连接Redis集群并实现批量插入String类型的数据。 首先，我们需要理解Redis集群的基本概念。Redis集群是通过分片（Sharding）技术来分散数据到多个节点，每个节点存储一部分数据。在...
Redis集群下过期key监听的实现代码
09-09
在讨论Redis集群下过期key监听的实现代码之前，首先需要明确几个核心概念和组件： Redis集群是Redis的一种高可用性解决方案，它通过将数据分布在不同的Redis节点上，并提供一定机制保证数据的复制和高可用性。集群...
【嵌入式系统】基于STM32的步进电机精准运动控制：硬件搭建、代码实现及性能优化
最新发布
07-24
内容概要：本文详细介绍了如何使用STM32微控制器精确控制步进电机，涵盖了从原理到代码实现的全过程。首先，解释了步进电机的工作原理，包括定子、转子的构造及其通过脉冲信号控制转动的方式。接着，介绍了STM32的基本原理及其通过GPIO端口输出控制信号，配合驱动器芯片放大信号以驱动电机运转的方法。文中还详细描述了硬件搭建步骤，包括所需硬件的选择与连接方法。随后提供了基础控制代码示例，演示了如何通过定义控制引脚、编写延时函数和控制电机转动函数来实现步进电机的基本控制。最后，探讨了进阶优化技术，如定时器中断控制、S形或梯形加减速曲线、微步控制及DMA传输等，以提升电机运行的平稳性和精度。 适合人群：具有嵌入式系统基础知识，特别是对STM32和步进电机有一定了解的研发人员和技术爱好者。 使用场景及目标：①学习步进电机与STM32的工作原理及二者结合的具体实现方法；②掌握硬件连接技巧，确保各组件间正确通信；③理解并实践基础控制代码，实现步进电机的基本控制；④通过进阶优化技术的应用，提高电机控制性能，实现更精细和平稳的运动控制。 阅读建议：本文不仅提供了详细的理论讲解，还附带了完整的代码示例，建议读者在学习过程中动手实践，结合实际硬件进行调试，以便更好地理解和掌握步进电机的控制原理和技术细节。同时，对于进阶优化部分，可根据自身需求选择性学习，逐步提升对复杂控制系统的理解。
微电网优化技术及其算法研究：从Yalmip+Cplex到粒子群与遗传算法的应用 指南
07-24
内容概要：本文详细探讨了微电网优化技术及其相关算法的研究，涵盖多种优化方法和技术手段。主要内容包括：（1）使用Yalmip+Cplex进行微电网优化建模，涉及光伏、风电、蓄电池和电网的协调配置；（2）采用粒子群算法优化微电网及综合能源系统，通过群体智能算法优化能源分配；（3）介绍多目标算法优化综合能源系统，以及遗传算法在光伏出力预测和风光负荷典型场景生成中的应用；（4）讨论拉丁超立方抽样方法在生成代表性场景中的作用。每种方法均配有详细的代码分析，帮助读者深入理解其实现细节。 适合人群：对微电网优化技术和算法感兴趣的科研人员、工程师及相关领域的学生。 使用场景及目标：适用于希望深入了解微电网优化技术及其实际应用的人士，旨在提供理论与实践相结合的学习材料，帮助读者掌握不同优化算法的具体实现方式。 其他说明：本文不仅介绍了各种优化算法的基本原理，还提供了相应的代码实例，便于读者动手实践并加深理解。
基于arduino uno r3主控的环境监测系统设计
07-24
通过传感器采集TVOC（总挥发性有机物）、HCHO（甲醛）和eCO2（等效二氧化碳）数据，并显示在LCD屏幕上，同时支持数据记录到SD卡，以及通过旋转编码器进行交互。结合RTC时间戳将数据记录至SD卡，并通过LCD显示屏和旋转编码器实现用户交互。系统具备三屏数据显示、智能SD卡管理、时间设置和数据记录控制等核心功能。 该设备通过软串口与TVOC传感器通信，获取TVOC、HCHO和eCO2数据。这些数据会显示在LCD屏幕上，用户可以通过旋转编码器切换显示屏幕（三个屏幕：TVOC+HCHO、eCO2、最后记录）。同时，设备支持将数据记录到SD卡（记录状态由记录按钮控制）。设备还包含一个实时时钟（RTC）用于时间戳。旋转编码器长按可以进入时间设置模式，调整年、月、日、时、分、秒。
MATLAB语音识别系统：基于GUI的数字0-9识别及深度学习模型应用 · GUI v1.2
07-24
内容概要：本文介绍了一款基于MATLAB的语音识别系统，主要功能是识别数字0到9。该系统采用图形用户界面（GUI），方便用户操作，并配有详尽的代码注释和开发报告。文中详细描述了系统的各个组成部分，包括音频采集、信号处理、特征提取、模型训练和预测等关键环节。此外，还讨论了MATLAB在此项目中的优势及其面临的挑战，如提高识别率和处理背景噪音等问题。最后，通过对各模块的工作原理和技术细节的总结，为未来的研究和发展提供了宝贵的参考资料。 适合人群：对语音识别技术和MATLAB感兴趣的初学者、学生或研究人员。 使用场景及目标：适用于希望深入了解语音识别技术原理的人群，特别是希望通过实际案例掌握MATLAB编程技巧的学习者。目标是在实践中学习如何构建简单的语音识别应用程序。 其他说明：该程序需要MATLAB 2019b及以上版本才能正常运行，建议使用者确保软件环境符合要求。
redis 集群
04-01
### Redis 集群的搭建与配置 #### 一、Redis 集群简介 Redis 是一种高性能的键值存储系统，支持多种数据结构操作。通过集群模式可以实现分布式存储和高可用性。Redis 集群允许多个 Redis 实例协同工作，提供更高的吞吐量和更强的数据持久化能力。 --- #### 二、环境准备 在开始之前，需确认以下条件已满足： - 所有服务器的操作系统版本一致（如 CentOS 7 或 Windows），并安装了相同版本的 Redis 软件。 - 已关闭防火墙或开放必要的端口（默认 Redis 使用 6379 及其衍生端口）。 - 每台服务器上至少有两个 Redis 实例运行，分别作为主节点和从节点[^1]。 --- #### 三、具体步骤 ##### 1. 下载并解压 Redis 文件 下载指定版本的 Redis 压缩包（如 Redis 6.2.5 或更高版本），将其解压到目标路径下。例如，在 Linux 中执行以下命令： ```bash wget http://download.redis.io/releases/redis-6.2.5.tar.gz tar -zxvf redis-6.2.5.tar.gz cd redis-6.2.5 make ``` ##### 2. 创建多个实例目录 为每个 Redis 实例创建独立的工作目录，并复制 `redis.conf` 至对应文件夹中。例如： ```bash mkdir -p /service/redis/{6379,6380} cp redis.conf /service/redis/6379/ cp redis.conf /service/redis/6380/ ``` ##### 3. 修改配置文件 编辑每个实例下的 `redis.conf` 文件，设置不同的监听端口号和其他必要参数。以下是关键配置项： - 设置绑定 IP 地址：`bind 0.0.0.0` - 关闭保护模式：`protected-mode no` - 开启集群功能：`cluster-enabled yes` - 指定集群配置文件位置：`cluster-config-file nodes-{port}.conf` - 设定日志级别：`loglevel notice` ##### 4. 启动 Redis 实例 依次启动各个 Redis 实例。例如： ```bash redis-server /service/redis/6379/redis.conf redis-server /service/redis/6380/redis.conf ``` 如果是在多台物理机上部署，则需要远程登录每台机器重复上述过程[^2]。 ##### 5. 构建集群拓扑 利用 `redis-cli` 的集群管理工具完成初始化操作。假设当前存在六个节点分布在三台主机上，则可输入如下指令构建集群关系： ```bash redis-cli --cluster create \ 192.168.x.y:6379 192.168.x.z:6379 ... \ --replicas 1 ``` 其中 `--replicas` 参数表示每个主节点分配几个副本[^4]。 ##### 6. 验证集群状态 最后可以通过以下方式验证集群是否正常运作： ```bash redis-cli -c -h {任意IP} -p {任一口号} CLUSTER INFO CLUSTER NODES PING SET key value GET key ``` --- #### 四、注意事项 - 如果使用 Docker 容器来部署 Redis 集群，请确保容器间网络互通良好。 - 对于 Windows 平台上的开发测试场景，可通过批处理脚本来简化服务启动流程[^3]。 --- #### 五、示例代码片段 下面展示了一个简单的 Python 程序用于连接至 Redis 集群并向其中写入一条记录： ```python import redis r = redis.StrictRedisCluster(startup_nodes=[{"host": "127.0.0.1", "port": "6379"}], decode_responses=True) r.set('foo', 'bar') print(r.get('foo')) ``` ---
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值