Redis 集群部署及踩过的坑

最新推荐文章于 2023-05-11 10:49:34 发布
转载 最新推荐文章于 2023-05-11 10:49:34 发布 · 603 阅读 · 0

本文详细介绍了如何在单台CentOS 6.7服务器上通过不同端口启动多个Redis实例并组建集群的过程，包括配置文件编写、Ruby环境安装及集群创建中遇到的问题与解决方案。

本文目标

要在单台机器上搭建Redis集群，方式是通过不同的TCP端口启动多个实例，然后组成集群，同时记录在搭建过程中踩过的坑。

安装准备

centos版本：6.7

redis版本：3.2.3

安装方式：源码安装

服务器：1台

操作步骤

此处默认已安装好单台redis，如果不会可以参照《centos上安装redis》

 

1、启动Redis多个实例

我们在Redis安装目录下创建目录cluster，并编写7000.conf~7005.conf 6个配置文件，这6个配置文件用来启动6个实例，后面将使用这6个实例组成集群。

以7000.conf为例，配置文件需要填写如下几项：

分别启动6个实例

启动成功后，看一下进程

至此，ip=192.168.186.91机器上创建了6个实例，端口号为port=7000~7005。

 

2、安装ruby

1）yum安装ruby和依赖的包。

2）使用gem这个命令来安装redis接口

这一步骤中出现了bug,度娘告诉我是Ruby版本太低，需要升级版本。

3）升级Ruby的版本

安装rvm，我不知道这是个什么东西，但是感觉像是Ruby的一个包管理器。

这一操作得到了：

gpg2 –recv-keys 409B6B1796C275462A1703113804BB82D39DC0E3

然后利用该密钥下载Ruby并升级。

接着，source环境，让rvm可用。

查看Ruby可用版本

可以看到最新的版本是2.4.1，本文安装2.3.0

至此，我们升级了Ruby的版本。

4）安装gem redis接口

5）安装rubygems

到目前为止，我们的Ruby和运行redis-trib.rb需要的环境安装完成了。

 

3、Redis集群搭建

有了Ruby执行环境，可以开始将之前的6个实例组建成集群了。

有三个master，有三个是slave。 后面跟上6个实例就好了，形式就是ip:port

【此处有坑】

第一坑

需要将redis-trib.rb复制到/usr/local/bin目录下。

第二坑

踩完第一坑后，继续执行，发现了第二坑，还好有度娘，但是网上各种说法都有（主要参照了《极客on之路》的博客），发现错误的原因是redis数据库没有清除。

第三坑

还是度娘靠谱，在《redis 跨机器集群启动出错》博客中找到了答案。

这是由于之间创建集群没有成功,需要将nodes.conf和dir里面的文件全部删除。

然后重启redis服务。

 

4、验证集群状态

登录集群客户端，-c标识以集群方式登录

查看集群状态

阿里云部署MySQL、Redis、RocketMQ、Nacos集群
我是Java程序员廖志伟，感谢朋友们的支持！
03-19 2378
🌟我是廖志伟，一名Java开发工程师、Java领域优质创作者、优快云博客专家、51CTO专家博主、阿里云专家博主、清华大学出版社签约作者、产品软文专业写手、技术文章评审老师、问卷调查设计师、个人社区创始人、开源项目贡献者。🌎跑过十五公里、🚀徒步爬过衡山、🔥有过三个月减肥20斤的经历、是个喜欢躺平的狠人。
Linux系统安装部署Redis完整教程（图文详解）
黄团团的个人博客
07-22 6321
最近需要在Linux服务器安装部署Redis，参考了网上很多的文章，比较零碎，所以我自己写了一篇完整的Redis安装部署文档，在部署Redis之前重装了我的华为服务器，就是为了给大家一步步阐述我的操作过程，配合图文进行讲解更加通俗易懂！
redis集群部署及踩过的坑
热门推荐
lsxf_xin的专栏
03-05 1万+
本文目标要在单台机器上搭建Redis集群，方式是通过不同的TCP端口启动多个实例，然后组成集群，同时记录在搭建过程中踩过的坑。安装准备centos版本：6.7redis版本：3.2.3安装方式：源码安装服务器：1台操作步骤此处默认已安装好单台redis，如果不会可以参照《centos上安装redis》1、启动Redis多个实例我们在Redis安装目录下创建目录cluster，并编写7000.con...
Redis Cluster 踩坑案例之内存占用飙升
12-14
一、现象 Redis Cluster 某个分片（10.20.2.53:7101）内存飙升，明显比其它高跟多，而且持续增长并达到了峰值。并且主从的内存使用量不一致。 IP 监听端口 主/从 实例状态 内存使用 对象数 连接数 命中率 10.20.0.40 7101 master 运行中 393.08M(Used) / 18.63G(Total) 515897 10 82.8% 10.20.0.41 7102 slave 运行中 393.82M(Used) / 18.63G(Total)       10.20.0.41 7101 master 运行中 401.82M(Used)
spring-boot docker使用
liufang1991的专栏
06-13 820
参考文档： dockerfile-maven Spring Boot with Docker 我电脑是windows7，实际上是在虚拟机中跑的docker，启动docker以后用mvn clean install dockerfile:build一直报下面的错误 Execution default-cli of goal com.spotify:dockerfile-maven-plugi...
日常踩坑--redis 集群
u010363590的博客
07-05 779
最近在做一个银行业的软安全项目，前台是SDK模式，嵌入到手机银行APP中；后台是JAVA开发的web服务，部署在内网。软件架构为weblogic+oracle+redis结构，2台应用服务器做双活，应用服务器上部署weblogic+redis。redis主要保存一些临时有效数据（验证码、申请记录等）。产品确实是个成熟产品，但是与现场要求结合起来就产生了各种坑。先说redis 集群的坑，我们通用的产...
Redis的集群部署+主从,踩坑实录。
boybaozi的博客
05-23 978
首先要说明，redis本应该是没有坑的，有坑的只是一颗折腾的心。 以下是当你在做部署+主从时，如果遇到问题，可以看下我都折腾出了什么坑。 1.做集群需要ruby及gem，我对ruby的印象还停留在rpgmaker，所以这2个没敢折腾。 2.你确认环境啥的弄好后，gem install redis，是用不了的，因为耶路撒冷，你切换gem源到阿里巴巴也是不行的，人家没提供
Redis——集群部署实战
兵临奇点
07-18 380
前言 在当今，大多数后端开发项目中，Redis的重要性可能比关系型数据库还要重要！主要体现在以下几个方面： 性能：redis的底层实现逻辑让其天生支持高并发，因此可以很好地利用redis进行性能优化（比如首页加载、热点数据加载等）； 高可用：redis支持多机数据库协同工作（主从、哨兵、集群），让其具备高可用特性； 功能丰富：如果对于redis的实现设计稍有研究就会发现，其特有的数据结构+算法让其能支持丰富的数据类型，比如常见的字符串、列表、哈希、集合、有序集合等，基于此，复杂的业务场景都可以使用redi
网易架构师心得：Springboot下使用redis踩过的坑
是程序媛不是程序猿
09-11 1333
分享我的网易架构师同事写的一篇在spring boot下使用redis的心得~ 首先总结了redis服务端单线程工作模型，redis四种部署方式及使用场景，然后从源码的角度上，分析springboot在jedis和lettuce客户端下使用redis的一些坑~尤其是在集群模式下的一些不兼容问题！ Java架构学习视频和大厂项目底层知识点，需要的同学欢迎私信我发给你~一起学习进步！ 1 Redis服务端单线程模型 redis 内部使用文件事件处理（file event handler）处.
Windows下Redis主备集群及哨兵模式的搭建
gxl___的博客
07-12 2018
1.redis主备集群 本文所用redis版本为3.2.1 1.1下载redis 链接：https://pan.baidu.com/s/1bjdoi1LO9qcC1mbPe9ts-Q 提取码：isc9 1.2下载完成后解压，目录如图 1.3复制一份解压后的redis，目录如图 第一个redis的配置文件不用修改，点开第二个文件夹，修改redis.windows.conf 首先...
hyperf redis-cluster连接
s1095622320的博客
11-22 743
配置很简单 , 随便在网上一搜一大堆 , 但是一旦出问题 , 网上有效的解决方案会很少 , 官方文档也不太容易懂 , 很多网上的帖子都是复制粘贴的和想要的结果根本不搭边😒。这里我之前是使用的redis-sentinel哨兵 , 但是总有redis无法连接的情况发生 , 于是从 1主3从3哨兵直接上cluster集群 , 3主3从。这里的seeds选项是各个redis节点, 我这里是所有节点都写了 ,但是我测试只写一个节点也是好使的。这里有一个注意事项 , 在使用redis-cli的时候需要加上。
比Xshell更好用的FinalShell
weixin_44149181的博客
03-17 2245
FinalShell功能特点： 1.多平台支持Windows,Mac OS X,Linux 2.多标签,批量服务器管理. 3.支持登录Ssh和Windows远程桌面. 4.漂亮的平滑字体显示,内置100多个配色方案. 5.shell,sftp同屏显示,同步切换目录. 6.命令自动提示,智能匹配,输入更快捷,方便. 7.sftp支持,通过各种优化技术,加载更快,切换,打开目录无需等待. 8.服务器网络,性能实时监控,无需安装服务器插件. 9.内置海外服务器加速,加速远程桌面和ssh连接,操作流畅无卡顿. 1
springboot整合
weixin_44235759的博客
03-29 1140
文章目录整合Junit整合Mybatis注解使用xml使用 整合Junit <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-test</artifactId> <scope>test</scope> </dependency> package com.exa
2021-08-18
qq_45221173的博客
08-18 213
纯小白记录一下自己踩的坑，还是有进步的，能自己解决问题了 ① p1安装Django出现问题，因为没有以管理员身份运行。改正以后p2就可以了 ② p3在Python交互式环境中，验证安装，验证失败。因为进入的不是 刚才安装了Django的Python解释器。p4是在p2的cmd中输入Python进入交互环境，再验证是否存在Django模块，就验证成功了。 ③接下来是把Django的核心管理程序Django-admin.exe加入操作系统的环境变量中，找了半天scripts文件夹在哪，百度了一下用p5的
Redis（12）springboot整合redis
个人笔记总结
04-27 838
本文介绍了在Spring Boot中如何整合Redis，包括单节点Redis、哨兵和集群。对于单节点的Redis，只需要添加依赖、配置Redis连接信息、创建RedisTemplate Bean和使用RedisTemplate操作Redis即可。对于哨兵和集群，需要在配置信息中添加哨兵信息或多个Redis节点的信息，并创建对应的配置类。在使用RedisTemplate类时，需要为其设置正确的序列化器。当使用Redis集群时，需要使用集群模式下的RedisTemplate。如果在使用Redis时遇到超时等问题
Redisson入门
梦清尘的博客
06-30 4807
一、Redisson是什么？ 二、使用步骤 1.引入库 2.Redisson 配置 2.增（改） 3.删 4.查 5.测试类 三、遇到错误（ERROR org.redisson.client.handler.CommandDecoder - Unable to decode data. channel） 总结 参考资料
json.dumps错误：‘utf8‘ codec can‘t decode byte解决方案
xiaoyaozi2020的博客
05-11 782
然后先进行字符串unicode化，然后再使用最上面的代码进行json encode就ok了，问题就这么解决了。但是要注意，这里的value必须为字符串，这里的value就是上面的111、222、333。通过错误提示我们知道，肯定是编码问题，找到问题所在，就不难解决了。#运行结果为’{“a”:111,“b”:222,“c”:333}’上面是正常情况，但是如果在字典中出现特殊字符，就会报上面的错。#把字典转换成json字符串。
Redis 技术内幕——Redis Cluster
一叶知秋的博客
07-25 1402
Redis 在 3.0 版本中提供了 Redis Cluster (集群) 来满足分布式的需求。Redis Cluster 采用无中心结构，每个节点保存数据和整个集群的状态，每个节点都和其他所有节点连接，节点之间使用流言协议 (Gossip Protocols) 去传播信息以及发现新的节点。
redis集群的配置
weixin_34399060的博客
05-05 262
1.修改主机的主机名称[root@localhost~]#vim/etc/sysconfig/networkNETWORKING=yesHOSTNAME=localhost.localdomainHOSTNAME=redis.clvn.com.cn2.关闭NetworkManager服务[root@localhost~]#serviceNetworkManager...
如何将Redis变为一主一从集群
最新发布
09-28
<think>嗯，用户这次明确要配置Redis一主一从集群，看来他不需要复杂的多节点部署，而是追求最简单的高可用方案。之前提供的引用里其实有线索：引用[2]提到哨兵模式，引用[3]展示了从节点配置，但用户特意强调"一主一从"，说明场景可能比较轻量。 用户可能是个开发者正在搭建测试环境，或者小项目需要故障转移能力。他跳过了动态扩容和3主3从的方案，说明当前需求很聚焦。要注意的是，他提到"集群"但实际要的是主从复制+哨兵，这里需要区分Redis Cluster和主从复制的概念差异——不过既然他明确说一主一从，按后者实现更合适。 从引用[2]提取关键步骤时发现，它用docker部署但省略了哨兵配置细节。引用[3]的非docker方式反而更清晰，但用户如果习惯docker就需要转换表述。所以决定融合两种方案：先演示原生安装保证原理透明，再用docker实现快速部署，这样覆盖不同用户偏好。 特别注意两个技术细节：一是主从的持久化配置差异（主节点关AOF可能更好），二是哨兵quorum设置为1的适用场景。用户没提性能要求，所以推荐默认异步复制，但准备在"注意事项"里补充同步复制的选项。 安全问题不能忽略。引用[1]的--privileged有风险，要特别标注替代方案；防火墙设置容易遗漏，需要分开放置在步骤里。用户上次踩过坑（引用[1]提到问题解决），所以把常见错误如目录权限、端口冲突专门列出来。 最后生成的扩展问题其实是对用户潜在需求的预判：他部署完一主一从后，很可能接着要监控或扩容，提前准备这些方向能减少他后续提问成本。不过"性能调优"放在最后，毕竟初期使用者更关注可用性。 </think>以下是配置Redis一主一从集群的完整方法，结合原生部署和Docker方案： --- ### **一、原生部署方案（推荐测试环境）** #### 1. **主节点配置**（192.168.1.128） ```bash # 创建配置文件 cat > redis-master.conf << EOF bind 0.0.0.0 port 6379 daemonize yes requirepass YourMasterPassword # 主节点密码 masterauth YourMasterPassword # 从节点访问主节点的密码 appendonly yes EOF # 启动主节点 redis-server redis-master.conf ``` #### 2. **从节点配置**（192.168.1.129） ```bash # 创建配置文件 cat > redis-slave.conf << EOF bind 0.0.0.0 port 6379 daemonize yes replicaof 192.168.1.128 6379 # 指定主节点IP和端口 masterauth YourMasterPassword # 主节点密码 requirepass YourSlavePassword # 从节点自身密码（可选） appendonly yes EOF # 启动从节点 redis-server redis-slave.conf ``` #### 3. **验证主从同步** ```bash # 连接主节点写入数据 redis-cli -h 192.168.1.128 > SET test_key "hello" # 连接从节点查询数据 redis-cli -h 192.168.1.129 > GET test_key # 应返回"hello" ``` --- ### **二、Docker部署方案（适合生产环境）** #### 1. **主节点容器** ```bash docker run -d --name redis-master \ -p 6379:6379 \ -v $(pwd)/master-data:/data \ redis:latest \ redis-server --requirepass "YourMasterPassword" \ --appendonly yes ``` #### 2. **从节点容器** ```bash docker run -d --name redis-slave \ -p 6380:6379 \ -v $(pwd)/slave-data:/data \ redis:latest \ redis-server --replicaof redis-master 6379 \ --masterauth "YourMasterPassword" \ --requirepass "YourSlavePassword" \ --appendonly yes ``` > **注意**：若跨主机部署，需将`--replicaof redis-master`替换为主节点实际IP --- ### **三、哨兵模式配置（实现自动故障转移）** #### 哨兵配置文件（sentinel.conf） ```conf sentinel monitor mymaster 192.168.1.128 6379 1 sentinel auth-pass mymaster YourMasterPassword sentinel down-after-milliseconds mymaster 5000 sentinel parallel-syncs mymaster 1 ``` #### 启动哨兵 ```bash redis-sentinel sentinel.conf ``` > **关键参数说明**： > - `down-after-milliseconds`: 主节点失联判定时间（毫秒） > - `parallel-syncs`: 故障转移时同时同步的新从节点数[^2] --- ### **四、验证高可用性** 1. **模拟主节点故障** ```bash docker stop redis-master ``` 2. **观察哨兵日志** ```log +switch-master mymaster 192.168.1.128 6379 192.168.1.129 6379 ``` 3. **从节点自动升级为主节点** ```bash redis-cli -h 192.168.1.129 info replication # 输出中 role:master 表示切换成功 ``` --- ### **注意事项** 1. **防火墙配置**：确保主从节点间端口互通（默认6379, 哨兵端口26379） 2. **数据持久化**：建议同时开启`appendonly yes`和`save 900 1`双重保障 3. **密码安全**：主从节点密码需一致，否则同步失败[^3] 4. **容器网络**：Docker部署时建议使用自定义网络 `--network redis-net` > **踩坑预警**： > - 若从节点无法连接主节点，检查主节点`bind 0.0.0.0`配置 > - Docker挂载目录需赋予`chmod -R 777`权限（或匹配容器内redis用户UID）[^1] --- ###
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值