在k8s的3个node上部署redis cluster

LangGraph生产环境配置:高性能Agent系统的部署架构与运维要点 LangChain生态中负责Agent推理调度的轻量级内核,但不支持分布式状态持久化没有内置的Graph级并发控制监控链路不完善;LangGraph:LangChain于2024年初推出的生产级Agent编排框架,核心突破是引入了Stateful Graph(有状态图)的概念,通过显式定义State、Nodes、Edges、Conditional Edges、Subgraphs、Checkpoints实现了Agent的可控性、可观测性、可恢复性——但它本质上是一个单进程/多线程编排库。 阅读详情
目的
redis clustor 需要6台服务器才能正常运⾏,由于种种原因,开发或者某些特别的需求,只能在3台服务器上运⾏redis clustor。在不使用哨兵模式情况下,而使⽤最新的clustor模式运行redis。

本文仅作为redis部署方式的研究及理解

准备工作

制作redis docker.latest镜像其中包含以下组件:
1. redis-cli
2. ruby
3. redis-trib
打包到镜像上传到阿里镜像服务器中cluster-redis:latest

创建集群操作

3台服务器上各自运行两个redis容器

微信截图1_20170725101321.png


使用以下编写好的redis-cluster部署文件,可在一台部署出两个不同端口,不同角⾊的redis容器。

redis-cluster.yaml
apiVersion: extensions/v1beta1
kind: Deployment
metadata:
name: redis-blue
labels:
app: redis
member: redis-blue
spec:
replicas: 3
template:
metadata:
labels:
app: redis
member: redis-blue
spec:
hostNetwork: true
containers:
- name: redis
image: registry.cn-hangzhou.aliyuncs.com/wise2c/cluster-redis:latest
command: ["/bin/sh", "-c"]
args: ["echo 'dir /tmp/data' >> /root/redis.conf && /usr/local/bin/redis-server /root/redis.conf"]

- /usr/local/bin/redis-server

- /root/redis.conf

ports: - name: redis-port containerPort: 6379 - name: cluster-port containerPort: 16379 volumeMounts: - mountPath: /tmp/data name: data volumes: - name: data hostPath:

path: /tmp/redis-blue

apiVersion: extensions/v1beta1 kind: Deployment metadata: name: redis-green labels: app: redis member: redis-green spec: replicas: 3 template: metadata: labels: app: redis member: redis-green spec: hostNetwork: true containers: - name: redis image: registry.cn-hangzhou.aliyuncs.com/wise2c/cluster-redis:latest command: ["/bin/sh", "-c"] args: ["sed -i 's/6379/6380/g' /root/redis.conf && echo 'dir /tmp/data' >> /root/redis.conf && /usr/local/ports: - name: redis-port containerPort: 6380 - name: cluster-port containerPort: 16380 volumeMounts: - mountPath: /tmp/data name: data volumes: - name: data hostPath: path: /tmp/redis-green

kubectl create -f redis-cluster.yaml

执行以下脚本,创建出整个redis集群。redis会自动分配哈希槽,使得master与其对应的slave不会出现在同一台服务器上。

create_cluster.sh

!/usr/bin/env bash

redis_count=`kubectl get pod -o wide -l app=redis | grep Running | wc -l`

echo "redis_count:"$redis_count

if [ $redis_count -ne 6 ]; then echo "the running redis count: ${redis_count} is error" exit 1 fi redis_blue_ips=`kubectl get pod -o wide -l app=redis -l member=redis-blue | awk 'NR>1{printf $6":6379 "}' redis_green_ips=`kubectl get pod -o wide -l app=redis -l member=redis-green | awk 'NR>1{printf $6":6380 "}' redis_ips=$redis_blue_ips" "$redis_green_ips echo "redis_ips:"$redis_ips redis_blue_name=`kubectl get pod -o wide -l app=redis -l member=redis-blue | grep Running | awk '{printf $1" "}'

echo $redis_ips | awk -F' ' '{for( i=1;i<NF; i++ ) print $i}' ``

kubectl create -f redis-cluster.yaml

bash create_cluster.sh

关掉其中一台机器

由于master和slave 不在同一台机器上,当我们直接关掉其中⼀一台vm,比如vm2

微信截图2_20170725115307.png


这时vm3上,由redis cluster自动恢复vm3slave2(6380) ---> master2(6380) 提升为master,集群工作正常,业务不中断。

恢复关掉的的机器

当我们重新启动vm2, 这时候集群的状态:

微信截图3_20170725142540.png


这时集群工作正常,此时vm3有2个master。如果我们关掉vm3,会让集群中2个master同时下线,导致集群无法自动恢复。

重点:执行以下脚本,提升slave2到master2,恢复集群的自动修复功能。

failover.sh

!/usr/bin/env bash

redis_blue_name=`kubectl get pod -o wide -l app=redis -l member=redis-blue | grep Running | awk '{printf $1":6379 redis_names=`kubectl get pod -o wide -l app=redis -l member=redis-blue | grep Running | awk '{printf $1","}' redis_array=${redis_names//,/ } for redis_name in $redis_array do kubectl exec -it ${redis_name} -- redis-cli cluster failover done

bash failover.sh

集群自动恢复,变成下面的状态。

微信截图4_20170725162254.png


集群工作正常,业务不中断。

作者后话

以上的操作,目的是让各台虚拟上不出现有2个master。当其中一台虚拟机出现当机,集群就不能正常工作.。如果是3台master和3台slave分别在不同的机器刚好错开,redis cluster能自动恢复.。最好的解决方案,依然是有6台虚拟机、3台master、3台slave的redis cluster。

To do

我们可以进⼀一步将

1.create-redis.sh 
2.failover.sh 
3.kubectl

制作为镜像, k8s deployment运行此镜像。实现:

1.创建集群
2.恢复集群的自动修复功能(任意关掉其中一台服务器,业务不中断。每过一秒,检查集群中是否有slave需要提升权限,集群都能正常工作.业务不中断。)
Node.js+K8s生产部署实战:Semaphore与DigitalOcean CI/CD全链路详解 Kubernetes容器编排与CI/CD持续交付是现代云原生应用的核心能力。理解其底层原理——如Pod调度机制、镜像拉取认证流程、健康探针设计逻辑及资源请求/限制的CPU毫核(millicores)语义——是实现稳定交付的前提。技术价值在于将开发成果可靠、可重复、安全地转化为线上服务,避免因权限配置错误、网络策略缺失或环境变量注入失效导致的ImagePullBackOff、CrashLoopBackOff等高频故障。典型应用场景涵盖中小团队MVP快速验证、Node.js微服务上云、以及基于托管K8s集群(如 阅读详情

相关推荐

Redis 7.2 集群在K8s的3种外部访问方案对比:NodePort vs LoadBalancer vs Ingress

本文详细对比了Redis 7.2集群在Kubernetes中的三种外部访问方案:NodePort、LoadBalancer和Ingress,分析了各自的技术实现、性能表现及适用场景。通过实际配置示例和性能数据,帮助开发者在不同环境下选择最优方案,提升Redis集群的访问效率和安全性。

weixin_34080951的博客 360

k8s上部署高可用redis集群--三主三从

K8S搭建三主三从高可用redis集群 一、创建存储卷 二、创建PV 三、创建configmap 四、创建headless service 五、创建redis集群节点 六、初始化redis集群 七、创建用于访问的service 八、redis主从切换测试 本方案采用StatefulSet进行redis的部署。它为了解决有状态服务的问题,它所管理的Pod拥有固定的Pod名称,启停顺序。在Deployment中,与之对应的服务是service,而在StatefulSet中与之对应的headless serv

web18484626332的博客 5511

DigitalOcean Kubernetes自动伸缩实战:从HPA到Cluster Autoscaler

Kubernetes自动伸缩不是简单配置CPU阈值,而是以业务指标(如QPS、延迟)为驱动的系统工程。其核心原理在于分层协同:HorizontalPodAutoscaler(HPA)基于实时业务水位动态调整Pod副本数,Cluster Autoscaler(CA)据此预判节点资源缺口并弹性扩缩底层Droplet,而DigitalOcean托管服务(DOKS)则通过开箱即用的Cilium网络、分层节点池与Block Storage存储,屏蔽了etcd、kube-scheduler等底层复杂性。这种声明式、可观

weixin_34121304的博客 420

K8s部署 Redis 主从集群

Redis (Remote Dictionary Server),即远程字典服务。是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API。它支持字符串、哈希表、列表、集合、有序集合,位图,hyperloglogs等数据类型。内置复制、Lua脚本、LRU收回、事务以及不同级别磁盘持久化功能,同时通过Redis Sentinel提供高可用。那么今天我们就来讲解下:k8s环境下,如何部署redis集群(三主三从)。

qq_25409421的博客 3万+

数据分析是什么?

说道“数据分析”一词,大家应该并不陌生,数据分析从字面上来理解,就是对数据做出分析然后得出一个结论,看起来浅显易懂,下面我们把这个词语分开得到的是“数据”与“分析”。“数据”的范围就很广泛了,小到一个计量数字,大到成亿级别的数据汇总,都可以称为数据;“分析”一词并不难理解,以智慧思维的方法对某一事物做出合理的解释,给出结论是为分析,一般会用到数学上的分析方法,比如统计学或者概率论等等。 1. 什么是数据分析 1) 数据分析发展背景 进入到 21 世纪以后,伴随着互联网的迅速发展,大数据应运而生,越来越多的数

MC_XY的博客 5434

EB Tresos激活失败?3种实用解决方案帮你搞定(含离线激活步骤)

本文针对EB Tresos软件激活失败问题,提供了三种实用的解决方案。详细分析了激活失败的常见根源,并系统阐述了在线环境下的排查步骤、无网环境下的离线激活全流程,以及高级许可证环境修复方法,帮助汽车电子工程师快速恢复开发环境。

milk8的博客 609

Kubernetes 学习总结(27)—— Kubernetes 安装 Redis 集群的两个方案

一、自定义 yaml 文件安装 背景 在 Kubernetes 中部署 Redis 集群面临挑战,因为每个 Redis 实例都依赖于一个配置文件,该文件可以跟踪其他集群实例及其角色。为此,需要结合使用 Kubernetes StatefulSets 和 PersistentVolumes 实现。Redis 集群架构如下图所示: 创建 StatefulSet yaml 文件 --- apiVersion:v1 kind:ConfigMap metadata: name:redis...

科技D人生 3689

避坑指南:SpringBoot对接拉卡拉支付常见问题与解决方案(含SDK 1.0.6配置技巧)

本文是一份SpringBoot项目对接拉卡拉支付的实战避坑指南。针对SDK 1.0.6版本,详细剖析了从依赖管理、多环境配置、SDK初始化到支付请求构建、回调验签及生产监控的全流程常见问题,并提供了经过验证的解决方案与配置技巧,旨在帮助开发者高效、稳定地集成支付功能。

k5l6m的博客 332

k8s部署redis集群

一般来说,REDIS部署有三种模式。单实例模式,一般用于测试环境。哨兵模式集群模式后两者用于生产部署哨兵模式在redis3.0以前,要实现集群一般是借助哨兵sentinel工具来监控master节点的状态。如果master节点异常,则会做主从切换,将某一台slave作为master。引入了哨兵节点,部署更复杂,维护成本也比较高,并且性能和高可用性等各方面表现一般。集群模式3.0 后推出的 Redis 分布式集群解决方案主节点提供读写操作,从节点作为备用节点,不提供请求,只作为故障转移使用。

m0_70618214的博客 6264

微纳加工技术中的自对准硅化物(Silicide)工艺:关键步骤与应用场景解析

本文深入解析了微纳加工技术中的自对准硅化物(Silicide)工艺,详细介绍了其关键步骤与应用场景。从表面清洁、金属沉积到两步退火法,全面拆解工艺全流程,并探讨了不同技术节点下的工艺演进。文章还提供了实际应用中的问题排查方法和新兴技术对Silicide工艺的挑战,为芯片制造领域的工程师提供了实用参考。

weixin_30613727的博客 431

BlenderGis安装碰到问题,ImageIO、无法点击和地图不加载

BlenderGis安装碰到问题,ImageIO、无法点击和地图不加载问题

qq_45176349的博客 4969

k8s下搭建redis集群

redis在k8s上搭建集群的过程记录

qq_37831759的博客 1868

408 | 408常用计算公式与方法 —— 计组篇 汇总

408常用计算公式与方法 —— 计算机组成原理篇 汇总

"You are worthy! You can do it!" 4660

在Kubernetes的3个node上部署redis cluster

目的 redis clustor 需要6台服务器才能正常运⾏,由于种种原因,开发或者某些特别的需求,只能在3台服务器上运⾏redis clustor。在不使用哨兵模式情况下,而使⽤最新的clustor模式运行redis。 本文仅作为redis部署方式的研究及理解 准备工作 制作redis docker.latest镜像其中包含以下组件: 1. redis-cli

Kubernetes中文社区 3934

开源数字人、虚拟直播部署教程

对,你无看错,是欧美的。在直播带货案例里,我们把模型导入到ue4,我们给模型在ue4里预设了四个动作(站着、站着说话、坐着、坐着说话),三个表情(平静、开发、愤怒),三个镜头(全局、近矩说话、看显示器播放商品展示)。我们只需要把目标主播的直播给录制下来,提取样本数据,然后训练一个从粉丝的不同刺激的组合,到主播的不同响应方式的多元逻辑回归的数学模型参数即可。

南七小僧的学海无涯 4563

Token 费用爆炸?教你用 Semantic Cache(语义缓存)把 API 成本降低 80%

本文介绍了语义缓存(Semantic Cache)技术在大模型应用中的关键作用。传统Redis缓存基于精确匹配,无法处理用户提问的语义相似性,导致重复调用昂贵的LLM API。语义缓存通过将问题向量化并在向量空间中进行相似度匹配,可识别30%-50%的重复提问,直接返回历史答案。文章详细解析了技术原理(Embedding+向量搜索)、架构设计,并提供了基于Python和ChromaDB的50行核心实现代码。同时指出了生产环境中的三大挑战:阈值设定、隐私保护和多轮对话处理,并给出相应解决方案。该技术能以极低成

BUG猿的博客 1056

Kubernetes 构建高可用、高性能 Redis 集群

本文介绍在K8s环境构建高可用Redis集群的流程,基于3节点K8s集群与NFS/Harbor节点,核心步骤包括:搭建NFS提供持久化存储,通过NFS Provisioner+StorageClass实现动态PV供应,以StatefulSet部署3主3从 Redis 集群并初始化槽位,构建Redis Cluster Proxy解决客户端兼容性与外部访问问题,最后通过读写/故障测试验证可用性,部署RedisInsight实现图形化运维。实验实现Redis集群故障自动切换、存储动态管理、访问透明化,满足业务需求

a_2373179473的博客 1571

汉书HE8,好用的汇编代码编写工具

汉书HE8,好用的汇编代码编写工具早期编写汇编代码所用功能强大

【基于 K8S+NFS 动态存储实战部署 Redis-Cluster 集群(含三主三从配置与访问配置)】

本文详细介绍了在K8S中部署Redis Cluster集群的完整流程。主要内容包括:1)搭建NFS服务器作为统一后端存储;2)创建SC和SA授权;3)部署自动供给PV/PVC的NFS Provisioner Pod;4)通过ConfigMap存储Redis配置文件,使用Headless Service提供域名解析;5)部署6副本StatefulSet实现持久化存储;6)安装redis-trib工具配置三主三从集群。文章提供了详细的YAML配置示例,帮助读者快速构建生产可用的Redis分布式缓存系统

m0_63756214的博客 643

Devexpress16.2.6破解工具

Devexpress16.2.6破解工具Devexpress16.2.6破解工具Devexpress16.2.6破解工具Devexpress16.2.6破解工具

Camera2Demo

在Camera2 的基础上进行封装,使得Camera2一堆初始化逻辑与Activity分离,降低耦合度,完成预览拍照并保存的操作

Redis 7.2 集群在 K8s 的 3种访问方案对比:ClusterIP vs NodePort vs Ingress

本文深入对比了Redis 7.2集群在Kubernetes环境中的三种访问方案:ClusterIP、NodePort和Ingress。通过分析各方案的实现原理、性能表现和适用场景,帮助开发者选择最适合的Redis集群访问策略,并提供可直接落地的YAML配置示例,优化云原生架构下的Redis部署。

weixin_30535843的博客 1113

精雕软件(JDpaint) 5.5 绿色版

精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版

7-1 k8s 示例-使用 StatefulSet 部署 Redis Cluster

使用 StatefulSet 在 k8s 集群中部署 Redis Cluster

qq_25874461的博客 807

k8s redis集群_kubernetes-20:redis-cluster容器化

目录:(1).redis容器化1.容器化redis-cluster各个节点实例2.初始化redis-cluster集群3.集群节点文件说明3.1.appendonly.aof3.2.dump.rdb3.3.PDB和AOF的优先级3.4.nodes.conf(2).容器重启导致节点ip变化的问题解决2.1.相关配置方式2.2.整个操作过程演示2.3.应用如何适配(3).配置文件说明(4).相关文章阅...

weixin_39689870的博客 450

Redis100篇 - Redis Cluster vs Codis 集群方案选型建议

Redis Cluster与Codis选型对比指南 本文从架构原理、部署运维、客户端支持等维度对比Redis Cluster和Codis两种集群方案。Redis Cluster采用去中心化架构,基于Gossip协议和Slot分片,适合追求简单标准的场景;Codis基于Proxy路由,客户端兼容性好但组件复杂。通过配置示例和架构图详细说明了两者的部署方式,指出Codis的运维成本更高。最后给出Java客户端集成示例,推荐Redis Cluster+Lettuce的组合方案。结论建议:新项目优先选择Redis

千淘万漉虽辛苦,吹尽狂沙始到金 2万+

Kubernetes Redis 7.2 集群部署:NFS存储+StatefulSet 6节点配置详解

本文详细介绍了在Kubernetes环境中使用StatefulSet和NFS存储部署Redis 7.2集群的完整方案。通过6节点(3主3从)配置,结合NFS持久化存储和自动化初始化Job,实现高可用的Redis集群部署。文章涵盖架构设计、环境准备、核心配置、集群初始化及高级优化,为开发者提供了一套完整的Kubernetes Redis集群部署指南。

chuiqi9947的博客 358

初创团队何时该上 Kubernetes?DOKS 实战决策指南

Kubernetes 是云原生时代的核心编排系统,其声明式API、自动扩缩容与服务发现能力,本质是应对业务增长引发的运维复杂度升维挑战。但对人力紧张、预算有限、PMF未验证的初创团队而言,自建K8s极易陷入‘技术正确、业务错误’陷阱——YAML维护成本高、etcd故障率高、网络策略配置难。DigitalOcean Kubernetes(DOKS)作为托管式K8s服务,通过剥离控制平面、预集成VPC网络与Block Storage CSI,显著降低学习曲线与隐性成本。它特别适合AI SaaS、跨境电商工具、I

weixin_30788619的博客 460
上一篇: 在Kubernetes中使用Sateful Set部署Redis
下一篇: 在Kubernetes上部署Elasticsearch集群
hxpjava1
博客等级 码龄19年 1365粉丝 511原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值