cluster集群的搭建与使用

使用Docker搭建Redis Cluster集群 Cluster模式是Redis的一种高级集群模式,它通过数据分片和分布式存储实现了负载均衡和高可用性。在Cluster模式下,Redis将所有的键值对数据分散在多个节点上。每个节点负责一部分数据,称为 `槽位`。通过对数据的分片,Cluster模式可以突破单节点的内存限制,实现更大规模的数据存储... 阅读详情

初始环境的配置

用作集群的几个虚拟机最好时比较纯净的环境,还有必须要时间同步

1.首先配置好yum源以用来安装所需要的ricci服务与luci服务
配置的yum源添加部分如下

[HighAvailability]  (高可用)
name=HighAvailability
baseurl=http://172.25.39.250/rhel6.5/HighAvailability
gppcheck=0

[LoadBalancer]      (负载均衡)
name=LoadBalancer
baseurl=http://172.25.39.250/rhel6.5/LoadBalancer
gpgcheck=0

[ResilientStorage]  (存储)
name=ResilientStorage
baseurl=http://172.25.39.250/rhel6.5/ResilientStorage
gpgcheck=0

[ScalableFileSystem]    (大文件系统支持)
name=ScalableFileSystem
baseurl=http://172.25.39.250/rhel6.5/ScalableFileSystem
gpgcheck=0
yum repolist #刷新yum仓库

*repo id repo name status
*HighAvailability HighAvailability 56
*LoadBalancer LoadBalancer 4
*ResilientStorage ResilientStorage 62
*ScalableFileSystem ScalableFileSystem 7
*rhel6.5 Red Hat Enterprise Linux 3,690
*repolist: 3,819


2.几个集群的虚拟机中都需要安装ricci服务
yum install -y ricci
passwd ricci #修改ricci密码,最好密码设置为一致

  1. /etc/init.d/ricci start ##开启服务
    chkconfig ricci on ##开机自启动

4.clustat #用于测试查看集群当前状态

5.用于提供luci图形管理界面的主机需要安装luci服务具体操作如下

  yum install -y luci   ##图形操作界面luci服务安装
  /etc/init.d/luci start
  chkconfig luci on
 clustat

在浏览器:
https://172.25.40.1:8084 #安装了luci的主机,服务使用的端口为8084.
进入图形界面后点击create将几个集群节点往里头添加即可完成基本的搭建。

fence的配置过程

在真机山如下操作
1.用合适的镜像yum源,安装以下所需软件包

    yum install fence-virtd-multicast.x86_64  fence-virtd.x86_64 fence-virtd-libvirt.x86_64 -y(网络监听器、电源管理器、内核层面控制虚拟机,关掉的话用户空间不能访问)

2.修改fence的配置:

  fence_virtd -c

以下是出现的信息,部分直接回车即可

Module search path [/usr/lib64/fence-virt]: 

Available backends:
    libvirt 0.1
Available listeners:
    multicast 1.2

Listener modules are responsible for accepting requests
from fencing clients.

Listener module [multicast]: 

The multicast listener module is designed for use environments
where the guests and hosts may communicate over a network using
multicast.

The multicast address is the address that a client will use to
send fencing requests to fence_virtd.

Multicast IP Address [225.0.0.12]: 

Using ipv4 as family.

Multicast IP Port [1229]: 

Setting a preferred interface causes fence_virtd to listen only
on that interface.  Normally, it listens on all interfaces.
In environments where the virtual machines are using the host
machine as a gateway, this *must* be set (typically to virbr0).
Set to 'none' for no interface.

Interface [virbr0]: br0

The key file is the shared key information which is used to
authenticate fencing requests.  The contents of this file must
be distributed to each physical host and virtual machine within
a cluster.

Key File [/etc/cluster/fence_xvm.key]: 

Backend modules are responsible for routing requests to
the appropriate hypervisor or management layer.

Backend module [libvirt]: 

Configuration complete.

=== Begin Configuration ===
backends {
    libvirt {
        uri = "qemu:///system";
    }

}

listeners {
    multicast {
        port = "1229";
        family = "ipv4";
        interface = "br0";
        address = "225.0.0.12";
        key_file = "/etc/cluster/fence_xvm.key";
    }

}

fence_virtd {
    module_path = "/usr/lib64/fence-virt";
    backend = "libvirt";
    listener = "multicast";
}

=== End Configuration ===
Replace /etc/fence_virt.conf with the above [y/N]? y
  1. a) cd /etc/cluster
    b) dd if=/dev/urandom of=/etc/cluster/fence_xvm.key bs=128 count=1

  2. systemctl restart fence_virtd.service (确保火墙允许服务iptables -L)

    netstat -anulp | grep :1229
    udp 0 0 0.0.0.0:1229 0.0.0.0:* 8163/fence_virtd

  3. scp fence_xvm.key root@172.25.39.1:/etc/cluster/

    scp fence_xvm.key root@172.25.39.4:/etc/cluster/

配置过后可以在/etc/cluster目录下的配置文件来查看配置的情况

cd /etc/cluster/
cat cluster.conf
<?xml version="1.0"?>
<cluster config_version="7" name="clus">
    <clusternodes>
        <clusternode name="server1" nodeid="1">
            <fence>
                <method name="fence1">
                    <device domain="vm1" name="vmfence"/>
                </method>
            </fence>
        </clusternode>
        <clusternode name="server4" nodeid="2">
            <fence>
                <method name="fence4">
                    <device domain="vm4" name="vmfence"/>
                </method>
            </fence>
        </clusternode>
    </clusternodes>
    <cman expected_votes="1" two_node="1"/>
    <fencedevices>
        <fencedevice agent="fence_xvm" name="vmfence"/>
    </fencedevices>
</cluster>

两个集群主机上安装apache服务

yum install -y httpd
vim /var/www/html/index.html  

然后使用浏览器对其进行测试

网络设备iscis的配置

目的在于添加存储设备,以供两个集群的共享使用

在用于提供设备的主机上如下配置

 yum install -y iscsi-* #安装iscsi所需要的服务
vim /etc/tgt/targets.conf  #编写服务的配置文件如下
(38行)<target iqn.2007-07.com.example:server.target1>
             backing-store /dev/vdb  #存储设备
             initiator-address 172.25.40.1 #ACL
             initiator-address 172.25.40.4
         </target>

编写完毕后推出保存

/etc/init.d/tgtd start  #开启服务
tgt-admin -s        ##测试配置文件修改是否生效

在集群上如下配置

yum install -y iscsi-*  #安装iscsi的输出端

然后搜索网络设备

iscsiadm -m discovery -t st -p 172.25.39.2

然后登录到搜索到的设备上

iscsiadm -m node -l

成功登陆上设备时,会多出一个sda。
可以使用fdisk -l来查看
比较保险是cat /proc/partions(内核级别)
然后对这个sda进行分区,开始构造逻辑卷组

fdisk -cu /dev/sda   ##给sda分区 n->1 t ->8e->wq
vim /etc/lvm/lvm.conf   ##里面的状态会变成集群状态

然后开始构造逻辑卷,期间必须确保几个主机间是同步的

pvcreate /dev/sda1
vgcreate clustervg /dev/sda1
 lvcreate -L +2G -n demo clustervg
 mkfs.ext4 /dev/clustervg/demo  ##格式化为ext4文件系统

最后检测

clustat ##查看集群的信息
【vsphere高可用】主机故障切换 通过对资源使用施加一些限制,来确保群集内具有足够的资源,以便提供故障切换,并确保虚拟机有足够的预留资源。 阅读详情

相关推荐

Mac中使用Docker搭建Redis Cluster集群

是真的脑抽才会用Docker搭redis集群,homebrew安装的redis配多个配置文件应该也可以直接搭建,时间全花在搞Docker上了,后续有时间了搞一下另一种搭建方式再写一篇博客。真心建议不要用MacOS搭服务,很痛苦,有时候觉得还不如Windows。开发的话还可以。

sdujava2011 1944

【Vcenter】资源不足,无法满足配置的 vSphere HA 故障切换级别。

资源不足,无法满足配置的 vSphere HA 故障切换级别。解决方法:关闭HA功能。

qq_43691733的博客 3891

DeepSeek 框架和技术栈分析

DeepSeek 诞生于对更高效、更强大的深度学习计算和模型训练的追求。随着深度学习模型的规模不断增大,如大型语言模型(LLMs)和复杂的视觉模型,传统的框架在处理这些大规模模型时面临着性能瓶颈和资源利用效率低下的问题。DeepSeek 旨在解决这些问题,通过优化框架设计和采用先进的技术栈,实现更高效的模型训练和推理,同时降低计算成本。

yournameplease的专栏 1515

Redis-集群搭建(cluster集群、集群创建、节点配置、节点添加、节点删除、槽位分配)

Redis-集群搭建 在连接Redis集群搭建之前首先具备的前置知识有Redis的安装,Redis持久化,Redis主从复制,若还没了解都可以通过阅读以下文章了解以下 Liunx-安装Redis Redis-主从复制(一主二从、主从复制原理、单哨兵模式、多哨兵模式) Redis-持久化(RDB配置、RDB原理、AOF配置、AOF原理、混合持久化配置) 高可用集群 哨兵模式 其实对于一般的小型项目,利用哨兵模式+主从复制已经可以满足了,但是由于Redis是单线程应用所以在单主节点下理论上说Redis可以

JolyouLu的博客 4万+

Word公式一键转MathType保姆级教程(附omml2mml.xsl报错终极解决方案)

本文提供Word公式一键转MathType的保姆级教程,重点解决常见的omml2mml.xsl报错问题。通过详细分析报错原因、官方解决方案实操步骤及转换后格式优化技巧,帮助用户高效完成公式转换,适用于科研论文和商业文档编辑。

weixin_30082367的博客 576

染色体外环状DNA:肿瘤研究新方向

染色体外环状DNA(ecDNA)是癌症中活化原癌基因扩增的主要方式。区别于常染色体,这类生物大分子主要以环状的形式存在于细胞核当中,长度分布在103-106数量级,无中心粒。ecDNA序列中包含一个或者多个基因与调控元件,结构开放,转录活性强,相比于在棒状染色体结构基因,ecDNA的生物功能活性更强。癌症中,成环的基因区域拷贝数往往增高,而超过一半的高拷贝数事件是ecDNA驱动生成。...

blackjimmy的博客 767

群集的未预留容量不足,无法满足 vSphere HA 接入控制的配置级别

做HA测试的时候经常会碰到这个警告,导致HA失败,测试环境配置有限,可以通过禁用接入控制来完成测试 在HA配置中选择“接入控制”,其中有两个选项。 ■ 在虚拟机违反可用性限制时禁止虚拟机启动。 ■ 即使虚拟机违反可用性限制也允许启动虚拟机。 如果希望VMware HA 故障切换级别可以支持启动多台虚拟机的功能,请选择此选项。 生产环境的话,还是应按照官方的建议去设置

kepa520的博客 1万+

别再写前端了!用Gradio 3.x + HuggingFace Spaces,5分钟把你的Python算法变成网页应用

本文介绍如何利用Gradio 3.x和HuggingFace Spaces快速将Python算法转化为网页应用,无需前端开发经验。通过5行代码和简单的Git命令,即可实现专业级Web界面部署,大幅提升算法展示效率。特别适合算法工程师和数据科学家快速分享模型成果。

weixin_33443333的博客 334

Vcenter 资源不足,无法满足XXX中集群 上的vSphere HA故障切换级别

故障现象: 做Vmotion时发现报错:Vcenter 资源不足,无法满足XXX中集群 上的vSphere HA故障切换级别 点开集群摘要发现,预留cpu和内存都是100%. 解决过程如下:

Q先生 1万+

抖音无人直播技术全解析:从原理、实操到合规化思考

直播技术作为内容分发的核心形式,其底层依赖于流媒体协议(如RTMP)与实时音视频编码推流。通过OBS等软件进行场景合成与虚拟摄像头技术,可以实现丰富的画面包装与自动化播放。这项技术的核心价值在于突破人力与时间的限制,实现内容的持续输出与流量获取,在电商带货、品牌展示、陪伴式内容等场景中具有应用潜力。然而,单纯依赖录播循环存在高风险,平台风控系统会通过内容重复性检测与互动行为模型进行识别。因此,更可持续的方向是探索“半无人直播”或自动化辅助工具,例如利用AI数字人驱动或直播切片技术,在合规前提下提升运营效率。

weixin_29895109的博客 512

代谢组数据分析(二十四):基于tidymass包从质谱原始数据到代谢物注释结果的实践指南

本教程介绍了如何使用 R 语言中的 tidymass 包进行代谢组学数据分析。tidymass 是一个专为液相色谱-质谱(LC-MS)数据设计的开源工具,提供从数据准备到统计分析的全流程支持。教程详细讲解了数据准备、数据处理、数据探索、数据清洗、代谢物注释、统计分析及结果输出的步骤。用户需准备 MS1、MS2 数据和样本信息表,并通过 tidymass 进行峰识别、峰分组、保留时间校正等操作。数据处理后,用户可进行数据探索、清洗和代谢物注释,最终通过统计分析发现潜在的生物标志物,并输出结果。教程还提供了代码

专注生信领域 1638

实战使用 Docker Compose 搭建 Redis Cluster 集群

通过本文的实践,我们成功地使用Docker Compose搭建了一个Redis Cluster集群。这个过程不仅帮助我们理解了Redis Cluster的基本原理,还掌握了如何利用Docker Compose简化多容器应用的部署。其中重要的是Redis Cluster解决了分布式储存和提升高并发性能的瓶颈,大大提升了中间件和应用系统的高可用,简直不要太爽。

勤于笔记,成于点滴。 979

达梦数据库导入报错:[警告]服务器与文件内数据的 CASE_SENSITIVE 参数不匹配,成功终止导入, 但出现警告dimp V8,本地编码:PG_GBK, 导入文件编码:PG_UTF8

达梦数据库管理系统的最新版本是8.0版本,简称DM8。DM8采用全新的体系架构,在保证大型通用的基础上,针对可靠性、高性能、海量数据处理和安全性做了大量的研发和改进工作,极大提升了达梦数据库产品的性能、可靠性、可扩展性,能同时兼顾OLTP和OLAP请求,从根本上提升了DM8产品的品质。达梦数据库管理系统是达梦公司推出的具有完全自主知识产权的高性能数据库管理系统,简称DM。[警告]服务器与文件内数据的 CASE_SENSITIVE 参数不匹配,成功终止导入, 但出现警告。4.无视警告,输入y,回车。

十三月的博客 1万+

使用docker搭建 redis cluster 集群

使用docker搭建 redis cluster 集群

回首那天的博客 2301

Milvus 向量数据库部署方案全景指南:从单机开发到生产级高可用集群

本文系统介绍了Milvus向量数据库的四大部署方案:嵌入式开发利器Milvus Lite、单机简易部署Standalone模式、生产级高可用Cluster模式以及全托管SaaS服务Zilliz Cloud。针对不同应用场景(开发测试、小型应用、大规模生产环境),详细分析了各模式的适用条件、资源配置要求和部署步骤,并提供了关键配置示例。文章强调正确选择部署方案对系统性能至关重要,帮助开发者根据向量规模、QPS和高可用需求,选择最优部署方式,实现资源优化与稳定运行。

reset2021的博客 387

VB摄像头监控

该VB模块可对摄像头捕获的画面进行录像等,可在创建的窗口进行控制

使用docker-compose搭建redis-cluster集群

如果你也因为centos的gcc版本落后导致redis编译安装不通过而烦恼,大可以试一试用docker去搭建redis集群。本文以单节点搭建redis-cluster三主三从为例。

feifeigo123的博客 633

廖雪峰Python教程[完整版]

廖雪峰的python教程整理的,已经排好版了,而且还是完整的,适合小白

使用docker-compose 快速搭建Percona XtraDB Cluster(pxc集群)

使用docker-compose 快速搭建Percona XtraDB Cluster(pxc集群) Percona XtraDB Cluster(下文简称PXC集群)提供了MySQL高可用的一种实现方法。PXC集群以节点组成(推荐至少3节点,也就是节点数是奇数),每个节点都是基于常规的MySQL/Percona Server,意味着你可以从集群中分离出某节点单独使用。集群中每个节点都包含完整的数据库数据。 pxc与其他的MySQL集群相比,优势明显,不像mha,...

zsk_john的技术分享专用博客 1827

android 蓝牙通讯demo

android 下蓝牙通讯demo,实现了发现蓝牙,使能蓝牙,通过蓝牙发送消息。

Redis cluster集群的搭建及一些基本使用

我们都知道Redis的分布式除了有cluster以外还有sentinel机制,他们都能实现主从复制和故障转移,但是为什么还要有这两种实现的区别呢?因为在官方也没有具体介绍,所以这里根据个人理解来说一下,我们这里想一下,如果在redis中的数据超过了一个机器的内存可用量,如果在往redis中新增数据,这个时候是不是会出现内存泄漏之类的错误,这个时候我们该怎么办?sentinel机制的...

XinhuaShuDiao的博客 434

基于Redis5.0,使用redis自带脚本create-cluster搭建Redis集群

基于Redis5.0,使用create-cluster脚本创建Redis集群 官网地址 redis集群配置 安装Redis5.0以上版本,自行安装 找到Redis安装目录下的utils/create-cluster文件 基于utils/create-cluster目录下的create-cluster脚本文件配置集群 PORT=50000 #初始端口号,会自动+1,可自行修改 IP=0.0.0.0 #bind ip PWD=ywzs@2020! #密码 TIMEOUT=2000 NODES=6 #六个

苏夏未来 1154

linux服务器上使用docker-compose搭建redis-cluster集群

redis-cluster集群说明 集群架构:cluster集群模式,3主3从 网络模式:host ##在host模式下,container共用宿主机的ip,因此不需要做端口映射 redis版本:latest 使用工具 redis-cluster文件夹,文件夹下有以下五个文件及其说明。 Docker-compose: docker官方编排项目之一,负责快速部署分布式应用 Docker-compose.yml:redis-cluster集群redis节点初始化文件 Dockerfile:集群节点redis镜

the_bud的博客 633

redis单点、主从、哨兵 sentinel、redis集群cluster配置搭建使用

redis是如今被互联网公司使用最广泛的一个中间件,我们打开GitHub搜索redis,便可以看到,该项目的介绍是这样的: CopyRedis is an in-memory database that persists on disk. The data model is key-value, but many different kind of values are supported: Strings, Lists, Sets, Sorted Sets, Hashes, HyperLogLogs,

如果频繁就私信一下呢 360

使用docker搭建redis-cluster集群

一、安装docker yum update ---> 执行以下命令:添加yum仓库,使用阿里云的源 sudo yum install -y yum-utils device-mapper-persistent-data lvm2 sudo yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo 安装最新版docker:yum

u010695169的博客 2691

使用docker redis-cluster集群搭建

参考https://www.cnblogs.com/cxbhakim/p/9151720.html此文 主要搭建过程参考上文,此处讲下主要过程和遇到的坑 首先是镜像的基础搭建,我不知道是否是作者编写时和我现在的版本不同了,第一个坑点Dockerfile中FROM Centos:7,这去掉算是博文复制时的bug吧,还有Centos现在不支持大写,需要改成centos Dockerfile中的注...

tzxylao的博客 101

Redis Cluster 集群搭建和集成使用的详细步骤示例

通过以上步骤,您已成功搭建Redis集群并将其集成到Spring Boot应用中,实现了分布式缓存功能。

bsklhao的博客 1289

Linux Redis-Cluster集群搭建与使用

介绍安装环境与版本用两台虚拟机模拟6个节点,一台机器3个节点,创建出3 master、3 salve 环境。Redis 采用 redis-3.2.4 版本。两台虚拟机都是 CentOS ,一台 CentOS6.5 (IP:192.168.31.245),一台 CentOS7(IP:192.168.31.210) 。安装过程1. 下载并解压 123 cd /root/softwarewget htt

一掬净土 814

快速使用Docker搭建redis-cluster集群

本地5分钟搭建一套redis-cluster环境

qq_40111437的博客 987
上一篇: Python面向对象编程(1):基类与__init__()方法
下一篇: GRUB下对linux系统的引导
parameter_
博客等级 码龄10年 24粉丝 102原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值