ceph-deploy部署ceph集群

最新推荐文章于 2025-03-22 01:23:39 发布
置顶 最新推荐文章于 2025-03-22 01:23:39 发布
阅读量502 收藏
点赞数
分类专栏： ceph 文章标签： ceph openstack 集群
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/qingstack/article/details/39519329
版权
  • 关闭系统iptables /selinux (这一步很关键)
service iptables stop
chkconfig iptables off

vim /etc/sysconfig/selinux
SELINUX=disabled

重启系统 shutdown -r now
  • 部署规划
ceph-deploy-->node1 and node2 and node3 and node...N

  • 创建ceph.repo源
vim /etc/yum.repos.d/ceph.repo 

baseurl=http://ceph.com/rpm-firefly/el6/$basearch
priority=1
gpgcheck=1
type=rpm-md

[ceph-source]
name=Ceph source packages
gpgkey=https://ceph.com/git/?p=ceph.git;a=blob_plain;f=keys/release.asc
enabled=1
baseurl=http://ceph.com/rpm-firefly/el6/SRPMS
priority=1
gpgcheck=1
type=rpm-md

[Ceph-noarch]
name=Ceph noarch packages
gpgkey=https://ceph.com/git/?p=ceph.git;a=blob_plain;f=keys/release.asc
enabled=1
baseurl=http://ceph.com/rpm-firefly/el6/noarch
priority=1
gpgcheck=1
type=rpm-md

  • 在admin-node安装ceph-deploy
yum install -y http://dl.fedoraproject.org/pub/epel/6/x86_64/epel-release-6-8.noarch.rpm
yum install -y ceph-deploy

  • openssh-server 无密码访问
  1. 所以节点安装  yum install openssh-server 
  2. 关闭防火墙和selinux
  3. 修改/etc/sudoers的第 56行 加个！
  4. sshgen-key  ssh-copy-id  主机
  5. 测试无密码访问正常
  • ceph-deploy 创建指导节点为mon节点  ceph-deploy  new zz-mon.zyunsoft.com
  • 修改ceph.conf配置文件 
添加如下：
osd pool default size = 3

[osd]
osd_mount_options_xfs = rw,noatime
keyring = /etc/ceph/keyring.$name
osd_mkfs_options_xfs = -f
public_network = 192.168.20.0/24
osd_mkfs_type = xfs
cluster_network = 172.16.20.0/24
osd_journal_size = 16384

  • 登录各节点安装ceph    
yum install *argparse* -y
ceph-deploy install zz-com04 zz-store01 zz-store02 zz-store03
  • 添加初始监控节点并收集密钥
ceph-deploy mon create-initial
  • 在一个节点列出磁盘, 执行以下命令:
ceph-deploy disk list zz-store01 zz-store02 zz-store03
  • 在主分区中使用Ceph遥控磁盘 (删除它的分区表) ,执行以下命令: (重要：这会删除所有数据)
ceph-deploy disk zap zz-store01:sdb  zz-store01:sdc zz-store01:sdd zz-store01:sde  zz-store02:sdb  zz-store02:sdc zz-store02:sdd zz-store02:sde zz-store03:sdb  zz-store03:sdc zz-store03:sdd zz-store03:sde
  • 安装每个节点的硬盘去集群
ceph-deploy osd create zz-store01:sdb:/srv/ceph/osd.0 zz-store01:sdc:/srv/ceph/osd.1 zz-store01:sdd:/srv/ceph/osd.2 zz-store01:sde:/srv/ceph/osd.3 zz-store02:sdb:/srv/ceph/osd.4 zz-store02:sdc:/srv/ceph/osd.5 zz-store02:sdd:/srv/ceph/osd.6 zz-store02:sde:/srv/ceph/osd.7 zz-store03:sdb:/srv/ceph/osd.8  zz-store03:sdc:/srv/ceph/osd.9 zz-store03:sdd:/srv/ceph/osd.10 zz-store03:sde:/srv/ceph/osd.11
  • copy ceph.conf  ceph.client.admin.keyring 配置文件去其他节点
ceph-deploy admin zz-store01 zz-store02 zz-store03
  • 添加osd去集群、
ceph-deploy osd --zap-disk create zz-store03:sde
  • 在ceph_node上查看集群硬盘，
ceph osd ls
ceph osd tree
  • 创建ceph mds节点
ceph mds create zz-store01

  • 添加集群文件去开机启动1
1.依据下面的在/etc/fstab  添加挂载点
/dev/sdb1                /var/lib/ceph/osd/ceph-4  xfs   rw,noexec,nodev,noatime,nodiratime,barrier=0   0 0
/dev/sdc1                /var/lib/ceph/osd/ceph-5  xfs   rw,noexec,nodev,noatime,nodiratime,barrier=0   0 0
/dev/sdd1                /var/lib/ceph/osd/ceph-6  xfs  rw,noexec,nodev,noatime,nodiratime,barrier=0   0 0
/dev/sde1                /var/lib/ceph/osd/ceph-7  xfs  rw,noexec,nodev,noatime,nodiratime,barrier=0   0 0

2.修改/etc/rc.local
/etc/init.d/ceph restart



部署参考：
基于ceph-deploy部署Ceph集群
weixin_73725203的博客
05-06 2166
本例主要是使用Linux客户端挂载RBD镜像为本地磁盘使用。开始之前需要在所需要客户端节点上面安装ceph-common软件包，因为客户端需要调用rbd命令将RBD镜像映射到本地当作一块普通硬盘使用。并还需要把ceph.conf配置文件和授权keyring文件复制到对应的节点。#使用 resize 调整镜像大小，一般建议只增不减，如果是减少的话需要加选项 --allow-shrink。在节点上开启dashboard模块，禁用ssl连接，并配置dashboard监听的地址和端口。
基于ceph-deploy部署Ceph 集群
m0_71593537的博客
03-02 1674
基于ceph-deploy部署Ceph 集群
ceph-deploy.zip
07-15
ceph-deploy 是一个 Ceph 的简易部署工具，可以非常方便的部署 Ceph 集群存储系统。 标签：cephdeploy
ceph-deploy new
jason的笔记
11-14 2953
ceph-deploy new 命令用于开始部署新的集群，使用的例子如下： ceph-deploy new host-225 host-227 host-229 执行成功后该目录下会增加三个文件 [root@dn-5-221 ceph]# ll total 12 -rw-r--r-- 1 root root 276 Jun 26 22:01 ceph.conf -rw-r--r-- 1 roo
基于 ceph-deploy 部署 Ceph 集群
最新发布
MagicB0y的博客
03-22 490
概念性的东西就不讲了，直接上步骤实验准备：所有节点 root 用户密码为 123123，这里只规划了 mon、mgr、osd 等组件节点，如需其他组件请按需求进行添加主机名Role管理节点负责集群整体部署ceph-mon1mon1ceph-mon2mon2ceph-mon3mon3ceph-mgr1mgr1ceph-mgr2mgr2ceph-osd1ceph-osd2ceph-osd3。
Ceph-deploy搭建ceph集群
qq_31055683的博客
08-30 1455
Ceph可用于为云平台提供Ceph对象存储、块存储、文件系统存储。所有Ceph存储集群部署都从设置每个Ceph节点开始，然后设置网络块存储RedismasterslavezookeeperMysqlmasterslavecephFS对象存储Ceph存储集群需要以下内容：至少一个和至少一个，以及至少与Ceph集群中存储的给定对象的副本一样多的Ceph对象存储守护进程（OSD）（例如，如果给定对象的三个副本存储在Ceph集群中，则该Ceph集群中必须至少存在三个OSD）
推荐：使用 Ceph-Deploy 快速部署 Ceph 集群
gitblog_00069的博客
03-18 444
推荐：使用 Ceph-Deploy 快速部署 Ceph 集群 ceph-deployDeploy Ceph with minimal infrastructure, using just SSH access项目地址:https://gitcode.com/gh_mirrors/ce/ceph-deploy 如果你正在寻找一种简单、快速的方法来部署 Ceph 存储集群，那么你应该尝试一下 。 什...
ceph-deploy部署client
魂醉的一亩二分地
07-29 734
如图，要使用ceph,需要在使用的服务器上安装ceph 在集群的admin节点/etc/hosts添加 192.168.173.41 client01 客户端hosts 192.168.183.11 ceph01 192.168.183.12 ceph02 192.168.183.13 ceph03 192.168.173.41 client01 yum配置如上一篇文...
如何调试使⽤ceph-deploy部署的ceph集群.pdf
03-16
本篇文章主要介绍如何调试使用ceph-deploy部署的Ceph集群，包括环境准备、源码编译、集群部署以及使用gdb进行调试的具体步骤。 在正式开始调试之前，首先需要了解所部署集群的系统环境，本例中使用的Ceph版本是14.2...
【Ceph】基于ceph-deploy部署Ceph集群详解
陌上花开，静待绽放！
07-17 1245
我们相恋的季节，从夏天到冬天，记忆一页页翻阅，你却留下了思念。
Openstack云平台上基于ceph-deploy部署Ceph集群(O版)
qq_58034031的博客
03-15 368
ceph版本： 15.2.17 octopus (stable)安装方式：ceph-deploy系统版本：Centos7.6_x64。
ceph-deploy部署(3).docx
07-31
ceph-deploy部署文档（2020最新）centos7 ceph.14 最详细的部署教程。系统：centos7,ceph版本为14.走过路过不要错过
Centos7下使用Ceph-deploy快速部署Ceph分布式存储操作记录（个人精华版）
08-30
本篇文章详细记录了Centos7下使用Ceph-deploy快速部署Ceph分布式存储操作过程，可以作为线上环境实操手册。在此分享，希望能帮助到有用到的朋友。
使用ceph-deploy部署Ceph集群
半斤米粉闯天下的博客
04-24 8575
初次入门，使用ceph-deploy工具快速安装(相比于手工安装)一套三节点的Ceph集群，并最终创建对象存储服务进行系统验证。 预先了解两个基本概念： mon：osd监视器，osd的守护进程，通常一个osd对应一个mon osd：实际存储数据，通常直接对应一块硬盘 三台机器(Ubuntu 16.04)：172.31.0.5，172.31.0.13，172.31.0.22，分别命名为ceph0...
官方工具Ceph-deploy部署chenlc
RJ0024的博客
02-02 764
前言 Ceph是优秀的分布式存储集群，可以为云计算提供可靠的存储服务，本次作者示范部署ceph存储集群，使用的系统ubuntu18.04.2，部署的ceph版本为Luminous，即Ceph 12.x。本次的范例是使用ceph的官方工具ceph-deploy进行部署服务。由于ceph的使用条件苛刻，不推荐在生产环境使用云主机部署，所以本次的部署测试使用睿江云的云主机部署服务是一个合适的选择。 先说明下搭建环境与各主机角色。 机器选择：睿江云平台 节点选择：广东G（VPC网络更安全、SSD磁盘性能高） 云主机
使用ceph-deploy部署ceph集群
zhoushuyu1990的博客
10-13 274
一、ceph集群架构 二、准备工作 2.1 配置时钟同步 root@ceph-deploy:~# crontab -e # 添加 */5 * * * * /usr/sbin/ntpdate time1.aliyun.com &> /dev/null && hwclock -w &> /dev/null root@ceph-deploy:~# cat /etc/hosts # 添加 # 阿里云ntp服务器 120.25.115.20 nt
使用ceph-deploy部署ceph环境
zgb40302的专栏
08-09 2954
uname -r 3.10.0-123.el7.x86_64 ceph -v ceph version 0.94.7 (d56bdf93ced6b80b07397d57e3fa68fe68304432) (1) 准备5台机器并修改/et/hosts文件。  192.168.0.2       ceph-client  192.168.0.3       ceph-admin
使用ceph-deploy安装Ceph 12.x（序言）
FinixLei的专栏 (https://github.com/FinixLei)
02-23 1059
下面这一系列的文章将主要讲解如何安装社区版的Ceph. 要安装的版本是Luminous，即Ceph 12.x 使用的操作系统是CentOS 7.3-1611. 主要的参考文献是Ceph官网的文档： 使用ceph-deploy安装Ceph的总览 Installation (ceph-deploy) 准备工作 Preflight 安装一个Ceph集群 Storage Clust...
Ceph集群部署（基于ceph-deploy）
2401_83784772的博客
07-14 3612
一个集群自动化部署工具，使用较久，成熟稳定，被很多自动化工具所集成，可用于生产部署。3.admin管理节点配置ssh免密登录node节点。部署Ceph实验（基于ceph-deploy）2.安装ceph-deploy部署工具。10.解决HEALTH_WARN问题。7.使其它节点可以管理Ceph群集。1.创建一个Ceph工作目录。6.配置Ceph yum源。3.手动安装Ceph软件包。部署Ceph集群的方法。部署Ceph集群的方法。8.部署osd存储节点。Ceph生产环境推荐。三、部署Ceph集群。
麒麟v10使用ceph-deploy部署ceph集群
03-12
<think>嗯，用户想在麒麟V10操作系统上用ceph-deploy部署Ceph集群。首先，我需要确认ceph-deploy的版本是否支持Kylin V10。根据引用[4]，用户提到ceph-deploy-1.5.39版本没有mgr的部署选项，可能需要注意版本兼容性。Ceph L版本12.2.12可能需要特定版本的ceph-deploy，可能需要用户检查官方文档或社区支持。 然后，用户的环境准备方面，需要确保所有节点的主机名解析正确，SSH免密登录配置好，以及防火墙和SELinux的设置。引用[3]中提到磁盘必须未使用且没有数据，所以在部署OSD时要注意这一点。另外，引用[2]指出Ceph的核心组件，包括Monitor、Manager、OSD等，部署时需要按照步骤依次安装这些组件。 可能遇到的问题包括网络无法访问Ceph官网，导致依赖包安装失败。这时候可能需要配置本地源或者使用离线安装包。另外，麒麟V10是基于CentOS的，可能需要处理依赖包冲突，比如Python版本的问题。引用[1]提到ceph-deploy的配置文件位置，用户可能需要根据情况调整配置文件。 在部署步骤中，初始化Monitor节点是关键，如果失败需要检查时钟同步和主机名解析。创建OSD时，确保磁盘正确，可能需要使用ceph-deploy osd create命令，如引用[3]中的例子。最后，部署MGR和MDS也是必须的，但引用[4]指出旧版可能不支持，所以需要确认ceph-deploy版本是否包含这些功能。 测试集群状态时，ceph -s命令可以查看健康状况，如果出现错误，可能需要检查各个服务的日志。常见问题如网络问题、权限问题或者依赖缺失都需要逐步排查。用户可能需要参考引用中的配置文件和命令示例，确保每一步都正确执行。</think>### 在Kylin V10中使用ceph-deploy部署Ceph集群的步骤 #### 一、环境准备 1. **节点规划** - 至少3个节点（1个`ceph-deploy`管理节点，1个Monitor节点，多个OSD节点） - 示例配置： - 管理节点：`admin-node` - Monitor节点：`ceph-mon1` - OSD节点：`ceph-osd1`, `ceph-osd2` 2. **系统配置** - 所有节点配置主机名解析（`/etc/hosts`或DNS） - 配置SSH免密登录（管理节点到其他节点） - 关闭防火墙和SELinux： ```bash systemctl stop firewalld setenforce 0 ``` 3. **依赖安装** - 在管理节点安装`ceph-deploy`： ```bash yum install -y python3-pip pip3 install ceph-deploy==2.0.1 # 选择兼容Kylin V10的版本[^4] ``` #### 二、部署Ceph集群 1. **初始化集群配置** ```bash mkdir ceph-cluster && cd ceph-cluster ceph-deploy new ceph-mon1 # 生成初始配置文件[^1] ``` 2. **安装Ceph组件** ```bash ceph-deploy install --release luminous admin-node ceph-mon1 ceph-osd1 ceph-osd2 ``` > 注意：若网络受限，需提前配置本地Yum源[^4] 3. **部署Monitor** ```bash ceph-deploy mon create-initial ceph-deploy admin admin-node ceph-mon1 # 同步配置文件[^2] ``` 4. **部署OSD** - 清理磁盘（以`/dev/sdb`为例）： ```bash ceph-deploy disk zap ceph-osd1 /dev/sdb[^3] ``` - 创建OSD： ```bash ceph-deploy osd create --data /dev/sdb ceph-osd1 ceph-deploy osd create --data /dev/sdb ceph-osd2 ``` 5. **部署MGR和MDS（可选）** ```bash ceph-deploy mgr create ceph-mon1 ceph-deploy mds create ceph-mon1 ``` #### 三、验证集群状态 ```bash ssh ceph-mon1 ceph -s # 检查HEALTH_OK状态 ``` #### 四、常见问题处理 | 问题现象 | 解决方案 | |---------|----------| | `ceph-deploy`安装失败 | 检查Python3版本，建议3.6+ | | Monitor启动超时 | 确认节点时钟同步（NTP服务） | | OSD无法创建 | 检查磁盘是否未分区（使用`lsblk`验证）[^3] | ###
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值