Openstack 与 Ceph集群搭建(中)： Ceph部署

参考文章

Openstack 官方对接ceph文档
Openstack 与 Ceph集群搭建(上)： 规划与准备
Openstack 与 Ceph集群搭建(中)： Ceph部署
Openstack 与 Ceph集群搭建(下)： Openstack部署
Openstack 与 Ceph集群搭建(完结)： 配置Ceph作为Openstack后端存储

一、部署前说明

本文采用cephadm进行安装Ceph，cephadm是官方推荐的ceph集群部署工具。

1. ceph 版本选择依据

在上一篇文章：Openstack 与 Ceph集群搭建(上)中说明了ceph版本选择， 这里提供相关依据：

2. ceph网络要求

根据官方要求，Ceph集群至少需要10Gb/s的网络带宽

官方链接：https://docs.ceph.com/en/latest/start/hardware-recommendations/#networks

3. 硬件要求

二、部署架构

Ceph 集群需要部署4个组件，OSD、MON、MDS ，各接点部署，如下图：

• OSD：Ceph OSD(Object Storage 对象存储守护进程)存储数据，处理数据复制、恢复、重新平衡；并通过检查其他Ceph OSD守护进程的心跳来向Ceph监视器和管理器提供信息。通常至少要3个Ceph OSD节点来实现冗余和高可用性。本质上OSD就是一个个Host节点上的存储磁盘。
• Monitors：Ceph Monitor (守护进程 ceph-mon)维护集群的映射，包括监视器映射、管理器映射、OSD映射、MDSS映射和CRUSH映射。这些映射是Ceph守护进程相互协调所需的关键集群状态。 监视器还负责管理守护进程和客户端之间的身份验证。 通常至少需要三个监视器才能实现冗余和高可用性。基于paxos协议实现节点间的信息同步。
• Managers：Ceph管理器(守护进程ceph-mgr)负责跟踪运行时的指标和Ceph集群的当前状态，包括存储利用率、当前性能指标和系统负载。Ceph管理器守护进程还托管基于Python的模块来管理公开Ceph集群信息，包括基于Web的Ceph仪表盘和REST API。高可用通常至少要2个管理器。基于raft协议实现节点间的同步。
• MDSs：Ceph元数据服务器（MDS Metadata Server、 ceph-mds）代表Ceph文件系统存储元数据。Ceph元数据服务器允许POSIX（为应用程序提供接口标准）文件系统用户执行基本命令（如ls、find等），而不会给Ceph存储集群带来巨大负担。

类型	节点
部署节点	node-03 172.16.250.248
OSD节点	node-01 172.16.250.250；node-02 172.16.250.249 ；node-03 172.16.250.248
MON节点	node-01 172.16.250.250；node-02 172.16.250.249 ；node-03 172.16.250.248
MDS节点	node-01 172.16.250.250；node-02 172.16.250.249 ；node-03 172.16.250.248
MGR节点	node-01 172.16.250.250；node-03 172.16.250.248

三、部署过程

1. 通用步骤

在全节点安装docker

apt install docker.io

2. 部署管理节点

这里的管理节点也是部署节点 node-03

创建账号

在部署节点添加ceph用户

useradd -d /home/ceph_user -m ceph_user 
passwd ceph_user