解决K8s数据持久化难题：从NFS到Ceph的企业级存储方案实践-优快云博客

解决K8s数据持久化难题：从NFS到Ceph的企业级存储方案实践

【免费下载链接】awesome-kubernetes A curated list for awesome kubernetes sources :ship::tada: 项目地址: https://gitcode.com/gh_mirrors/aw/awesome-kubernetes

在Kubernetes（简称K8s）环境中，容器的短暂性使得持久化存储（Persistent Storage） 成为保障数据安全的核心需求。无论是用户数据、应用配置还是数据库文件，都需要跨越Pod生命周期实现稳定存储。awesome-kubernetes项目收录了多种存储解决方案，本文将聚焦NFS（网络文件系统） 和Ceph（分布式存储系统） 两种主流方案，详解其部署流程与最佳实践。

持久化存储核心挑战与方案选型

K8s持久化存储的核心目标是实现数据持久性与容器动态调度的平衡。根据数据规模和可用性需求，awesome-kubernetes提供了多层次解决方案：

存储方案	适用场景	优势	部署复杂度
NFS	中小规模集群、开发环境	配置简单、成本低	⭐⭐☆☆☆
Ceph	大规模集群、生产环境	高可用、横向扩展	⭐⭐⭐⭐☆
GlusterFS	多节点文件共享	兼容性强	⭐⭐⭐☆☆

更多存储项目可参考项目资源清单中的Database与Applications章节。

方案一：NFS快速部署与动态供应

NFS通过网络共享目录实现存储，适合对性能要求不高的场景。以下是基于K8s的部署步骤：

1. 部署NFS服务器（单节点示例）

# nfs-server.yaml
apiVersion: apps/v1
kind: Deployment
metadata:
  name: nfs-server
spec:
  replicas: 1
  selector:
    matchLabels:
      app: nfs-server
  template:
    metadata:
      labels:
        app: nfs-server
    spec:
      containers:
      - name: nfs-server
        image: itsthenetwork/nfs-server-alpine:latest
        ports:
        - containerPort: 2049
        env:
        - name: SHARED_DIRECTORY
          value: /data
        volumeMounts:
        - name: nfs-data
          mountPath: /data
      volumes:
      - name: nfs-data
        hostPath:
          path: /var/nfs/data
          type: DirectoryOrCreate

2. 创建StorageClass与PVC

# nfs-storageclass.yaml
apiVersion: storage.k8s.io/v1
kind: StorageClass
metadata:
  name: nfs-sc
provisioner: k8s-sigs.io/nfs-subdir-external-provisioner
parameters:
  archiveOnDelete: "false"

通过PVC动态申请存储：

apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: nfs-pvc
spec:
  accessModes:
    - ReadWriteMany
  storageClassName: nfs-sc
  resources:
    requests:
      storage: 10Gi

完整部署工具链可参考安装指南中的存储插件章节。

方案二：Ceph分布式存储部署

Ceph基于对象存储（RBD）提供高可用存储，适合生产环境。部署需通过Rook operator简化管理：

1. 部署Rook Operator

git clone https://gitcode.com/gh_mirrors/aw/awesome-kubernetes
cd awesome-kubernetes
kubectl apply -f docs/applications/rook-ceph/operator.yaml

2. 创建Ceph集群与存储池

# cluster.yaml
apiVersion: ceph.rook.io/v1
kind: CephCluster
metadata:
  name: rook-ceph
  namespace: rook-ceph
spec:
  cephVersion:
    image: ceph/ceph:v17.2.6
  dataDirHostPath: /var/lib/rook
  mon:
    count: 3
  storage:
    useAllNodes: true
    useAllDevices: false
    devices:
    - name: sdb

3. 创建RBD存储类

apiVersion: storage.k8s.io/v1
kind: StorageClass
metadata:
  name: rook-ceph-block
provisioner: rook-ceph.rbd.csi.ceph.com
parameters:
  clusterID: rook-ceph
  pool: replicapool
  imageFormat: "2"
  imageFeatures: layering
  csi.storage.k8s.io/provisioner-secret-name: rook-csi-rbd-provisioner
  csi.storage.k8s.io/node-stage-secret-name: rook-csi-rbd-node

部署细节可参考官方应用文档中的Storage分类。

方案对比与最佳实践

性能与可用性对比

NFS：单节点写入性能约100-200MB/s，无冗余机制，适合非核心业务。
Ceph：三副本配置下读性能提升3倍，支持自动故障转移，满足99.99%可用性要求。

生产环境关键配置

NFS安全加固：
- 限制客户端IP（/etc/exports中配置子网）
- 启用Kerberos认证（适合多租户场景）
Ceph性能优化：
- 选择SSD作为OSD缓存盘
- 调整pg_num参数（计算公式：Total PGs = (OSD数量 * 100) / 副本数）

监控与运维工具

NFS监控：通过Prometheus采集nfs-exporter指标
Ceph管理：使用Rook Dashboard可视化集群状态

总结与扩展学习

NFS与Ceph分别覆盖了K8s持久化存储的轻量级与企业级需求。实际部署中需结合数据重要性、集群规模和成本预算选择方案。awesome-kubernetes还提供了更多存储工具，如：

MinIO：S3兼容对象存储（项目链接）
Longhorn：云原生分布式块存储（应用文档）

深入学习可参考：

K8s存储官方教程
持久化存储视频课程

通过本文方案，可快速构建从开发测试到生产环境的全链路存储体系，确保容器数据的安全性与可扩展性。

【免费下载链接】awesome-kubernetes A curated list for awesome kubernetes sources :ship::tada: 项目地址: https://gitcode.com/gh_mirrors/aw/awesome-kubernetes

创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考