学习笔记—文件管理—minio，安装、集群部署及与Springboot结合-优快云博客

本文链接：https://blog.youkuaiyun.com/qq_34257208/article/details/143026525

MinIO

MinIO 是一个高性能的对象存储系统，专为私有云和混合云环境设计，支持存储海量的非结构化数据，如图片、视频、备份、日志文件等。MinIO 提供了与 Amazon S3 兼容的 API，因此它通常用于构建可自托管的对象存储解决方案，尤其在那些需要高可用性和扩展性的场景中。

MinIO的主要特性

与 S3 兼容的 API：MinIO 完全兼容 AWS S3 的 API。这意味着你可以使用现有的 S3 客户端库和工具来与 MinIO 交互，这使得它非常适合那些希望在本地或私有云环境中复用 S3 代码和工具的用户。

横向扩展：MinIO 允许通过增加更多节点来横向扩展存储容量和性能。这使得它能够随着业务需求的增长轻松扩展，从而满足海量数据存储的需求。

高性能：MinIO 被设计为一个极高性能的对象存储系统。它利用现代硬件的多核处理能力和高速网络，能够处理大规模的存储请求，特别适合数据密集型任务，如机器学习、数据分析和视频流等。

分布式存储：MinIO 支持分布式部署，能够通过多个节点进行数据复制和分片，从而保证数据的高可用性和持久性。即使某个节点失效，数据也能通过冗余机制进行恢复。

Kubernetes 支持：MinIO 天然与 Kubernetes 兼容，能够在容器化环境中进行自动化管理和扩展，适合云原生应用。

高可用性和容错性：通过分布式部署，MinIO 提供了容错和数据冗余功能。即使某些磁盘或节点故障，系统仍然能够继续工作并确保数据完整性。

加密和安全性：MinIO 支持服务器端加密和传输层加密（TLS），能够保护数据的机密性和完整性。此外，MinIO 支持基于策略的访问控制（IAM）和 LDAP 等集成，提供精细化的权限管理。

MinIO的架构

MinIO 采用微服务架构，特别注重简洁和高效。它没有复杂的依赖关系，所有功能都打包在一个二进制文件中。这使得 MinIO 在多种场景下的部署和管理非常简单。

单一二进制文件：MinIO 通过单一的二进制文件提供了所有功能，包括对象存储、API 接口、安全、容错等。这简化了安装、部署和维护的过程。

无状态架构：MinIO 是一个无状态服务，这意味着它没有依赖外部数据库或元数据存储。所有元数据和文件数据都存储在磁盘上或通过分布式文件系统管理。

水平扩展：MinIO 通过增加节点的方式进行水平扩展，且每个节点可以是物理机、虚拟机或容器。扩展时只需将新节点加入集群即可自动扩展存储能力。

多租户支持：MinIO 支持多租户架构，能够为多个应用或团队提供隔离的存储空间。

MinIO的典型使用场景

大数据分析：MinIO 可用于存储海量数据，为大数据平台（如 Apache Spark、Hadoop 等）提供高性能的存储后端。

机器学习：机器学习模型的训练通常需要大量的图像、视频或日志文件，MinIO 的高吞吐和可扩展性非常适合这类场景。

备份和恢复：MinIO 常被用作企业的备份解决方案，能够存储大量的备份数据，并确保其高可用性。

私有云和混合云：许多企业希望在私有云或混合云中构建与 S3 兼容的存储解决方案，以降低公共云存储的成本或满足数据合规性需求。

数据湖存储：MinIO 是现代数据湖架构的理想存储层，它可以无缝地与大数据工具集成，支持对非结构化和半结构化数据进行高效管理。

Kubernetes：MinIO 可以作为 Kubernetes 中的持久存储，支持动态存储卷和持久化卷声明（PVC）。

CI/CD：通过与 Jenkins、GitLab 等 CI/CD 工具的集成，MinIO 可以用于存储构建工件、备份文件等。

MinIO的安装与使用

MinIO 的安装非常简单，可以在各种操作系统（Linux、macOS、Windows）上运行。

首先，是单机安装方式：

# 在 Linux 环境下安装 MinIO
wget https://dl.min.io/server/minio/release/linux-amd64/minio
chmod +x minio
# 将 MinIO 服务器指向 /data 目录
./minio server /data

当然，还有比较简单的方法是docker安装：

docker pull minio/minio
# 创建挂载目录
mkdir -p /home/minio/config
mkdir -p /home/minio/data
# 运行 MinIO 容器
docker run -p 9000:9000 -p 9090:9090 \
     --net=host \
     --name minio \
     -d --restart=always \
     -e "MINIO_ACCESS_KEY=gagaduck" \
     -e "MINIO_SECRET_KEY=gagaduck" \
     -v /home/minio/data:/data \