MINIIO 分布式存储搭建使用-转载

转载原文链接:https://blog.youkuaiyun.com/weixin_39041354/article/details/138183598

背景:

        MinIO 是一个基于Apache License v2.0开源协议的对象存储服务。它兼容亚马逊S3云存储服务接口,非常适合于存储大容量非结构化的数据,例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等,而一个对象文件可以是任意大小,从几kb到最大5T不等。

一、官方网站:

MinIO | 用于AI的S3 & Kubernetes原生对象存储                #中文官网

二、搭建方式:

本次还是使用Docker 方式去搭建的,借用1Panel 可视化面板去部署一键部署应用。

1、安装1Panel

1Panel 系统借助 SFTPGo 应用,可以快速创建 SFTP、FTP 和 WebDAV 服务,支持多用户、多目录、多权限。 

参考文档:FTP - 1Panel 文档

1Panel 是新一代的 Linux 服务器运维管理面板功能和宝塔有点类似,但是免费开源的。

curl -sSL https://resource.fit2cloud.com/1panel/package/quick_start.sh -o quick_start.sh && sh quick_start.sh      #Centos/redhat版本使用
  
  

  
  
  1. [root@localhost ~] # curl -sSL https://resource.fit2cloud.com/1panel/package/quick_start.sh -o quick_start.sh && sh quick_start.sh
  2. #开始下载 1Panel v1.10.2-lts 版本在线安装包
  3. 安装包下载地址: https://resource.fit2cloud.com/1panel/package/stable/v1.10.2-lts/release/1panel-v1.10.2-lts-linux-amd64.tar.gz
  4. % Total % Received % Xferd Average Speed Time Time Time Current
  5. Dload Upload Total Spent Left Speed
  6. 100 48.4M 100 48.4M 0 0 16.3M 0 0:00:02 0:00:02 --:--:-- 16.3M
  7. 1panel-v1.10.2-lts-linux-amd64/1panel.service
  8. 1panel-v1.10.2-lts-linux-amd64/1pctl
  9. 1panel-v1.10.2-lts-linux-amd64/LICENSE
  10. 1panel-v1.10.2-lts-linux-amd64/README.md
  11. 1panel-v1.10.2-lts-linux-amd64/install.sh
  12. 1panel-v1.10.2-lts-linux-amd64/1panel
  13. ██╗ ██████╗ █████╗ ███╗ ██╗███████╗██╗
  14. ███║ ██╔══██╗██╔══██╗████╗ ██║██╔════╝██║
  15. ╚██║ ██████╔╝███████║██╔██╗ ██║█████╗ ██║
  16. ██║ ██╔═══╝ ██╔══██║██║╚██╗██║██╔══╝ ██║
  17. ██║ ██║ ██║ ██║██║ ╚████║███████╗███████╗
  18. ╚═╝ ╚═╝ ╚═╝ ╚═╝╚═╝ ╚═══╝╚══════╝╚══════╝
  19. [1Panel Log]: ======================= 开始安装 =======================
  20. 设置 1Panel 安装目录(默认为/opt):
  21. [1Panel Log]: 您选择的安装路径为 /opt #设置安装路径
  22. [1Panel Log]: 检测到 Docker 已安装,跳过安装步骤 #检查docker是否安装,如果未安装则先安装docker
  23. [1Panel Log]: 启动 Docker
  24. [1Panel Log]: ... 在线安装 docker-compose
  25. % Total % Received % Xferd Average Speed Time Time Time Current
  26. Dload Upload Total Spent Left Speed
  27. 100 56.8M 100 56.8M 0 0 17.8M 0 0:00:03 0:00:03 --:--:-- 17.8M
  28. [1Panel Log]: docker-compose 安装成功
  29. 设置 1Panel 端口(默认为42074): #设置端口
  30. [1Panel Log]: 您设置的端口为:42074
  31. [1Panel Log]: 防火墙未开启,忽略端口开放
  32. 设置 1Panel 面板用户(默认为88326053fc): #面板用户名
  33. [1Panel Log]: 您设置的面板用户为:88326053fc
  34. 设置 1Panel 面板密码(默认为08e13ab1ca): # 设置面板用户密码
  35. [1Panel Log]: 配置 1Panel Service
  36. Created symlink from /etc/systemd/system/multi-user.target.wants/1panel.service to /etc/systemd/system/1panel.service.
  37. [1Panel Log]: 启动 1Panel 服务
  38. [1Panel Log]: 1Panel 服务启动成功!
  39. [1Panel Log]:
  40. [1Panel Log]: =================感谢您的耐心等待,安装已经完成==================
  41. [1Panel Log]:
  42. [1Panel Log]: 请用浏览器访问面板:
  43. [1Panel Log]: 外网地址: http://122.231.147.239:42074/8a36118354
  44. [1Panel Log]: 内网地址: http://192.168.245.133:42074/8a36118354
  45. [1Panel Log]: 面板用户: 88326053fc
  46. [1Panel Log]: 面板密码: 08e13ab1ca
  47. [1Panel Log]:
  48. [1Panel Log]: 项目官网: https://1panel.cn
  49. [1Panel Log]: 项目文档: https://1panel.cn/docs
  50. [1Panel Log]: 代码仓库: https://github.com/1Panel-dev/1Panel
  51. [1Panel Log]:
  52. [1Panel Log]: 如果使用的是云服务器,请至安全组开放 42074 端口

根据提示登录可视化面板

三、部署MINIIO:

使用1panel 部署MINIIO

点击参数可以查看MINIIO的相关信息,包括登录端口号和账号密码

使用http://IP:9000 进行访问

例如       http://172.30.10.43:9000/buckets/mybucket/admin/access

输入用户和密码进行登录

四、配置MINIIO:
1、流程:

先创建一个资源桶,来存储数据,然后创建一个AK SK 密钥来交给用户进行登录,然后再上传下载资源桶中的数据

2、创建数据桶:

可以在图形化中创建

可以在linux 系统中使用

mc  alias  set  <桶名字> MINIIO访问界面:API端口 SK AK 进行创建桶

例如:

mc alias set mymini2 http://172.30.10.43:9001 rlhR84uCH07RQoqECQEL c6gr6VPqWsOEo8e9d9v8wDuJ5OG7wTySr5DAP0Js

  
  
mc mb myminio/mybucket2                     #创建一个名字为mybacket2桶

  
  
3、创建AK SK密钥:

随机创建一个AK以及SK密钥,下面可以添加一些描述信息比如谁领取该密钥,

创建后下载credentials (1).json 文件,该文件里面记录AK SK 信息,方便存储保存

4、创建用户及用户组:

创建用户

创建用户以及输入密码 <添加对应权限,以及加入对应的组中>

返回点击用户的修改权限

创建该用户相关的AK 以及 SK 密钥

创建用户组

创建用户组并把相关的用户添加到对应的组中,方便后续用户的管理

5、用户及用户组权限:

在创建用户时可以指定相关的权限,用户创建完成后也可以进行修改权限

创建用户组时候可以进一步编辑,设置组的权限。

6、用户桶资源的关联:

在web端,创建完用户之后就自动关联所有的数据桶,

五、使用MINIIO:
1、安装配置MC客户端

1.1 windows

打开以下文件在浏览器中:

https://dl.minio.org.cn/client/mc/release/windows-amd64/mc.exe

通过双击执行文件,或者 在命令 提示符或PowerShell中运行以下内容:

\path\to\mc.exe --help
  
  

1.2 linux

64-bit Intel


  
  
  1. curl https://dl.minio.org.cn/client/mc/release/linux-amd64/mc \
  2. --create-dirs \
  3. -o $HOME/minio-binaries/mc
  4. chmod +x $HOME/minio-binaries/mc
  5. export PATH= $PATH: $HOME/minio-binaries/
  6. mc -- help

64-bit PPC


  
  
  1. curl https://dl.minio.org.cn/client/mc/release/linux-ppc64le/mc \
  2. --create-dirs \
  3. -o ~/minio-binaries/mc
  4. chmod +x $HOME/minio-binaries/mc
  5. export PATH= $PATH: $HOME/minio-binaries/
  6. mc -- help

ARM64


  
  
  1. curl https://dl.minio.org.cn/client/mc/release/linux-arm64/mc \
  2. --create-dirs \
  3. -o ~/minio-binaries/mc
  4. chmod +x $HOME/minio-binaries/mc
  5. export PATH= $PATH: $HOME/minio-binaries/
  6. mc -- help

1.3 macOS


  
  
  1. brew install minio/stable/mc
  2. mc -- help

1.4 Source

从源代码安装旨在为开发者和高级用户提供, 并需要一个工作的Golang环境。 请参阅 如何安装Golang。在终端环境中运行以下命令以从源代码 安装 mc

go install github.com/minio/mc@latest
  
  

mc update 不支持基于源代码的安装。

2、登录MC客户端

MINIIO server

mc alias set myminio https://minioserver.example.net ACCESS_KEY SECRET_KEY
  
  

AWS S3 Storage

mc alias set myS3 https://s3.amazon.com/endpoint ACCESS_KEY SECRET_KEY
  
  

Google Cloud Storage

mc alias set myGCS https://storage.googleapis.com/endpoint ACCESS_KEY SECRET_KEY
  
  
3、上传数据信息

windows :系统上传需要在web客户端中操作即可。

可上传文件和文件夹

linux:

可以使用以下命令在mc客户端中配置主机:

mc config host add 桶名字 miniio客户端 AK SK

mc config host add myminio http://172.30.10.43:9001 yoZJ8LV5qoOKUriOvDEG BKp6P6fiGfJNjIzt2XyC8xgt53qtRhp1aM5ylRex

 

mc cp CentOS-7-x86_64-DVD-1708.iso myminio/mybucket/

4、下载数据信息

windows:系统下载需要在web客户端中操作即可

linux :使用复制命令去从资源桶中复制文件到linux 系统中

mc cp  myminio/mybucket/1panel-v1.10.5-lts-linux-amd64.tar.gz /data

已经完成miniio初级的使用体验

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值