对象存储：minio gateway 简介

已于 2023-03-30 15:15:46 修改
阅读量1k 收藏 1
点赞数
分类专栏： 架构设计 文章标签： gateway 对象存储 minio nfs hdfs
于 2023-03-30 15:15:17 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/zhanggqianglovec/article/details/129858331
版权
MinIO Gateway是一个将其他云服务（如Google Cloud Storage、NAS、HDFS等）转换为S3兼容API的工具，提供统一接口和缓存功能。本文介绍了MinIO Gateway的用途、架构和使用，强调其在简化对象存储访问和降低成本方面的作用。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

文章目录

一、minio简介

关于MinIO的介绍，可以参考官网的介绍，地址：官方文档传送门 这里直接介绍使用；MinIO在使用时提供了两种模式：

  • 直接用来做对象存储服务，可以替代阿里OSS，AWS的S3等云上对象存储服务；
  • 网关模式，构建其他云服务的MinIO网关，与其他云服务一起配合使用。

MinIO除了可以作为对象存储服务外，还可以作为网关，也就说MinIO的后端可以NAS系统、HDFS分布式文件系统或者S3、Google对象存储这样的第三方云存储系统。有了MinIO网关，就可以为Google对象存储这些后端系统添加S3兼容的API，便于管理和移植，因为S3 API已经是对象存储界事实上的标准。

当然MinIO网关不止具备S3兼容API功能，还有其他功能，比如缓存，这篇文章主要介绍MinIO网关的架构设计。

二、什么是网关

在讲MinIO网

了解本专栏 订阅专栏 解锁全文 超级会员免费看
对象存储：minio gateway 源码解析
GIS摆渡人
03-30 721
这篇文章我主要以比较容易的NAS网关为例分析整个网关的启动，其他网关大同小异，主要是对于接口Gateway的具体代码实现不一样，其他都是一样的，所以当我们为MinIO新增一个网关时，只需要实现Gateway接口，然后通过init函数注册一个该网关的子命令给gatewayCmd即可，非常简单，这些都是得益于MinIO对网关架构的优秀设计。gatewayCmd是一个比较顶层的命令，它下面还有很多子命令，比如nas、gcs等，一个子命令代表一个网关，那么这些子命令是如何注册作为gatewayCmd的子命令的呢？
对象存储：Minio集群部署及扩容方案
GIS摆渡人
03-30 1365
分布式部署使用这种方式MinIO节点是有用处的，这样的方式在MinIO中称之为池，扩容就是再增加一个或多个池。参考：https://www.zhangwenbing.com/blog/linux/5Ha4M6vnR。注意： 添加的每个池必须与原始池具有相同的纠删码奇偶校验配置，以保持相同的数据冗余 SLA。1.碰见启动成功访问不了页面的时候，大多是防火墙端口没有允许 9000。注意：分布式部署MinIO，服务器之间的时间间隔应小于15分钟。将 minio 上传到 / opt/minio 目录下并赋予权限。
MinIO对象存储的网关架构设计
flysnow_org的博客
09-07 4089
MinIO是一个非常轻量的对象存储服务，它只有一个二进制文件即可运行，快速的构建分布式的对象存储集群，适合存储大容量的非结构化数据，比如图片、日志文件等这些。MinIO除了可以作为对象...
MinIO GCS 网关 ​​​​​​​
YunWisdom
08-05 538
MinIO GCS 网关 MinIO GCS网关将亚马逊S3兼容性添加到Google云存储。 运行支持GCS的MinIO 网关 为GCS创建服务帐户密钥，并获取凭据文件 访问API控制台凭证页面. 选择您的项目或创建一个新项目， 记下你的项目ID。 在凭据页面，选择Create credentials下拉项，然后选择Service account key。 从...
MinIO Azure 网关 ​​​​​​​
YunWisdom
08-05 663
MinIO Azure 网关 MinIO网关将亚马逊S3兼容性添加到微软Azure Blob存储。 运行支持微软Azure Blob存储的MinIO网关 使用Docker Copydocker run -p 9000:9000 --name azure-s3 \ -e "MINIO_ACCESS_KEY=azureaccountname" \ -e "MINIO_SECRET...
hdfs 文档存储服务器,MinIO HDFS网关
weixin_32480007的博客
08-09 1416
MinIO HDFS网关 MinIO HDFS网关将Amazon S3 API支持添加到Hadoop HDFS文件系统中。应用程序可以同时使用S3和文件API，而无需任何数据迁移。由于网关是无状态且无共享的，因此您可以弹性地分配所需数量的MinIO实例以分配负载。运行MinIO Gateway进行HDFS存储使用二进制通过core-site.xml 自动从hadoop环境变量 $HADOOP_HO...
选择适合您的存储方案：MinIO与云存储对比
![选择适合您的存储方案：MinIO与云存储对比](https://yqfile.alicdn.com/5ad7a862e53dbc5d93beee15475e89a8ee504124.png?x-oss-process=image/resize,s_500,m_lfit) ... MinIO简介 ### 2.1 MinIO架构和组件 Mi
打造高可用、高性能存储解决方案：MinIO集群部署与管理
MinIO是一个开源的对象存储平台，它基于Amazon S3协议，提供可扩展、高性能和高度可靠的对象存储服务。 MinIO采用分布式架构，由多个节点组成，每个节点存储数据的一部分。节点之间通过一致性哈希算法进行数据分片...
Spring Boot 项目中，配合 Nacos 、Gateway使用 MinIO
最新发布
m0_57083961的博客
08-30 2630
在现代微服务架构中，将不同服务整合并高效地管理配置和流量是至关重要的。Spring Cloud Gateway、Nacos 和 MinIO 是三个关键组件
从源代码级别看懂MinIO对象存储网关的实现
flysnow_org的博客
10-19 3407
我在 《MinIO对象存储的网关架构设计》一文中介绍了MinIO的网关架构设计，它的整体架构如下图所示：MinIO对象存储的网关架构设计从架构图可以很清楚的看到MinIO网关的分层结构，...
学成在线笔记+踩坑（4）——【媒资管理模块】上传图片，Nacos+Gateway+MinIO
种一棵树最好的时间是十年前，其次是现在
04-21 3342
媒资管理模块简介、MinIO构建分布式文件系统、MinIO数据恢复演示 、【媒资模块】上传图片
MinIO的原理及使用介绍
niwoxiangyu的博客
09-30 563
初识对象存储MinIO - 墨天轮
对象存储服务MinIO的使用
qgnczmnmn的博客
04-01 1583
文章目录前言1、构建MinIO对象存储服务2、搭建阿里云OSS的MinIO网关 前言 关于MinIO的介绍，可以参考官网的介绍，地址：官方文档传送门 这里直接介绍使用；MinIO在使用时提供了两种模式： 直接用来做对象存储服务，可以替代阿里OSS，AWS的S3等云上对象存储服务； 网关模式，构建其他云服务的MinIO网关，与其他云服务一起配合使用。 本文中MinIO的配置、使用均基于windows系统进行，至于在linux系统与windows系统上也都大同小异，根据官方文档进行即可 1、构建MinI
服务器部署随笔-nfs minio 端口映射
ghz001的专栏
08-27 1251
2021-8-27 // // linux 相关 // 安装docker 暂时没有使用 curl -fsSL https://get.docker.com | bash -s docker --mirror aliyun // 安装nfs客户端 sudo yum -y install nfs-utils // 创建nfs本地路径 mkdir nfs // 挂载nfs存储 mount -t nfs -o vers=3,timeo=600,nores...
对象存储 Mino 源码---Main 和 server 启动模式
u013010890的博客
09-07 1557
minio 源码分析
完全分布式 、 节点管理 、 NFS网关
jackjack博客
10-03 699
完全分布式 、 节点管理 、 NFS网关
【分布式技术专题】「OSS中间件系列」Minio的文件服务的存储模型及整合Java客户端访问的实战指南
世界上并没有完美的程序，但是我们并不因此而沮丧，因为写程序就是一个不断追求完美的过程。
01-26 5860
通过网关模式，MinIO对象存储后端，可以对接各种现有的常见其它存储类型，比如的NAS系统，微软Azure Blob 存储、Google 云存储、HDFS、阿里巴巴OSS、亚马逊S3等，非常有利于企业复用现有资源，有利于企业低成本（硬件成本约等于零，部署MinIO对象存储软件即可）地从现有系统平滑升级到对象存储。distribution:每个纠删组的数据盘、校验盘的个数是固定的，但是不同的对象的分片写入这个纠删组的不同磁盘的顺序是不同的。对于个别的对于数据可靠性要求极高的单位，Ceph对象存储更加合适。
手把手教你云相册项目简易开发 day2 Springboot+SpringCloud+Nacos+Fegin+SpringCloudGateway+S3存储-minio/华为云OBS相关配置和简单使用
m0_62314761的博客
07-12 908
首先我们先改一下上一次创建好的子项目里的application文件，其中分别改一下对应的application的名字，以便后面介绍SpringCloud的时候Nacos注册名字方便寻找到子项目，还需要修改端口，其中端口修改分别如下：api：9009 users：9008 image：9007 gateway：88 audit：9001（gateway和audit后面会介绍到，可以先按照之前的先创建好）
java MinIO Gateway
07-27
引用\[1\]中提到了下载和运行MinIO的二进制包的方法，可以通过官网链接下载MinIO的二进制包，并使用wget命令进行下载。然后，通过chmod命令给予二进制包执行权限，并设置环境变量MINIO_ACCESS_KEY和MINIO_SECRET_KEY。最后，使用nohup命令运行MinIO二进制包。引用\[2\]中提到了配置每个节点的启动脚本，可以根据每个节点的不同配置启动脚本。对于每个节点，需要设置MINIO_ACCESS_KEY和MINIO_SECRET_KEY，并使用nohup命令运行MinIO服务器。引用\[3\]中提到了MinIO是一个开源的对象存储系统，完全兼容Amazon S3接口，适合存储海量数据。根据你的问题，如果你想在Java中使用MinIO Gateway，你可以使用MinIO的Java SDK来实现。Java SDK提供了丰富的API和示例代码，可以帮助你在Java应用程序中使用MinIO Gateway。你可以在MinIO的官方文档中找到更多关于Java SDK的信息和示例代码。 #### 引用[.reference_title] - *1* *2* *3* [Minio的单节点/集群部署及JAVA的SDK访问](https://blog.youkuaiyun.com/alanzy123/article/details/115169035)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^control_2,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Freedom3568

技术域不存在英雄主义，不进则退

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值