对象存储：Linux 使用s3fs 挂载 对象存储 bucket

已于 2022-06-28 20:40:49 修改
阅读量1.7k 收藏 2
点赞数
CC 4.0 BY-SA版权
分类专栏： 数据中台 架构设计 文章标签： s3fs 对象存储 挂载 ceph centos
于 2022-05-25 17:48:33 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/zhanggqianglovec/article/details/124970127
本文介绍了如何在CentOS7环境下，利用s3fs-fuse工具将Ceph RGW的对象存储Bucket挂载为本地文件系统。内容包括安装s3fs-fuse、配置密钥文件、挂载bucket以及进行简要测试，同时探讨了s3fs的特性和局限性。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

文章目录

1.简介

s3fs允许Linux和macOS通过FUSE把对象存储Bucket（空间）当成一个文件夹挂载到Linux系统内部，当成一个系统文件夹来使用，s3fs保留文件原来的对象格式。

本文以在Centos下挂载ceph rgw bucket 为例进行测试校验。

2.环境配置信息说明

ceph版本：Nautilus 14.2.8
操作系统信息：Centos7

3.配置实测

3.1 安装s3fs-fuse

sudo yum install epel-release
sudo yum install s3fs-fuse

3.2配置s3fs密钥文件

echo ACCESS_KEY_ID:SECRET_ACCESS_KEY
了解本专栏 订阅专栏 解锁全文 超级会员免费看
文件系统：通过s3fs-fuse挂载minio的部署及应用实践
GIS摆渡人
04-03 759
minio 是一个aws s3 兼容的对象存储系统，我们可以通过s3fs 进行数据桶的挂载，这样可以做好多方便的事情。参考：https://blog.51cto.com/rongfengliang/3124675。注意这个文件的权限，（目前我测试600 是没有问题的,实际参考操作提示解决）注意需要配置.passwd-s3fs 文件，同时添加参数。设置 .passwd-s3fs 文件权限 600。minio docker-compose 文件。配置.passwd-s3fs。webhook 功能。
对象存储：文件系统与对象存储的数据同步/数据挂载解决案例
GIS摆渡人
05-25 675
文章目录简介一.挂载对象存储到云主机1.环境信息2. 配置云主机环境二、创建云主机模拟数据三、安装rsync同步工具1.软件安装测试四.安装Inotify文件监控工具1.软件安装2.配置脚本3.测试五.注意1.设置定时全量备份；2.设置定时增量参考 简介 我们利用s3fs工具将京东云对象存储挂载到京东云云主机，把对象存储Bucket（空间）当成一个文件夹挂载到Linux系统内部，当成一个系统文件夹来使用。 我们会利用inotify+rsync工具来实现主机文件自动同步到对象存储的挂载目录，以此来实现主机文件
【Linux】使用 s3fs 挂载 MinIO 桶
qq_40205510的博客
05-28 1547
Linux使用s3fs挂载Minio
Linux 使用 S3fs 挂载 S3 存储桶（以 MinIO 为例）
凭心而动
07-26 6205
s3fs 是一个基于 FUSE（Filesystem in Userspace） 的文件系统，它允许你将 Amazon S3 或其他兼容 S3 API 的对象存储服务挂载到本地文件系统中，从而能够像访问本地磁盘一样访问远程对象存储，像操作本地文件系统一样操作 S3 存储桶中的文件和目录。本篇文章以 MinIO 为例，讲解了如何使用 S3fs 挂载 S3 存储桶到 Linux 服务器。
s3fs---Bucket挂载
最新发布
admin_233的博客
06-17 405
Ubuntu部署步骤实现开机自动挂载 S3 存储尝试强制重新挂载如果你的非阿里云 OSS 存储支持 Amazon S3 API（例如 MinIO、华为云 OBS、腾讯云 COS），建议使用 s3fs 进行挂载。s3fs 默认不允许挂载到一个非空目录。
linux系统安装s3fs,利用s3fs 将 s3 bucket 挂载到Linux目录
weixin_29890403的博客
05-02 3867
S3fs是基于FUSE的文件系统，允许Linux和Mac Os X挂载S3的存储桶在本地文件系统，S3fs能够保持对象原来的格式。关于s3fs-fuse的功能、使用方法、下载可参考：https://github.com/s3fs-fuse/s3fs-fuse1、本文主要介绍将s3的bucket挂载到Linux的目录上，当做本地磁盘使用。所以首先要创建s3的bucket，例：2、将s3 bucket...
fstab自动挂载_使用s3fs-fuse在Linux上挂载天翼云对象存储
weixin_39897758的博客
11-26 1353
S3FS是google开发的一款支持将对象存储中的bucket以文件形式导出的文件系统接口，是基于FUSE开发文件系统，允许Linux挂载S3的存储桶在本地文件系统，S3FS能够保持对象原来的格式。第一步：安装epel-releaseEPEL (Extra Packages for Enterprise Linux)是基于Fedora的一个项目，为“红帽系”的操作系统提供额外的软件包。这个软件包会...
linux 挂载对象存储,如何将FSS对象存储挂载到linux服务器
weixin_35983438的博客
05-13 1649
如何将FSS对象存储挂载到挂载到linux服务器？如果是用的可以参考以下几步进行操作：1、安装davfs2文件系统驱动程序。Debian/Ubuntu系统: apt-get install davfs2 -yRHCL/CentOS/Fedora系统: yum install davfs2 -y2、创建挂载目录。如：mkdir /fssdb3、执行挂载命令。mount -t davfs https:...
S3FS安装和挂载对象存储桶 - Hitachi Content Platform (HCP)
binbin2013_ok的专栏
02-27 1579
在文件passwd-s3fs中填写桶的用户名密码信息并保存。#确保桶可访问 ping s3fsbucket.t1.hcp-demo.hcpdemo.com。2、S3FS的全局认证信息文件.passwd-s3fs位置是：/etc/passwd-s3fs。#确保租户可访问 ping t1.hcp-demo.hcpdemo.com。1、确保S3FS所在机器到对象存储桶、到租户域名可访问。在此文件中配置，只能保证当前登录用户可以挂载S3FS。1、从运维人员处得到对象存储桶信息。一、得到对象存储桶信息。
天翼云服务器硬盘怎么挂载,用s3fs挂载天翼OOS到服务器
weixin_33121737的博客
07-31 1687
s3fs是把Amazon S3存储服务挂载到本地硬盘或者服务器上的程序，天翼云存储OOS和S3兼容，只需要修改s3fs一行代码，它就能挂载天翼OSS到服务器上。感叹一下，有一个行业标准真心好啊...服务器操作系统是Centos 6.4 64位，自带的fuse版本比较老，用不了新的s3fs，所以第一件事就是：yum remove fuse fuse* fuse-devel安装s3fs过程中可能需要的...
blobfs:BlobFs是由Microsoft azure blob存储服务支持的基于分布式FUSE的文件系统。 无论是Linux系统还是Windows系统，它都允许您将存储对象作为本地文件夹驱动程序挂载在存储帐户中。 它还支持集群模式
05-14
BlobFs BlobFs是由支持的基于分布式的文件系统。 它允许您将存储帐户中的容器/ blob作为本地文件夹/驱动程序挂载，无论是Linux系统还是Windows系统。 它支持集群模式。 您可以跨多个linux和Windows节点挂载blob容器（或其中的一部分）。 重要笔记： 这是blobfs的linux / mac版本，请从找到Windows版本的blobfs。 对于blobfs的核心库，可以从找到它。 负责处理所有潜在的天蓝色blob存储操作 如果您有贡献，请通过与我联系。 项目目标 对象存储是您决定开始云计算之旅时会遇到的最基本的主题之一。该项目的主要目标是使azure存储服务易于在Linux和Windows box上使用。 关键更新： 将版本连接到v1.1.0 代码优化 错误修复 将版本连接到v1.0.0 针对大型内容读写优化性能 优化同时读取/写入多个文件的性能
对象存储桶挂载到linux系统下(爆)
weixin_37854880的博客
01-06 711
对象存储桶挂载到本地
京东云linux查看挂载磁盘,使用S3fs在Linux实例上挂载Bucket
weixin_36423062的博客
05-10 1141
使用S3fs在Linux实例上挂载BucketS3fs是基于FUSE的文件系统，允许Linux 挂载Bucket在本地文件系统，S3fs能够保持对象原来的格式。使用S3fs可以把Bucket当成一个文件夹挂载到Linux系统内部，当成一个系统文件夹使用。环境安装以及配置参考官方说明1.安装依赖包On CentOS 7:复制成功sudo yum install automake fuse fuse-...
linux服务器上安装oss对象存储（命令行工具使用oss）
博客主要分享技术教程、工具教程、bug解决、前沿技术动态、编程经验、心得感悟等。 内容同步、干货获取、推广宣发请看侧栏推广信息
12-28 6560
linux服务器中使用oss工具
linux系统安装s3fs,linux – s3fs如何稳定地将Amazon S3存储桶作为本地目录安装
weixin_29538497的博客
05-02 482
There’s a good article on s3fs here，阅读后我诉诸EBS股份。它强调了使用s3fs时的一些重要注意事项，即与S3的固有限制有关：>没有文件可以超过5GB>您不能部分更新文件，因此更改单个字节将重新上传整个文件。>对许多小文件的操作非常有效(每个都是一个单独的S3对象)，但大文件是非常低效的>虽然S3支持部分/分块下载，但s3fs没有利用这一...
Linux搭建minio对象存储
Answer0902的博客
06-13 612
Linux搭建minio对象存储
linux挂载s3存储,使用s3fs将S3存储桶挂载在Linux的文件系统下
weixin_39748838的博客
05-13 2786
亚马逊的S3(Simple Storage Service)服务是一个服务于互联网用户的存储类服务。类似于网盘一样，可以通过网络随时随地的获取存储的数据。用户可以使用亚马逊提供的S3 Management Console去管理自己的S3存储桶。如果想要更多的了解S3服务，请点击这里。今天分享的重点并不是传统意义上的如何使用S3，而是如何把S3存储桶挂载到Linux的文件系统下，这样操作存储桶里的数...
linux挂载存储os9000,linux系统中挂载存储
weixin_33065899的博客
05-13 469
正确的挂载光盘在将光盘连上linux系统之后，需要将其挂载上正确做法是先使用df -h命令查看光驱的文件系统名称，一般默认是/dev/sr0,然后再创建你想挂载的文件目录，mkdir -p /mnt/cdrom再使用命令 mount /dev/sr0 /mnt/cdrom 可以顺利将该光盘挂载到cdrom目录下面2.正确的挂载新添加的存储在磁盘添加之后 直接使用fdisk -l查看所有的磁盘信息...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Freedom3568

技术域不存在英雄主义，不进则退

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值