MinIO Client实战指南:从基础命令到高级应用

深入理解 MinioClient 常用方法 MinioClient 是 MinIO 官方提供的 Java SDK,用于与 MinIO 服务器进行交互。它封装了 MinIO 的核心功能,提供了简单易用的 API,支持文件上传、下载、删除、存储桶管理等多种操作。结合 MinIO 的强大功能和 Spring Boot 的便捷开发,你可以轻松构建高性能的文件存储系统。存储桶(Bucket)是 MinIO 中用于存储文件的基本容器,类似于文件夹。对于大文件上传和下载,可以使用分片上传和多线程下载,提升传输效率。在连接 MinIO 服务器之前,需要通过。 阅读详情

1. MinIO Client入门:从安装到基本操作

第一次接触MinIO Client(简称mc)时,我完全被它的简洁高效惊艳到了。这个命令行工具就像是给对象存储装上了瑞士军刀,把原本复杂的S3操作变得像在本地操作文件一样简单。记得刚开始用AWS S3时,每次上传下载文件都要写一堆代码,而mc让我找回了使用Linux命令行的快感。

安装mc非常简单,这里以Linux系统为例:

wget https://dl.min.io/client/mc/release/linux-amd64/mc
chmod +x mc
sudo mv mc /usr/local/bin/

安装完成后,第一件事就是要配置你的MinIO服务器连接。这就像给你的好朋友取个昵称,以后操作起来就方便多了:

mc alias set myminio http://192.168.1.100:9000 admin password

这里的"myminio"就是你给服务器取的别名,后面跟着服务器地址、用户名和密码。配置完成后,可以用mc ls myminio快速查看服务器上的存储桶,就像用ls查看本地目录一样自然。

mc最棒的地方在于它完美复刻了Unix命令的使用习惯。比如:

  • mc ls 查看存储桶内容
  • mc cp 上传下载文件
  • mc rm 删除对象
  • mc cat 查看文件内容

举个例子,要把本地文件上传到存储桶:

mc cp ~/Documents/report.pdf myminio/projects/

这个命令和Linux的cp命令几乎一模一样,只是目标地址变成了"别名/存储桶名"的格式。我特别喜欢这种设计,因为它几乎不需要学习成本,只要你熟悉基本的Linux命令就能快速上手。

2. 日常操作:像管理本地文件一样管理对象存储

在实际工作中,我发现mc的几个基础命令使用频率特别高。先说ls命令,它比AWS CLI的list-objects直观多了:

# 列出所有存储桶
mc ls myminio

# 递归列出project存储桶下的所有文件
mc ls --recursive myminio/project

cp命令是我用得最多的,它支持各种灵活的复制方式:

# 上传本地文件到存储桶
mc cp video.mp4 myminio/media/

# 下载存储桶文件到本地
mc cp myminio/media/video.mp4 ./downloads/

# 在存储桶之间复制文件
mc cp myminio/docs/report.pdf myminio/archive/

有个小技巧:mc在上传大文件时会自动显示进度条,这在传输GB级文件时特别有用。我经常用它来备份数据库:

mysqldump -u root -p mydb | mc pipe myminio/backups/mydb-$(date +%F).sql

pipe命令直接把标准输入流导入到对象存储,省去了先存本地再上传的麻烦。

删除文件也很简单,但要注意rm命令的威力:

# 删除单个文件
mc rm myminio/temp/junk.txt

# 递归删除整个目录(慎用!)
mc rm --recursive --force myminio/old-project/

我曾经不小心误删过重要文件,所以现在用rm命令都会三思而行。建议先不加--force参数试运行,确认无误后再真正执行。

3. 高级文件操作:查找、比较和共享

当存储桶里的文件越来越多时,find命令就成了我的得力助手。它支持各种过滤条件,比图形界面搜索还方便:

# 查找所有.jpg图片
mc find myminio/photos --name "*.jpg"

# 查找大于10MB的文件
mc find myminio --size +10MB

# 查找30天前的日志文件并删除
mc find myminio/logs --name "*.log" --older-than 30d --exec "mc rm {}"

diff命令可以比较两个存储桶或目录的差异,我常用它来同步数据:

mc diff myminio/project-backup myminio/project-latest

输出会显示哪些文件是新增的、哪些大小不同,但要注意它不比较文件内容,只对比文件名、大小和修改时间。

共享文件是另一个高频需求。mc的share命令可以生成临时访问链接:

# 生成4小时有效的下载链接
mc share download --expire 4h myminio/shared/presentation.pdf

# 生成上传链接(允许他人上传文件)
mc share upload myminio/incoming/

这些链接包含了加密的访问凭证,比直接暴露账号密码安全多了。我经常用这个功能给客户分享大文件,比邮件附件方便得多。

4. 数据同步与监控:mirror和watch的妙用

mirror是我最爱的功能之一,它像rsync一样智能同步数据:

# 本地目录同步到存储桶
mc mirror ~/backups/ myminio/system-backups/

# 存储桶之间同步
mc mirror myminio/documents myminio/archive/documents

加上--watch参数后,mc会持续监控文件变化并自动同步:

mc mirror -w ~/photos/ myminio/photos-backup/

这个功能太适合做实时备份了!我在开发项目时就开着这个命令,代码一保存就自动同步到云端。

watch命令则用来监控存储桶的事件,比如文件上传、删除等:

# 监控所有事件
mc watch myminio/project/

# 只监控.jpg文件的上传事件
mc watch myminio/photos --events put --suffix ".jpg"

我曾经用这个功能搭建了一个简单的图片处理流水线:当用户上传图片时自动触发缩略图生成。配合events命令还能配置更复杂的事件通知:

# 添加存储桶事件通知
mc events add myminio/photos arn:minio:sqs::1:image-queue --events put

5. 权限管理与策略配置

管理存储桶权限是运维工作中重要的一环。mc的policy命令让这个任务变得简单:

# 设置存储桶为公开可读
mc policy set public myminio/website-assets/

# 设置仅可下载
mc policy set download myminio/shared-files/

# 撤销所有公开访问
mc policy set none myminio/private-data/

对于更精细的权限控制,可以配置IAM策略。我建议遵循最小权限原则,只开放必要的访问权限。

config命令用来管理mc的配置:

# 列出所有配置的服务器
mc config host list

# 添加新服务器
mc config host add backup http://backup.example.com accesskey secretkey

# 删除旧配置
mc config host remove old-server

记得定期用update检查mc版本更新:

mc update

新版本通常会修复bug和增加功能,但生产环境升级前最好先测试。

6. 实战技巧与避坑指南

在使用mc的过程中,我总结了一些实用技巧:

  1. 使用--json参数获取机器可读的输出,方便脚本处理:
mc ls --json myminio/data/ | jq '.'
  1. 大文件传输时启用多部分上传:
mc cp --disable-multipart=false largefile.iso myminio/iso/
  1. 遇到网络不稳定时,可以恢复中断的上传:
mc cp --continue report.pdf myminio/documents/
  1. 使用session命令管理上传会话:
# 开始新会话
mc session resume my-upload

# 列出所有会话
mc session list

# 恢复特定会话
mc session resume my-upload

常见的坑包括:

  • 路径结尾的/很重要,myminio/bucket和myminio/bucket/有时行为不同
  • 文件名包含特殊字符时要用引号包裹
  • 跨区域复制要注意网络带宽和延迟

7. 与其他工具的集成

mc可以很好地融入现有的运维工作流。比如结合cron做定时备份:

0 3 * * * /usr/local/bin/mc mirror /var/lib/mysql/ myminio/db-backups/$(date +\%F)/

在CI/CD流水线中,可以用mc部署构建产物:

# GitLab CI示例
deploy:
  script:
    - mc cp dist/*.zip myminio/releases/${CI_COMMIT_TAG}/

对于开发者,MinIO还提供了各种语言的SDK,但mc仍然是快速测试和调试的首选工具。

最后分享一个真实案例:我们有个项目需要定期同步两个地理上隔离的MinIO集群。通过mc mirror配合--watch参数,实现了近实时的数据同步,省去了大量自定义开发工作。这种简单直接的解决方案往往最可靠。

MinIO文件服务器,从安装到使用 mino安装以及封装上传下载工具类,提供上传接口,数据表设计,上传异常处理,minio配置 阅读详情

相关推荐

【Minio】Linux环境下安装部署Minio Server

Minio是一款高性能的对象存储服务器,它兼容Amazon S3 API。它的设计目的是为了提供云存储服务的性能和可扩展性,同时还保持着本地存储的简单性和易用性。Minio可以再Linux、MacOS和Windows等操作系统上运行,它可以通过命令行界面或RESTful API进行管理。Minio的核心是对象存储,对象是一组二进制数据和元数据的组合。对象可以存储为文件,也可以存储为内存中的数据结构。对象可以存储在不同的存储介质中,如本地磁盘、网络文件系统、云存储等。

weixin_40618306的博客 5500

Minio入门系列【5】MinIO Client使用详解

简介 MinIO Client 简称mc,是minio服务器的客户端,对ls,cat,cp,mirror,diff,find等UNIX命令提供了一种替代方案,它支持文件系统和兼容Amazon S3的云存储服务(AWS Signature v2和v4)。 ls 列出文件和文件夹。 mb 创建一个存储桶或一个文件夹。 cat 显示文件和对象内容。 pipe 将一个STDIN重定向到一个对象或者文件或者STDOUT。 share 生成用于共享的URL。 cp

记录知识、锤炼自我 1万+

从想法到零件:手把手拆解一个汽车功能如何从PRD写到SSTS和CTS

本文详细拆解了汽车电子需求从市场文档(MRD)到零部件技术规范(CTS)的完整流程,以雨天自动关窗功能为例,展示了PRD、SSTS和CTS的编写要点与交互设计。文章重点解析了系统分解的艺术和零部件落地的精确参数要求,为汽车电子工程师提供了从概念到实现的全流程实践指南。

weixin_30300225的博客 481

Minio入门系列【3】MinIO Client使用详解

Minio入门系列【3】MinIO Client使用详解

吴名氏的博客 7万+

Moveit +Gazebo:搭建单臂机械臂仿真平台

Moveit +Gazebo:搭建单臂机械臂仿真平台

magic_invaid的博客 5300

BODAS说明书的中文版与相关资料总结

花了三天时间配了控制器的接线口,找了软件安装的一套东西。 又花了一周时间零零散散在网上只找到关于控制器少得可怜的资料: 1.力士乐控制器RC6系列介绍 2.力士乐控制器手册不完整版 3.RC6-9程序下载 力士乐配套的只有德语和英语两版,人工翻译专业文件的价格太惊人,决定自己写一版方便大家。有不正之处欢迎指出。 For these controllers, in the event of an...

我的技术日常 6497

MinioClient

Minio 的基本食用方法 1. 创建MinioClient对象 MinioClient minioClient = MinioClient.builder() .endpoint("http://localhots:9000") .credentials("minioadmin", "minioadmin") .build(); 2. 检查存储桶是否已经存在 boolean isExist = minioClient.bucketExists( BucketExistsA

m0_53964515的博客 6952

深入RK3588嵌入式Linux开发:uboot源码定制化移植实战

本文详细介绍了RK3588嵌入式Linux开发中,如何绕过庞大的官方SDK,从官方仓库获取纯净U-Boot源码并进行定制化移植的完整实战流程。内容包括编译环境搭建、交叉工具链配置、源码结构解析、设备树(Device Tree)修改、环境变量定制、编译脚本编写以及常见问题调试技巧,旨在帮助开发者深入理解系统引导过程,掌握为定制硬件适配U-Boot的核心技能。

weixin_29169505的博客 426

Minio Client使用详解

MinIO Client 简称mc,是minio服务器的客户端,对ls,cat,cp,mirror,diff,find等UNIX命令提供了一种替代方案,它支持文件系统和兼容Amazon S3的云存储服务(AWS Signature v2和v4)。ls 列出文件和文件夹。mb 创建一个存储桶或一个文件夹。cat 显示文件和对象内容。pipe 将一个 STDIN 重定向到一个对象或者文件或者 STDOUT。share 生成用于共享的 URL。cp 拷贝文件和对象。

奔走的蚂蚁的博客 2544

山东大学FPGA课程实验一 加法器设计

电子设计自动化与FPGA设计,实验一 加法器设计

2503_91283667的博客 871

哨兵2植被参数反演避坑指南:SNAP中10m/20m分辨率选择与缺失波段处理

本文深入解析了使用SNAP软件进行哨兵2号植被参数反演时的关键操作与决策。核心在于理解SNAP生物物理处理器NNET10m与NNET20m的架构差异,根据是否需要反演冠层叶绿素含量(Cab)等参数,明智选择10米或20米分辨率工作流。文章详细指导了大气校正、波段重采样及处理L2A数据中B01波段“缺失”等常见问题的解决方案,为生态监测与精准农业应用提供清晰的避坑指南和完整实战流程。

wdx01234567的博客 262

MinIO Client客户端使用

安装 文档地址:https://docs.min.io/ 基本上MinIO服务器和客户端支持在很多系统上安装,比如Windows、macOS等,这里主要说Linux系统。 1、安装MinIO Client wget https://dl.min.io/client/mc/release/linux-amd64/mc -P /usr/local/bin/ chmod +x /usr/local/bin/mc 2、添加云存储 如需添加 MinIO云存储,则需要在另一台服务器安装MinIO服务,教程查看 -&g

夏天 4382

人工智能---什么是Transformer?

Transformer是一种强大的神经网络架构,最初由Google的研究人员在论文《Attention is All You Need》中提出,用于自然语言处理任务,特别是在机器翻译方面取得了巨大成功。Transformer的核心思想是完全基于自注意力机制(self-attention mechanism)来实现序列到序列(sequence-to-sequence)的学习。它在自然语言处理(NLP)和其他序列到序列任务中表现出色,逐渐成为该领域的主流模型。近些年也逐渐在自动驾驶领域有所应用。

智能汽车人的博客 3956

minio安装部署和minIO-Client的使用

minio安装部署和minIO-Client的使用

weixin_46071647的博客 3471

微信开发 - 最新第三方网站接入微信登录、微信支付时,本地 redirect_uri 参数错误导致无法调试的解决方案(微信开放平台)完美解决每次都需要部署到线上测试,在本地使用本地 ip 就能轻松调试

redirect_uri参数错误,微信第三方登录,没有服务器时的测试方法,微信开放平台的回调域名怎么设置为本地域名IP,微信登录微信支付每次调试都需要放到服务器上怎么办,微信登录支付业务在本地调试不了怎么办,在本地怎么测试微信支付和登录,微信第三方登陆本地测试,怎么在本地进行测试,微信回调域怎么设置为本地IP,微信扫码登录redirect_uri参数错误,微信开放平台,微信开放平台开发的第三方登录和支付,vue2,nuxt2,vue3,nuxt3,uniapp,微信开放平台,公众号,微信支付,微信登录授权,

🏆 前端领域优质创作者 8791

华为的C语言编程规范.pdf

华为技术有限公司内部技术规范。本规范制定了编写C语言程序的基本原则、规则和建议。从代码的清晰、简洁、可测试、安全、程序效率、可移植各个方面对C语言编程作出了具体指导。

【MinIO系列】MinIO Client (mc) 完全指南

💝💝💝欢迎来到我的博客,很高兴能够在这里和您见面!希望您在这里可以感受到一份轻松愉快的氛围,不仅可以获得有趣的内容和知识,也可以畅所欲言、分享您的想法和见解。非常期待和您一起在这个小小的网络世界里共同探索、学习和成长。💝💝💝 ✨✨ 欢迎订阅本专栏 ✨✨。

优快云站内信: https://i.youkuaiyun.com/#/msg/chat/qyj19920704 2万+

LinePhone3.2.7(android端最新版本) sip客户端

SIP客户端For android:LinePhone3.2.7(最新版本),官网地址:http://www.linphone.org/

【Minio系列】`mc`(MinIO Client)介绍与使用

mcmc是一个功能强大的命令行工具,能够帮助开发人员、运维人员和系统管理员高效地管理 MinIO 存储。通过mc,您可以轻松地与 MinIO 兼容的 S3 存储服务进行交互,执行数据管理、同步、备份、监控等操作。对于希望将 MinIO 应用在生产环境中的用户来说,熟练使用mc无疑能显著提高工作效率。👍🏻呗。❤️❤️❤️本人水平有限,如有纰漏,欢迎各位大佬评论批评指正!😄😄😄👍 👍 👍🔥🔥🔥Stay Hungry Stay Foolish 道阻且长,行则将至,让我们一起加油吧!🌙🌙?

优快云站内信: https://i.youkuaiyun.com/#/msg/chat/qyj19920704 2162

汉书HE8,好用的汇编代码编写工具

汉书HE8,好用的汇编代码编写工具早期编写汇编代码所用功能强大

Outlook Express 6 (OE6) for Win7/Win8/Win10

英文版 Outlook Express6.0, 兼容Win7/Win10/WinXP,解压就可用。

【MinIO】一文掌握 MinIO 基础命令(MinIO 备忘清单)

列出文件夹中的所有文件,包括子文件夹。版本比较多,请去官网查找安装步骤。删除文件夹中的所有文件。列出文件夹中的所有文件。等是存储数据的路径。

数据知道的博客 1万+

如何快速上手MinIO Client:从安装到第一个命令的完整指南

MinIO Client (mc) 是一个强大且高效的命令行工具,专门用于管理MinIO对象存储集群和任何兼容Amazon S3的云存储服务。对于开发者和系统管理员来说,掌握这个工具能极大提升云存储管理效率。本文将带你从零开始,快速掌握MinIO Client的核心功能和使用技巧。 ## 📦 MinIO Client是什么? MinIO Client是一个现代化的命令行工具,它为传统的UNI

gitblog_00358的博客 361

Minio Client实战:从安装到文件管理的完整指南(附常用命令大全)

本文提供了Minio Client(mc)从安装部署到高级文件管理的完整实战指南。详细介绍了如何在Linux/macOS系统上安装mc,如何配置别名(Alias)连接MinIO及其他S3兼容云服务,并涵盖了ls、cp、mv、rm等核心文件操作命令,以及存储桶管理、数据同步和自动化脚本集成等高级技巧,帮助用户高效管理对象存储。

weixin_28340315的博客 592

MinIO Client核心功能详解:ls、cp、mirror等命令实战

MinIO Client(简称mc)是一个强大的命令行工具,专门用于管理MinIO集群和兼容S3协议的云存储服务。作为云存储管理的神器,mc提供了类似UNIX命令的简洁操作方式,让用户能够轻松管理对象存储。本文将详细介绍MinIO Client的核心功能,包括ls、cp、mirror等关键命令的实战应用,帮助新手快速掌握这个高效的存储管理工具。 ## 什么是MinIO Client?🚀 Mi

gitblog_00451的博客 439

MinIO Client实战指南:从基础命令到自动化运维场景

本文详细介绍了MinIO Client(mc)从基础命令到自动化运维的实战应用。通过安装配置、核心命令讲解、生产环境技巧及自动化脚本示例,帮助用户高效管理对象存储。特别适合需要实现日志归档、数据库备份和跨区域数据同步的运维人员。

weixin_27051161的博客 203

mc(MinIO Client)详细教程

MinIO Client的详细教程

weixin_46739493的博客 6934

打造现代数据基础架构:MinIO对象存储完全指南

MinIO是一款高性能、开源的对象存储解决方案,提供与Amazon S3完全兼容的API,支持部署在任何环境中——从本地开发机器到大规模云平台。本文全面介绍MinIO的核心概念和特性,详细对比单节点单驱动器(SNSD)、单节点多驱动器(SNMD)和多节点多驱动器(MNMD)三种部署模式的优缺点与适用场景。

专注分享编程开发与技术进阶干货! 1633

SpringBoot接入Minio,含MinioClient与S3Client

Minio 是一种对象存储解决方案,它提供与 Amazon Web Services S3 兼容的 API,并支持所有核心 S3 功能。 Minio 旨在部署在任何地方 - 公共云或私有云、裸机基础设施、编排环境和边缘基础设施。因此本文中提供了S3Client与MinioClient两种实现方式 启动程序 访问网站 http://127.0.0.1:9001Access Keys ----> Create Access KeyYA7LgtMcxbEhewB0KdgkTyrFMkgwMOxo3qEnC6B3

qq_37724144的博客 2307

MinIO快速入门

MinIO快速入门

bjzhang75的博客 3965
上一篇: 【RL前沿探索】安全强化学习(Safe RL)实战:从算法原理到工业落地
下一篇: 深入解析 LangChain 中的 RunnableConfig:如何通过运行时配置优化任务执行
java5
博客等级 码龄22年 85粉丝 2103原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符  | 博主筛选后可见
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值