AWS CLI with MinIO Server

如何修改MinIO Share时的URL 修改MinIO Share文件时的链接域名 阅读详情

1、Install MinIO Server

https://min.io/docs/minio/linux/index.html

Create AK and SK and record information.

AK:ZYYMPcLi6dSPsDfr5QeW
SK:Am3m2qtpkUk2wAgT5dPbpE4hGD2tX7a6RpjsbeEd

And create a bucket named aswtest.

2、Install AWS CLI

Refer to https://aws.amazon.com/cli/
Testing on Rcoky Linux 9.4

curl "https://awscli.amazonaws.com/awscli-exe-linux-x86_64.zip" -o "awscliv2.zip"
unzip awscliv2.zip
./aws/install

Check

[root@mydb ~]# aws --version
aws-cli/2.19.1 Python/3.12.6 Linux/5.14.0-427.42.1.el9_4.x86_64 exe/x86_64.rocky.9

3、configuration

Fill in AK and SK, region, region default us-east-1, and press enter after format.

[root@mydb ~]# aws configure
AWS Access Key ID [None]: ZYYMPcLi6dSPsDfr5QeW
AWS Secret Access Key [None]: Am3m2qtpkUk2wAgT5dPbpE4hGD2tX7a6RpjsbeEd
Default region name [None]: us-east-1
Default output format [None]:

Additionally enable AWS Signature Version ‘4’ for MinIO server.

[root@mydb ~]# aws configure set default.s3.signature_version s3v4

4、Common commands and scenarios

1.To list your buckets

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 ls
2024-11-02 21:37:27 aswtest

2.To make a bucket

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 mb s3://dbbucket
make_bucket: dbbucket

Check

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 ls
2024-11-02 21:37:27 aswtest
2024-11-02 21:42:40 dbbucket

3.Upload objects to the bucket or download objects from the bucket to the local area.
Use the s3 cp command to copy objects from buckets or local directories.

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 cp awscliv2.zip s3://dbbucket
upload: ./awscliv2.zip to s3://dbbucket/awscliv2.zip

Check and list the objects in the bucket.

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 ls s3://dbbucket
2024-11-02 21:44:15   66658000 awscliv2.zip

Download object to local

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 cp s3://dbbucket/sysbench-1.0.20.zip /root/dir1/
download: s3://dbbucket/sysbench-1.0.20.zip to dir1/sysbench-1.0.20.zip

Or use synchronization to download all objects.

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 sync s3://dbbucket /root/dir1/
download: s3://dbbucket/sysbench-1.0.20.zip to dir1/sysbench-1.0.20.zip

4Delete the object in the bucket.

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 rm s3://dbbucket/awscliv2.zip
delete: s3://dbbucket/awscliv2.zip

Check

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 ls s3://dbbucket

5.Delete bucket

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 rb s3://dbbucket
remove_bucket: dbbucket

Check

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 ls
2024-11-02 21:37:27 aswtest

6.Moving object
Use the s3 mv command to move objects from buckets or local directories. This s3 mv command copies the source object or file to the specified destination, and then deletes the source object or file.

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 mb s3://dbbucket
make_bucket: dbbucket

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 mv awscliv2.zip s3://dbbucket
move: ./awscliv2.zip to s3://dbbucket/awscliv2.zip

[root@mydb ~]# ls -lsa
total 40
4 dr-xr-x---.  5 root root 4096 Nov  2 21:52 .
0 dr-xr-xr-x. 18 root root  255 Nov  2 15:36 ..
4 -rw-------.  1 root root 1177 Oct 27 14:04 anaconda-ks.cfg
0 drwxr-xr-x   2 root root   39 Nov  2 21:36 .aws
0 drwxr-xr-x   3 root root   78 Nov  1 18:14 aws
4 -rw-------.  1 root root 1047 Nov  2 15:46 .bash_history
4 -rw-r--r--.  1 root root   18 May 11  2022 .bash_logout
4 -rw-r--r--.  1 root root  141 May 11  2022 .bash_profile
4 -rw-r--r--.  1 root root  429 May 11  2022 .bashrc
4 -rw-r--r--.  1 root root  100 May 11  2022 .cshrc
4 -rw-------.  1 root root   20 Oct 27 14:06 .lesshst
0 drwx------.  2 root root    6 Oct 27 13:57 .ssh
4 -rw-r--r--.  1 root root  129 May 11  2022 .tcshrc
4 -rw-------   1 root root  815 Nov  2 21:15 .viminfo

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 ls s3://dbbucket
2024-11-02 21:52:51   66658000 awscliv2.zip

7.aws s3 sync
The s3 sync command synchronizes the contents of a bucket with a directory, or synchronizes the contents of two buckets. Typically, s3 sync copies missing or outdated files or objects between the source and the target. However, you can also provide the --delete option to delete files or objects that do not exist in the source from the target.

You can synchronize local files to the bucket, or you can synchronize the bucket to the local.

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 cp sysbench-1.0.20.zip s3://dbbucket
upload: ./sysbench-1.0.20.zip to s3://dbbucket/sysbench-1.0.20.zip
[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 sync /root/dir1 s3://dbbucket
[root@mydb ~]# ls -lsa /root/dir1/
total 4
0 drwxr-xr-x  2 root root    6 Nov  2 22:01 .
4 dr-xr-x---. 6 root root 4096 Nov  2 22:03 ..
[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 sync s3://dbbucket /root/dir1/
download: s3://dbbucket/sysbench-1.0.20.zip to dir1/sysbench-1.0.20.zip

8.Delete all files under the bucket, parameter recursive

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 rm s3://dbbucket --recursive

9.If there are files in the bucket, you need to delete the files before deleting the bucket.

[root@mydb ~]# aws --endpoint-url http://192.168.5.130:9000 s3 rb s3://dbbucket
remove_bucket failed: s3://dbbucket An error occurred (BucketNotEmpty) when calling the DeleteBucket operation: The bucket you tried to delete is not empty

10.If you don’t want to enter --endpoint-url on the command line.
method
https://docs.aws.amazon.com/cli/v1/userguide/cli-configure-endpoints.html

There is a config file under the. aws file in the root directory. Just add endpoint_url = at the end.

[root@mydb .aws]# pwd
/root/.aws
[root@mydb .aws]# ls -lsa
total 12
0 drwxr-xr-x  2 root root   39 Nov  2 22:19 .
4 dr-xr-x---. 6 root root 4096 Nov  2 22:19 ..
4 -rw-------  1 root root  105 Nov  2 22:19 config
4 -rw-------  1 root root  116 Nov  2 21:36 credentials

[root@mydb .aws]# cat config
[default]
region = us-east-1
s3 =
    signature_version = s3v4
endpoint_url = http://192.168.5.130:9000

Check

[root@mydb .aws]# aws s3 ls
2024-11-02 21:37:27 aswtest
2024-11-02 21:52:46 dbbucket

5、Ref

https://min.io/docs/minio/linux/integrations/aws-cli-with-minio.html
https://docs.aws.amazon.com/zh_cn/cli/v1/userguide/cli-services-s3-commands.html

编译aws并访问minio 这里我使用的是cmake ../aws-sdk-cpp -DCMAKE_BUILD_TYPE=Release -DCMAKE_INSTALL_PREFIX=/root/software/aws/aws/install/ -DBUILD_ONLY="s3" -DENABLE_TESTING=OFF。/// 判断存储桶及相关连接是否有效。参看https://docs.aws.amazon.com/zh_cn/sdk-for-cpp/v1/developer-guide/setup-windows.html。 阅读详情

相关推荐

MinIO Docker生产部署实战:从单节点到安全可控的对象存储

对象存储是现代数据架构的核心基础设施,S3 API已成为事实标准协议,被Spark、Trino、Airflow等主流数据工具原生支持。其核心价值在于协议兼容性、部署确定性与治理自主权。MinIO作为高性能开源S3兼容服务,结合Docker可实现分钟级交付、环境一致性和细粒度安全控制,特别适合私有化部署、CI/CD资产仓库、AI数据湖底座等场景。本文聚焦MinIO Docker单节点生产化落地,深入解析TLS终结、权限挂载、健康检查、Nginx反向代理及AWS CLI验证等关键实践,覆盖从启动命令到监控告警的

weixin_34297704的博客 392

minio文件存储 docker安装

docker pull minio/minio 1.2 启动容器 docker run --name minio -p 9000:9000 -p 9999:9999 -d --restart=always -e "MINIO_ROOT_USER=admin" -e "MINIO_ROOT_PASSWORD=admin123" -e "MINIO_SERVER_URL=http://127.0.0.1:9000" -v D:\p

qq_36657997的博客 1986

Java调用MinIO Admin API获取存储桶容量:原理、签名实现与错误排查

在对象存储系统的监控与运维中,实时获取存储桶的容量使用情况是进行存储配额管理、成本分析和资源监控的基础需求。其核心原理是通过HTTP API与存储服务的管理端点进行通信,获取结构化的元数据信息。AWS Signature V4签名算法是确保此类管理API请求安全性与身份认证的关键技术,它通过对请求方法、URI、日期和特定头部进行加密哈希计算来验证请求的合法性。这一技术方案的价值在于实现了轻量级、零外部依赖的监控集成,使开发者能够将存储监控能力直接嵌入Java后端应用。典型的应用场景包括构建自定义的存储资源仪

weixin_29239279的博客 237

minio 单机版安装

minio 单机版安装

qq_45473439的博客 2987

MinIO:云原生对象存储的终极指南

摘要: MinIO是一款高性能、云原生的开源对象存储系统,完全兼容Amazon S3 API,支持分布式部署与轻量级架构。它采用Go语言开发,具备高可用性、强兼容性和卓越I/O性能,适用于私有云存储、大数据分析等场景。本文详细介绍了MinIO的核心特性(如S3兼容性、数据安全机制)、技术架构(纠删码冗余、单机/分布式模式),并提供了SpringBoot集成MinIO的25个实用代码示例,涵盖文件上传、分片传输、权限管理等操作。此外,还对比了MinIO与S3的差异,并给出基于Docker和Kubernetes

keny-大成的博客 1440

MinIO六种生产部署方案:从Windows双击到K8s集群

对象存储是现代应用数据持久层的基石,S3兼容协议已成为云原生基础设施的事实标准。MinIO作为高性能、开源、轻量级的S3实现,其核心价值在于确定性——启动即用、行为可审计、配置可追溯。它不依赖黑盒中间件,单二进制即可承载从本地开发验证到PB级AI训练数据分发的全场景需求。本文聚焦真实工程落地,覆盖Windows服务化、Docker单节点、Linux systemd托管、分布式纠删码集群、Kubernetes Operator编排及边缘嵌入六大形态,深度解析端口绑定、预签名URL生成、MINIO_SERVER

weixin_30457465的博客 360

MinIO 入门指南:高性能对象存储的安装与使用

使用多节点提高可用性(MinIO 支持 Erasure Code 纠删码)。通过 Docker 部署,只需一条命令即可运行,并支持数据持久化。更多高级功能(版本控制、生命周期管理、加密等)可参考。,适用于云原生、大数据分析和 AI/ML 等场景。:可在本地、Kubernetes、公有云上运行。:无缝对接 AWS S3 SDK,迁移成本低。:支持加密、版本控制、访问策略等企业级功能。:专为大规模数据存储优化,支持高并发读写。:单二进制文件部署,资源占用低。,这是最快捷、最通用的方式。

喵酱 1409

MinIO vs FastDFS:从8个维度对比选型与Docker部署实践

本文深入对比MinIO与FastDFS在架构设计、性能表现、生态兼容性等8个维度的差异,并提供详细的Docker部署实践指南。通过性能测试数据与真实案例,展示MinIO在云原生环境下的优势,包括极简部署、卓越吞吐量和完美S3兼容性,帮助开发者快速构建高效对象存储解决方案。

weixin_33875839的博客 434

linux 通过命令将 MinIO 桶的权限设置为 Custom(自定义策略)

Ubuntu下设置MinIO桶自定义策略的方法 使用mc工具(推荐) 安装mc并配置MinIO别名 创建JSON格式的自定义策略文件 执行mc policy set-json应用策略 支持IP限制等精细权限控制 AWS CLI方式 安装配置AWS CLI连接MinIO 使用put-bucket-policy设置策略 兼容AWS S3的IAM策略语法 API调用 通过curl直接调用MinIO API 需手动计算签名,适合无客户端环境 Python脚本 使用boto3库编写策略管理脚本 适合集成到自动化运维流

qq_41451744的博客 2189

运放+三极管恒流源电路设计实战:从原理到仿真一步到位(附Multisim文件)

本文详细解析了运放与三极管构建恒流源电路的核心原理,重点阐述了负反馈机制如何实现精准的电流控制。通过Multisim仿真实战,从电路搭建、参数计算到负载调整率与动态响应分析,一步步指导设计过程,并提供常见故障的调试技巧与PCB设计要点,帮助工程师从理论平稳过渡到可靠实践。

7z8x2c4v6b9的博客 712

unity shader 后处理实现水墨风格渲染「Low Poly 」变「水墨画 」

水墨风格渲染 这次学校的比赛打算做一个中国古代背景的游戏,所以尝试做了水墨风格的渲染。 主要按以下四步来实现的效果: 根据色调和饱和度调整饱和度。 对图像进行模糊 水墨风格的物体边缘 物体内画笔笔触的模拟 接下来我分别就这四步依次展开说明: 调整饱和度 这里我使用Post-Processing Stack 的Color Grading 来调节饱和度,通过使用Grading Curv...

九级铁甲蛹的博客 1万+

如何通过 STS Assume API 为 MinIO 获取临时访问凭证?

在客户端应用或外部服务需要访问 MinIO 对象资源,但不希望把长期凭证写进应用代码时,可以使用 MinIO STS(Security Token Service)的 AssumeRole 接口:客户端用 MinIO 上一个**已存在用户**的 access key 和 secret key 调用该 API,换取一组临时安全凭证,包含 AccessKeyId、SecretAccessKey 和 S

gitblog_00340的博客 191

SPD5 集线器协议内容解析

​ 若不同SPD5 Hub后面的本地侧设备同时发送请求,则是22和23、24的混合过程,先通过LID裁决,再通过HID裁决,这里的LID是本地设备的,若LID一致,则看HID,由于SPD5 Hub的本地侧设备HID均为111,因此实际上是比较SPD5 Hub的HID,这个过程在前文提到,SPD5 Hub会转换HID。​ 若MR27[4]=1且MR27[3:0]=1,如果MR51[3:0]=1时,发送IBI,并且MR48[7]置1,将GETSTATUS CCC的待处理中断位[3:0]更新为0001。

weixin_50591344的博客 3861

MinIO控制台KMS密钥错误排查指南:从原理到实战解决

服务器端加密(SSE)是对象存储数据安全的核心技术,通过加密算法保护静态数据。其原理主要采用信封加密(Envelope Encryption)模式,使用数据加密密钥(DEK)加密数据,再用主密钥(KEK)加密DEK,实现密钥与数据分离管理。这项技术的核心价值在于满足合规要求、防止数据泄露,并实现细粒度的密钥生命周期管理。在MinIO对象存储的实际应用场景中,SSE-KMS模式通过集成外部密钥管理服务(如HashiCorp Vault、AWS KMS),将密钥管理职责委托给专业系统。然而,配置过程中常见的“K

weixin_34290631的博客 337

基于STM32F407与AD9910/AD9959的高频可调DDS信号源设计与实战

本文详细介绍了基于STM32F407微控制器与AD9910/AD9959高性能DDS芯片的高频可调信号源设计与实现。文章从DDS原理入手,阐述了双芯片方案的优势,并重点分享了高频电路设计中的电源、PCB布局布线等关键硬件设计技巧与避坑指南。同时,提供了通过SPI配置DDS芯片及利用Matlab生成任意波形的软件驱动方法,旨在帮助开发者打造一个覆盖10Hz至4200MHz的实用信号发生器。

weixin_36184718的博客 123

2025年“区块链技术”职业院校技能大赛赛后复盘与总结(必看)

记录一次2025年“区块链技术”职业院校技能大赛的参加经验总结与赛后复盘

我是网络安全兼技能大赛工程师,专注网络安全技术学习与技能大赛实战!持续分享最新的技术文章,帮你少走弯路,一起在技术赛道上进步~ 1995

MinIO Docker 部署实战:单节点 S3 兼容对象存储落地指南

对象存储是现代应用基础设施的核心组件,S3 协议已成为云原生存储的事实标准。其核心原理在于通过 RESTful API 提供高可用、可扩展的非结构化数据存取能力,技术价值体现在协议标准化、厂商中立性与开发运维一致性上。典型应用场景包括应用附件托管、CI/CD 构建产物归档、边缘设备元数据缓存及私有图床建设。在本地或轻量服务器环境中,MinIO 凭借完整的 S3 兼容性与 Docker 原生支持,成为最主流的开源替代方案;而 Docker 部署则通过环境隔离、依赖固化与声明式配置,显著降低单节点 MinIO

daxi1047的博客 496

高德地图API如何使用

通过以上步骤,您可以成功接入并使用高德地图API来为您的应用添加丰富的地图功能。

QQ_778132974的博客 4794

MinIO Docker 部署:9000/9090端口映射与MINIO_BROWSER_REDIRECT_URL配置详解

本文详细解析了MinIO在Docker环境中的部署实践,重点讲解9000/9090端口映射配置与MINIO_BROWSER_REDIRECT_URL环境变量的关键作用。通过实战示例展示如何解决反向代理场景下的重定向问题,并提供Docker Compose完整配置方案,帮助开发者快速搭建高性能对象存储服务。

458

基于语义分割的实时建图:HDMap动态更新

基于语义分割的实时建图:HDMap动态更新​ ,人工智能,计算机视觉,大模型,AI,本文围绕基于语义分割的实时建图技术在HDMap动态更新中的应用展开,介绍了语义分割基础、HDMap概述、相关实时建图技术、动态更新关键技术、系统性能评估指标、实际应用案例、面临的挑战与解决方案及未来发展趋势。阐述了该技术如何利用传感器数据和语义分割算法,解决传统HDMap构建与更新的弊端,分析了其在精度、实时性、鲁棒性等方面的表现,以及在自动驾驶和智能交通中的应用,还探讨了现存问题及未来优化方向。

不踩坑,不知道坑有多深;不总结,踩过的坑白踩。 22万+

关于 Nginx 监听地址 0.0.0.0 的详细解释

0.0.0.0在Nginx配置中表示监听服务器所有网络接口(包括公网IP、内网IP和本地回环地址),这是默认配置。当使用listen 80;时,Nginx会接受通过服务器任何IP地址的80端口访问请求。相比只监听特定IP,这种配置更通用,但也意味着服务会对外网开放,需注意安全风险。可通过netstat命令验证监听状态,显示0.0.0.0:80即表示正确配置。

weixin_43674738的博客 1567

分布式对象存储MinIO:简介、实战、进阶

概述、概念、安装、客户端、命令行、Java客户端、工具类封装、纠删码

lonelymanontheway的博客 1401

visio安装包

Microsoft Office Visio 是一款专业的制图软件。利用经过更新的形状、协作工具和数据链接图表,创建专业级图表以简化复杂的信息。

MLflow生产级落地:PostgreSQL+MinIO高可用架构实战

MLflow作为主流模型生命周期管理工具,其核心价值在于实现机器学习工作流的可追溯性、可复现性与协作性。然而,开箱即用的默认配置(如SQLite后端、本地文件存储)在并发写入、多节点部署和权限治理等场景下极易失效,导致实验混乱、artifact丢失、审计缺失等工程断点。本文聚焦MLflow生产化落地的关键技术路径,深入解析PostgreSQL保障元数据ACID事务与全链路审计能力,结合MinIO提供S3兼容、版本化、高可用的模型制品存储方案,并覆盖Kubernetes部署、CI/CD集成、PySpark适配

weixin_30328063的博客 314

Outlook Express 6 (OE6) for Win7/Win8/Win10

英文版 Outlook Express6.0, 兼容Win7/Win10/WinXP,解压就可用。

数学建模模型总结

这是本人在两年内准备参加数学建模竞赛搜集到的模型资料,已经经过了本人的筛选和整理,希望能够对准备参加数学建模竞赛的学弟学妹们提供一些帮助!

图片查重从设计到实现(3)图片存储MinIO 应用介绍及 Docker 环境下的安装部署

MinIO 是一款基于对象存储的高性能开源软件,兼容 Amazon S3 API,适用于存储大量非结构化数据(如图片、视频、日志文件等)。

这里是一位在代码世界深耕多年的 “老江湖” 的自留地。​ 岁月在履历上添了厚度,却没磨掉敲代码时眼里的光。从调试第一行 hello world 的生涩,到架构复杂系统的从容,那些在键盘敲击声里流过的日夜,都想在这里慢慢梳理 797

Probability and Statistics - 4th edition

Probability and Statistics - 4th edition

本地部署mcp-server-chart服务:从零到生产的完整指南,实现AI智能图表可视化

本文介绍了一种基于 NestJS 和 MinIO 的本地化 MCP 图表渲染解决方案,解决了原版 mcp-server-chart 依赖外部服务的网络稳定性、数据安全和定制化等问题。方案采用 Docker Compose 一键部署,支持 22+ 种图表类型,提供通用和专用两套 API 接口,并详细说明了生产环境的关键配置、安全设置以及与 MCP 客户端的集成方法。同时分享了两套部署方案(mcp-server-chart-minio 和 mcp-swagger-server cli)以及常见问题的解决方案,具

zaizaizhap的博客 3835

BlenderGIS 实战教程:把真实地理数据搬进 Blender,从导入到地形渲染

BlenderGIS 是一个面向 Blender 的开源地理数据插件(Add-on),负责在 Blender 与 GIS 数据之间架起桥梁:导入 Shapefile、GeoTIFF、OpenStreetMap 等格式,在线拉取 DEM 高程与路网建筑,管理场景地理参考,并生成可渲染的 3D 地形。如果你的目标是在 Blender 中做城市规划、电影级地貌、游戏场景或数据可视化,这份教程会带你从零搭

gitblog_00153的博客 624
上一篇: SHOW MASTER STATUS has gone away?
下一篇: Crond active time prevented the task from executing
Awesome Database
博客等级 码龄14年 128粉丝 26原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值