Ozone的S3语义和FS语义

最新推荐文章于 2024-09-25 07:30:00 发布

原创

最新推荐文章于 2024-09-25 07:30:00 发布

· 1.1k 阅读

0 ·

版权

文章标签：

#Ozone FS

本文介绍了Ozone中S3语义和FS语义的区别与联合使用。S3语义允许自由的key命名，而FS语义则需要标准化key名并确保目录结构存在。在联合使用时，Ozone通过特定配置实现S3和FS语义的兼容，以处理混合场景下的读写操作。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

文章目录

前言
Ozone的S3语义和FS语义
Ozone S3语义和FS语义的联合使用
引用

前言

在Ozone中，众所周知，它最开始设计仿照的原型即是S3语义的存储模式：基于volume, bucket, key三层的存储模型，底层的key是实际存储的对象文件。至于里面对于volume, bucket, key级别的API操作，基本也是实现了S3现有支持的API操作。不过Ozone作为同样Hadoop生态圈内的一个项目，它需要与现有别的系统框架能够很好地协调工作。因此，Ozone内部实现了Ozone FS的语义，意思是说，外部别的框架可以使用文件系统API的方式来使用Ozone。简单来说，就是client可以对Ozone调用执行createFile，mkdir， listFile等等这样文件系统的API操作。至于这个里面Ozone是如何做FS API和实际底层Ozone bucket， key的存储，那是另外的原理实现了。OK，本文笔者要聊的重点是这里提到的Ozone内部的S3语义和FS语义。