7、深入了解 Azure 数据湖存储层

深入了解 Azure 数据湖存储层

在现代数据分析系统中，存储层起着至关重要的作用。本文将详细介绍 Azure 数据湖存储层的相关内容，包括如何设置云大数据存储、如何组织数据湖以及数据湖中的不同区域等。

1. 技术要求

在开始之前，需要满足以下技术要求：
- 拥有一个至少具有贡献者权限的 Azure 订阅，或者是该订阅的所有者。
- 具备创建启用分层命名空间的 Azure 存储帐户的权限。

2. 设置云大数据存储

当你在 Azure 订阅中搜索 Azure Data Lake 时，会找到同名服务，但我们不使用该服务，因为它是第一代 Data Lake Storage，仅为了保持连续性而存在。我们将使用基于标准 Azure 存储帐户的 Data Lake Store Gen2，具体设置步骤如下：
1. 选择存储帐户类型 ：启用存储帐户的分层命名空间，将其转换为数据湖存储。标准存储帐户只能创建容器来放置 blob，而启用分层命名空间后，可以创建所需的任何文件夹结构和层次，还能为每个文件夹添加安全设置并建立细粒度的访问控制。
2. 创建 Azure Data Lake Gen2 存储帐户 ：
- 访问 Azure 门户 并登录。
- 点击“创建资源”。
- 在搜索框中输入“storage”，从结果预览中直接选择“存储帐户”，或按回车键进行搜索后从结果页面选择“存储帐户”，进入存储帐户预配起始页面。