4、深入探索 Azure Databricks：从创建工作区到数据处理与管理

深入探索 Azure Databricks：从创建工作区到数据处理与管理

1. 创建新笔记本

在 Azure Databricks 工作区中创建新笔记本有两种方式：
- 从主工作区直接创建 ：在主工作区中，点击“Common Tasks”下的“New Notebook”链接，会弹出一个对话框，可在其中选择笔记本的默认语言和要附加的集群。
- 在特定目录中创建 ：直接在指定的目录下创建笔记本。

创建好笔记本后，将其附加到集群，就可以开始创建单元格并运行代码。默认语言是 Python，如果想使用其他语言，如 Scala，可以使用魔法命令 %scala 。执行单元格中的代码可以使用快捷键 Ctrl + Enter 或 Shift + Enter 。若笔记本所附加的集群未运行，系统会提示确认是否重新启动它。

2. 处理 Azure 存储中的数据

使用 PySpark 处理 Azure 存储中的数据有三种方式：
- 使用 WASB 文件路径 ：用于指定 Windows Azure 存储 blob 中文件的路径。
- 使用 FS 协议的挂载点 ：使用魔法命令 %fs 指定命令，如 ls ，并使用类似 dbfs:/mnt//<containername>/<partialPath>