本文属于【Azure Data Platform】系列。
接上文:【Azure Data Platform】ETL工具(21)——Azure Databricks使用(1)——访问Azure Blob
本文演示如何整合ADF和Azure Databricks
环境准备
前面已经演示过如何创建ADF和Azure Databricks,下面来演示如何整合它们。首先对于Azure Databricks,先要创建集群(集群是基础),然后创建一个表。
如下图导航:

会出现一个新界面,提示创建新表的配置。可以通过上传文件,也可以通过其他数据源。这里先用前面用过的文件作为数据源上传,上传完毕后,可以选择集群:

然后点击【preview table】可以看到下图所示,同时因为文件的第一行是表头,所以勾选“First row is header”,点击【create table】创建Databricks的表。

创建成功后会看到如下信息:

本文介绍如何将Azure Data Factory (ADF) 与 Azure Databricks 整合,包括环境准备、在Databricks中创建表,以及在ADF中配置数据集以连接Databricks Delta Lake,实现数据ETL流程的高效协同。
最低0.47元/天 解锁文章
3174

被折叠的 条评论
为什么被折叠?



