12、使用 Azure Data Factory 在数据存储之间集成数据及 Azure Data Lake Store 介绍

像素大盗

于 2025-11-01 16:06:12 发布

阅读量15

点赞数

CC 4.0 BY-SA版权

分类专栏： Azure IoT实战解析文章标签： Azure Data Factory Data Integration Azure Data Lake Store

本文链接：https://blog.youkuaiyun.com/2w3e4r5t6y/article/details/154666998

Azure IoT实战解析专栏收录该内容

22 篇文章 ¥499.90

订阅专栏¥69.90

会员秒杀 ¥9.9 重磅福利

超级会员免费看

使用 Azure Data Factory 在数据存储之间集成数据及 Azure Data Lake Store 介绍

1. 配置 Azure 数据工厂相关组件

在使用 Azure Data Factory 进行数据集成时，首先需要配置一些关键组件，如数据集和管道。

1.1 配置数据集

以下是一个 Azure Blob 数据集的 JSON 配置示例：

{
    "name": "AzureBlobInput",
    "properties": {
        "type": "AzureBlob",
        "linkedServiceName": "AzureStorageLinkedService",
        "typeProperties": {
            "fileName": "data.csv",
            "folderPath": "adfsample/input",
            "format": {
                "type": "TextFormat",
                "columnDelimiter": ","
            }
        },
        "availability": {
            "frequency": "Week",
            "interval": 1
        },
        "external": true,
        "policy": {}
    }
}
</