18、Azure 中的数据分析与机器学习应用

Azure 中的数据分析与机器学习应用

在 Azure 平台上，数据分析和机器学习相关的服务为处理大规模数据提供了强大的支持。下面将详细介绍 Azure 中一些重要的数据处理和分析服务。

Azure Synapse 分析

Azure Synapse 分析有两种消费和定价模型，基于以下属性：
- 可预测的性能和成本：需要创建专用 SQL 池，为存储在 SQL 表中的数据预留处理能力。
- 不可预测的突发工作负载：可以使用无服务器 SQL 端点将系统配置为随时可用。

要在 Azure Synapse 中启用单个集群，需要整合四个应用程序：Synapse SQL、适用于 Azure Synapse 的 Apache Spark、SQL 互操作性和 Apache Spark。所有这些组件都在数据湖的范围内工作，使用 Azure Data Studio 与管道集成，并通过 Synapse Studio（Azure Synapse 的前端界面）进行管理。若想深入了解如何使用和构建跨这些解决方案的大数据解决方案，可查看 相关文档 。

Azure HDInsight

Azure HDInsight 是 Microsoft 推出的基于 Hadoop 组件的云分发平台。它允许用户使用自定义的分析驱动环境，快速且经济高效地处理大量数据。借助 Hadoop、Spark、Hive、LLAP 和 Kafka 等流行的开源框架，用户可以轻松地收集、分析和评估大规模数据，并应用 ETL