Azure大数据、分析与DevOps解决方案全解析
1. Azure大数据与分析服务概述
在大数据和分析领域,Azure提供了三个关键服务,分别是Azure Synapse Analytics、Azure HDInsight和Azure Databricks。下面我们将详细介绍这些服务。
1.1 Azure Synapse Analytics
Azure Synapse Analytics是基于云的Azure SQL数据仓库的重新命名。它不仅是名称的改变,还增加了支持大数据的功能,将现代数据仓库与强大且功能齐全的可扩展分析服务相结合。
- 服务性质 :作为完全托管的PaaS解决方案提供给用户,基于大规模并行处理(MPP)关系数据库技术构建。
- 支持技术 :支持将Apache Spark作为完全托管的服务(Spark - as - a - Service)。
- 管理界面 :通过基于浏览器的用户界面Azure Synapse Studio来管理和交互数据。
- 适用场景 :适用于处理PB级数据的大规模现代数据仓库和分析场景,以及运行复杂查询。
- 集群组件 :
- Synapse SQL引擎
- Apache Spark集成服务
- 数据集成层
- Azure Synapse Studio(基于浏览器的用户界面)
1.2 Azure HDInsight
Az