【入门Airflow】 使用Docker在本地快速搭建Airflow

前言

本文主要参考官方文档编写。我将顺着官方文档的流程在本地安装Airflow ，并且附上安装过程的截图。

其实官方文档步骤写得都是比较详细，奈何这英语能力真的拉跨。

不过还是建议大家在使用过程中遇到的任何问题，优先去查看官方文档，有奇效。

官方文档：

https://airflow.apache.org/docs/apache-airflow/stable/start/docker.html

生产准备

这里Airflow官方建议我们不要使用当前这种“快速入门”的方式用在生产环境。本文的这种方式就供我们在本地学习使用。

如果要在用在生产环境，官方建议使用Kubernetes和Heml Chart部署

开始之前

你需要安装以下必要的工具：

1. 安装 DockerCommunity Edition
2. 安装Docker Compose (v1.29.1版本以上)

提示：

在MacOS上经常性会因为内存分配不够，导致无法运行Airflow。如果你没有分足够的内存，将会导致Ariflow WebServer不断的重启。你应该至少分配4G 的内存（推荐8G）。

我们可以运行下方命令，去检查是否有足够的内存：

docker run --rm "debian:buster-slim" bash -c 'numfmt --to iec $(echo $(($(getconf _PHYS_PAGES) * $(getconf PAGE_SIZE))))'

docker-compose.yaml

下载docker-compose.yaml文件

curl -LfO 'https://airflow.apache.org/docs/apache-airflow/2.2.2/docker-compose.yaml'

</