Airflow 中文文档：写日志

最新推荐文章于 2025-09-01 15:43:53 发布

转载最新推荐文章于 2025-09-01 15:43:53 发布 · 778 阅读

0 ·

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/wizardforcel/p/10039821.html

文章标签：

#ui

本文详细介绍如何在Airflow中配置日志系统，包括本地和远程日志的设置方法。用户可以通过base_log_folder参数在airflow.cfg中指定日志文件夹，同时也可以设定远程日志位置，如Amazon S3，实现日志的云端存储与备份。文章还介绍了远程日志的读写依赖于Airflow连接，以及日志文件的命名和存储规则。

在本地编写日志

用户可以使用base_log_folder设置在airflow.cfg指定日志文件夹。默认情况下，它位于AIRFLOW_HOME目录中。

此外，用户可以提供远程位置，以便在云存储中存储日志和日志备份。

在Airflow Web UI中，本地日志优先于远程日志。如果找不到或访问本地日志，将显示远程日志。请注意，只有在任务完成（包括失败）后才会将日志发送到远程存储。换句话说，运行任务的远程日志不可用。日志作为{dag_id}/{task_id}/{execution_date}/{try_number}.log存储在日志文件夹中。