airflow run记录

本文详细介绍了Airflow的安装与配置过程,包括安装Airflow和Celery,对airflow.ufg文件进行配置,启动scheduler、worker和webserver。期间遇到连不上数据库的问题,需修改SQL配置、创建账户并刷新权限。最后还提到可能出现包导入不了的情况,需在虚拟环境路径下添加路径。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

1 安装airflow

2 安装celery

3 去~/airflow/下面 有airflow.ufg 这个文件进行配置:

    主要是 home(不变)  dag的url(变成miveshow_jobs_src)

4 airflow scheduler

5 airflow worker --然后发现连不上db ---然后去 airflow.ufg 中 把sql 的配置改成mysql, 并且可以看到他默认用一个账号和密码都为airflow去连接localhost,所以去创建账户、给予权限、并且flush刷新

6 airflow webserver -p 8080

然后就可以run起来了,看起来简单,但是官方文档并没有给的这么详细。。。全靠自己摸索

 

最后有可能出现有些 包import 不了,比如pyutil 之类的,那是因为可能是虚拟环境的路径

在虚拟环境地址的python2.7/ lib 的 data.pth下有添加路径

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值