CDH6.2.1安装Airflow1.10.3 完整步骤总结

最新推荐文章于 2026-01-09 15:15:24 发布
原创 最新推荐文章于 2026-01-09 15:15:24 发布 · 994 阅读 · 4 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#CDH6.2安装Airflow

本文记录了一位初学者在CentOS7.10上安装CDH6.2.1并集成Airflow1.10.3的过程。首先，下载并部署了Redis5.0.4，然后下载Airflow parcel并放入指定目录，重启Cloudera Manager。接着创建Airflow所需的MySQL数据库，并设置权限。在CDH中激活和分配Airflow parcel，但遇到worker启动失败的问题。通过安装setuptools和pip，以及解决redis导入错误，最终成功修复问题。

一、环境：

CentOS 7.10

CDH 6.2.1(python 2.7)

 

二、前提

第一次接触Airflow，也没有python基础，需要在CDH中集成Airflow环境，准备阶段，查询发现需要redis支持，单独搭建了Redis5.0.4(注意配置远程访问)，具体使用，尚在摸索中。

太小白了，好多大拿的文章写的比较省略，翻了好长时间的百度和必应，才搞出来，路漫漫其修远兮，我将继续努力！

三、参考链接

https://blog.youkuaiyun.com/qq_40593230/article/details/114840066

https://blog.youkuaiyun.com/weixin_39122545/article/details/108486246

https://blog.youkuaiyun.com/wang725/article/details/80071074

https://blog.youkuaiyun.com/qq_34759180/article/details/86370403

感

最低0.47元/天 解锁文章
初识Java专业知识讲座(1).pptx
06-22
由于JVM的存在，Java程序只需编写一次，即可“一次编写，到处运行”（Write Once, Run Anywhere）。Java源代码编译后生成的字节码文件是平台无关的，这种设计使得Java程序可以跨平台使用。 Java平台分为三个主要的...
初识Java_课后补充作业
08-17
Java的特点之一是"一次编写，到处运行"（Write Once, Run Anywhere, WORA），这得益于其跨平台的JVM（Java虚拟机）。 课后补充作业通常包括了对课堂知识的巩固与拓展，以下是一些可能涉及的重要知识点： 1. **基本...
初识Java--“Write once,Run anywhere”
2401_86884605的博客
10-30 394
如果源文件包含多个类，编译文件将生成多个扩展名为class的文件（这里只生成了一个），每个扩展名是class的文件中只存放一个类的字节码，其文件名与该类的名字相同。文档注释：/**文档注释*/（常见于方法和类之上描述方法和类的作用），可以被Javadoc工具解析成一套以网页文件形式体现的程序说明文档。不论是单行还是多行注释，都不能参与编译，即编译之后生成的.class文件中不包含注释信息。使用Java解释器来解释执行其字节码文件，进入主类字节码所在目录，运行主类的字节码。多行注释：/*（注释内容）*/；
初识java——Java语言简介
chenchenchencl的博客
07-25 6908
java语言的历史和特性
初识java_初识Java
weixin_42535703的博客
02-20 227
1 初识Java目录1 初识Java1.1 概述1.2 特点1.3 环境搭建与开发工具1.3.1 环境搭建1.3.2 开发工具1.4 初体验Hello World1.4.1 Demo1.4.2 程序流程1.4.3 注意事项1.5 注释1.5.1 单行、多行注释1.5.2 文档注释1.5.3 Demo1.1 概述Java语言在网上有很详细的介绍，感兴趣Java的进化史可以根据链接了解一下，在此就不做...
初识JAVA
weixin_69160215的博客
10-25 755
是一种优秀得程序设计语言，，Java还是一个有一系列计算机软件和规范形成的技术体系，这个技术体系提供了完整的用于软件开发和跨平台部署的支持环境，并广泛应用于嵌入式系统、移动终端、企业服务器、大型机等各种场合。JDK(Java Development Kit):Java开发工具包，提供给Java程序员使用，包含了JRE，同时还包含了编译。例如，Java中的int永远是32位的整数，而在C/C++中，int可能是16位整数、32位整数，也可能是编译器。在Java中，取而代之的是更简单的。
初识java
m0_67568972的博客
10-24 2053
java是一门优秀的程序设计语言，它具有令人赏心悦目的语法和易于理解的语义。不仅如此，Java还是一个有一系列计算机软件和规范形成的技术体系，这个技术体系提供了完整的用于软件开发和 跨平台部署的支持环境，并广泛应用于嵌入式系统、移动终端、企业服务器、大型机等各种场合。
初识Java
2401_86658278的博客
08-12 953
Java 不仅是一种优秀的程序设计语言，有着令人赏心悦目的语法和易于理解的语义，还是一个由一系列计算机软件和规范形成的技术体系。这个技术体系提供了完整的用于软件开发和跨平台部署的支持环境，广泛应用于嵌入式系统、移动终端、企业服务器、大型机等各种场合。
Java-初识Java
han178349的博客
12-12 378
初识Java
初识Java的理解
2301_80176093的博客
08-18 3431
Java是一种优秀的程序设计语言，它具有令人赏心悦目的语法和易于理解的语义。不仅如此，Java还是一个有一系列计算机软件和规范形成的技术体系，这个技术体系提供了完整的用于软件开发和 跨平台部署的支持环境，并广泛应用于嵌入式系统、移动终端、企业服务器、大型机等各种场合。
初识Java SE
yu_yu_y_u_的博客
12-29 810
Java是⼀种优秀的程序设计语⾔，它具有令⼈赏⼼悦⽬的语法和易于理解的语义。不仅如此，Java还是⼀个有⼀系列计算机软件和规范形成的技术体系，这个技术体系提供了完整的⽤于软件开发和跨平台部署的⽀持环境，并⼴泛应⽤于嵌⼊式系统、移动终端、企业服务器、⼤型机等各种场合。
1.初识Java.zip
05-31
Java的“一次编写，到处运行”（Write Once, Run Anywhere，WORA）理念得益于其字节码（.class文件）和Java虚拟机（JVM）。只要目标平台有JVM，Java程序就能运行。 6. **高效性** 虽然Java不以速度见长，但JIT...
Java 并发编程：JUC 包中原子操作类的原理和用法
m0_69632475的博客
01-09 339
通过上一部分的分析，我们应该基本理解了 CAS 的无锁思想，并对“魔法类” Unsafe 有了更全面的了解。这也是我们分析原子包的前提。接下来，让我们一步步分析 CAS 在 Java 中的应用。JDK5 之后，JUC 包提供了包，该包下提供了大量基于 CAS 的原子操作类。如果在未来你不希望对程序代码加锁，但又想避免线程安全问题，那么可以使用该包下提供的类。Atomic 包提供的操作类主要可以分为以下四种类型：基本类型原子操作类引用类型原子操作类数组类型原子操作类属性更新原子操作类。
面向微服务事件驱动与异步消息可靠处理的互联网系统高可用设计与多语言工程实践分享
2501_94180531的博客
01-05 532
事件驱动解耦服务，提高吞吐可靠投递与幂等消费保证消息一致性监控、重试与顺序控制是稳定性的关键微服务事件驱动与异步消息可靠处理，使系统在高并发和复杂业务场景下保持稳定与可控。通过在多语言系统中统一幂等语义、结合可靠投递、顺序控制和监控策略，互联网系统能够在异步流程中实现高可用和长期可维护性。这篇关于事件驱动与异步消息可靠处理的工程实践分享，希望为你在微服务高可用设计中提供可落地、长期有效的参考思路。
Java 25 switch - 表达式多条件判断
最新发布
java界的小学生
01-09 114
Java 25 switch - 表达式多条件判断 记录模式‌：支持复杂对象的模式匹配。
windows下的守护进程|nssm
slongzhang的博客
01-06 1190
NSSM（Non-Sucking Service Manager）是Windows系统中将普通程序封装为系统服务的工具。使用步骤包括：下载解压NSSM，以管理员身份运行CMD/PowerShell；通过图形界面或命令行安装服务，配置可执行文件路径、参数等；使用start/stop/restart命令管理服务；支持通过edit命令修改配置或remove删除服务；建议配置日志功能方便排查问题。核心功能是实现进程守护，确保程序异常退出后自动重启。
Web开发者进阶AI：Agent技能设计模式之迭代分析与上下文聚合实战
沛哥儿的专栏
01-09 632
迭代有界：必须设置maxDepth（如同Web分页的maxPage） 上下文隔离：按会话ID分区存储（Redis key前缀隔离） 技能自治：每个Skill保持无状态（如同RESTful原则）
SpringBoot3 + GraalVM安装和初次打包
风不知从何处起的小屋
01-08 785
本文介绍了使用GraalVM将Spring Boot项目打包为原生可执行文件的完整流程。
面向对象（三）
zyhhkb的博客
01-08 445
原因：因为静态成员会随着类的加载而加载，如果所有成员都是静态的，那么当类一加载，所有的成员都会进入内存，占用大量内存空间。（1）既然static成员好用（类名直接调用，不用new对象调用），那么实际开发中，为什么不把所有成员都定义成静态的呢？如果有些功能在整个代码中重复实现，代码一样，实现功能一样，那就可以将这部分代码抽取出来，形成工具类。（2）分析：方法参数位置，只明确了参数的类型，但是不明确参数个数，此时就可以定义成可变参数。a.静态成员属于类成员，不属于对象成员（非静态的成员属于对象成员）
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值