flink 继承 hadoop3 编译实践

由于 hadoop 升级，flink 使用 1.8 版本，需要自定义编译继承 hadoop 3.3.1。

由于历史原因，使用的 flink 版本较低，建议大家使用 flink 1.10 及以上的版本。

一、编译 flink

1、下载源码

git clone -b release-1.8 https://github.com/apache/flink.git

注意：可根据依赖的 flink 版本，切换到对应的分支。

2、编译源码

# skip test

mvn clean install -DskipTests

# 快速编译，skip test、QA、document 等

mvn clean install -DskipTests -Dfast

二、编译 flink-shaded

如果项目需要使用到 hadoop 环境，则需要集成 hadoop 依赖。官方有提供一些 hadoop 版本的集成包，可以将依赖包引入到项目中，或者放置到 flink/lib 目录下。

https://repo.maven.apache.org/maven2/org/apache/flink/flink-shaded-hadoop-2-uber/

第一串数字表示 hadoop 版本，第二串数据表示 flink 版本