CDH6.0.1集成Flink1.10

制作parcel安装包

制作支持CDH-6.0.1的Flink-1.10.0的Parcel安装包

1. 下载项目
   git clone https://github.com/pkeropen/flink-parcel.git
cd flink-parcel
2. 修改配置文件
   vim flink-parcel.properties
   修改后的内容如下：

#FLINK 下载地址
# 这里是内网下载地址，下载之后通过nginx做下载管理的地址
FLINK_URL=http://10.1.24.134:38080/flink-self/flink-1.10.0-bin-scala_2.11.tgz
#flink版本号
FLINK_VERSION=1.10.0
#扩展版本号
EXTENS_VERSION=BIN-SCALA_2.11
#操作系统版本，以centos为例
OS_VERSION=7
#CDH 小版本
CDH_MIN_FULL=5.16.1
CDH_MAX_FULL=6.3.2
#CDH大版本
CDH_MIN=5
CDH_MAX=6

3. 生成parcel文件
   ./build.sh parcel，生成的文件都在FLINK-1.10.0-BIN-SCALA_2.11_build目录下
   
4. 生成csd文件，生成文件FLINK_ON_YARN-1.10.0.jar
   • on yarn版本
     • ./build.sh csd_on_yarn
   • standalone版本
     • ./build.sh csd_standalone

集成flink

1. 将生成的csd的jar包文件放入指定目录中

cp FLINK_ON_YARN-1.10.0.jar /opt/cloudera/csd/