安装环境:
- java 8
- Scala 2.12
- haddop 2.7.7
安装Cygwin、下载Flink1.14.5
Cygwin下载:https://www.cygwin.com/
镜像下载:https://mirrors.cloud.tencent.com/apache/flink/
启动
Cygwin terminal启动flink安装目录下的bin/start-cluster.sh
bash start-cluster.sh
问题:
1. Improperly specified VM option 'MaxMetaspaceSize
config.sh文件注释掉改行
# export JVM_ARGS="${JVM_ARGS} ${jvm_params}
2. Hadoop is not in the classpath/dependencies
Flink访问HDFS需要两个jar包依赖,Flink自身没有,需要自己放进去。
flink-shaded-hadoop-3-3.1.1.7.2.9.0-173-9.0.jar
commons-cli-1.5.0.jar
3. 8081端口被占用,修改Flink默认端口
修改配置文件conf里面的flink-conf.yaml和masters,将8081端口改为8091。

本文介绍了在Windows 7环境下安装Flink 1.14.5的步骤,包括安装Cygwin、配置Java 8、Scala 2.12和Hadoop 2.7.7。启动过程中遇到的问题包括:VM选项错误、Hadoop不在classpath中、8081端口被占用及JVM堆内存不足。针对这些问题,提出了相应的解决方案,如修改配置文件、添加依赖和调整JVM参数。
最低0.47元/天 解锁文章
1万+

被折叠的 条评论
为什么被折叠?



