spark 编译遇到的错误及解决办法(三)

 Failed to execute goal org.apache.maven.plugins:maven-surefire-plugin:2.19.1:test (default-test) 

错误原因：测试代码没通过

mvn clean package -Dmaven.test.skip=true

直接跳过测试

由于全部测试耗时太长，这时需要对修改的模块进行编译（以streaming为例），并且跳过测试（由于测试文件是针对更改前的源码，所以并不适用）

./build/mvn -pl :spark-streaming_2.11 clean install -Dmaven.test.skip=true

 若全体编译过程中某个子模块失败，可以继续编译（例spark-catalyst_2.11）

mvn clean install -rf :spark-catalyst_2.11 -Dmaven.test.skip=true

 附上全编译指令，因为更改完代码投入应用后还是需要在全编译一遍的

./build/mvn -Pyarn -Phadoop-2.4 -Dhadoop.version=2.4.0 -DskipTests clean package -Dmaven.test.skip=true

 

转载于:https://www.cnblogs.com/o-din/p/6347157.html