Java Spark代码报错:java.lang.NoSuchMethodError:net.jpountz.lz4.LZ4BlockInputStream
spark 流应用读取kafka时报的jar包冲突,lz4-1.3.0.jar和lz4-1.2.0.jar不兼容,还在之前使用阿里云时发现提交spark命令时自动加载的lz4-java-1.4.0.jar,没有发生类似问,集群程序应用下,spark-submit通过 --jars 指定这个jar包,解决问题,感谢开发此兼容jar包的无名人士,提供了方便
...
原创
2020-03-13 17:33:17 ·
521 阅读 ·
0 评论