
大数据问题积累
追风的星星
自学java 不学会不是人 立flag
展开
-
大数据踩坑记录20200628
saveAsTextFile 保存得地址是到文件夹得 根本不是导出得一个文件 mapRDD.coalesce(1,true).saveAsTextFile(filePath);原创 2020-06-28 14:25:11 · 209 阅读 · 0 评论 -
使用deploy-mode client 时候遇到的问题
spark-submit \ --master yarn \ --deploy-mode client \ --executor-memory 20g \ --executor-cores 4 \ --num-executors 3 \ --class com.cpic.sparkdemo.downTest.downTxtSelect /cpic/cpicapp/lm_test/jav 报错log Exception in thread "main" org.apache.spark.SparkE.原创 2020-06-23 13:50:35 · 939 阅读 · 0 评论