chuyouyinghe的专栏

在spark 根目录使用 sbin/start-all.sh 时，console提示 slave JAVA_HOME not set, 找了半天，最后的解决方法如下： 在sbin目录下的spark-config.sh 中添加对应的jdk 路径，然后使用scp -r 命令复制到各个worker节点，即可转自：https://blog.youkuaiyun.com/qq_27882063/article/deta...

sbt编译spark程序提示value toDF is not a member of Seq() 前提 使用Scala编写的Spark程序，在sbt编译打包的时候提示value toDF is not a member of Seq()，出问题的代码如下： val urlDS = Seq(STU(age, count)).toDS() 其中STU是一个定义的case class，定义如...