spark
关注
分享
扫一扫
代码随想随记
211本硕，人工智能方向，前A应用算法专家，发明专利十余项，目前致力于大模型和RAG方向。
懂点工程，会点算法，
如有机器学习/深度学习/大模型/RAG等方向朋友可以一起探讨。
展开
-
spark错误集锦(一)——Exception in thread "main" java.lang.Exception: When running with master 'yarn' either
１、Exception in thread "main" java.lang.Exception: When running with master 'yarn' either HADOOP_CONF_DIR or YARN_CONF_DIR must be set in the environment. at org.apache.spark.deploy.SparkSubm...原创 2018-06-06 16:06:34 · 4781 阅读 · 0 评论 -
本地spark安装运行spark-shell
1、scala安装1.1 jdk安装安装jdk1.8wget --no-cookies \--no-check-certificate \--header "Cookie: oraclelicense=accept-securebackup-cookie" \http://download.oracle.com/otn-pub/java/jdk/8u151-b12/jdk-8u151-linux-...原创 2018-06-06 16:06:21 · 1822 阅读 · 0 评论