
spark
文章平均质量分 62
夏殇0808
越努力越幸运
展开
-
pyspark使用指定python环境后的提交方法
pyspark使用指定python环境后的提交方法原创 2017-12-25 17:05:09 · 8946 阅读 · 1 评论 -
pyspark依赖第三方库
spark集群中使用python第三方库原创 2017-12-20 13:47:59 · 7045 阅读 · 1 评论 -
hive和spark-sql计算stddev的结果差异
hive和spark-sql中的标准差计算方式原创 2017-11-03 16:48:27 · 5230 阅读 · 0 评论 -
hadoop琐碎
hadoop原创 2017-07-11 11:18:23 · 301 阅读 · 0 评论 -
ipyhon中 import pyspark
export SPARK_HOME=/Users/Atina/Software/spark-1.6.1-bin-hadoop2.6export PYTHONPATH=$SPARK_HOME/python:$SPARK_HOME/python/build:$PYTHONPATHexport PYTHONPATH=$SPARK_HOME/python/lib/py4j-0.9-src.zip:$P原创 2016-05-18 12:33:11 · 1104 阅读 · 0 评论 -
Spark 学习笔记
边读边给自己提问题,了解学习原因,多问自己为什么。原创 2016-04-13 16:28:30 · 2096 阅读 · 0 评论