
spark
文章平均质量分 93
陈某1987
知道的多,不知道的更多
展开
-
Linux安装单机版Spark(CentOS7+Spark2.1.1+Scala2.12.2)
Linux安装单机版Spark 版本号:CentOS7 Spark2.1.1 Scala2.12.2 JDK1.8原创 2017-05-17 13:40:42 · 13702 阅读 · 1 评论 -
Hive On Spark报错:Exception in thread "main" java.lang.NoClassDefFoundError: scala/collection/Iterable
解决Hive On Spark 报错Exception in thread "main" java.lang.NoClassDefFoundError: scala/collection/Iterable原创 2017-05-27 18:15:00 · 20590 阅读 · 5 评论 -
Hive On Spark报错:Failed to execute spark task, org.apache.hadoop.hive.ql.metadata.HiveException
解决Hive On Spark报错:Failed to execute spark task, org.apache.hadoop.hive.ql.metadata.HiveException,关键是版本要对,而且spark.master要配置正确。原创 2017-05-27 18:27:36 · 38101 阅读 · 2 评论 -
Linux安装Spark集群(CentOS7+Spark2.1.1+Hadoop2.8.0)
Linux安装Spark(CentOS7+Spark2.1.1+Hadoop2.8.0)-v1.0.0版本号:CentOS7 Hadoop2.8.0 Spark2.1.1 Scala2.12.2 JDK1.8原创 2017-05-16 22:35:15 · 27438 阅读 · 1 评论 -
Linux搭建Hive On Spark环境(spark-1.6.3-without-hive+hadoop2.8.0+hive2.1.1)
不需要自己手动编译Spark源码,在Linux(CentOS7或者Ubuntu)上搭建Hive On Spark环境 版本号是spark-1.6.3-without-hive hadoop2.8.0 hive2.1.1原创 2017-05-26 22:44:38 · 11148 阅读 · 7 评论 -
Spark2.1.1中用各种模式运行计算圆周率的官方Demo
Spark2.1.1中用各种模式运行计算圆周率的Demo 版本号:CentOS7 Hadoop2.8.0 Spark2.1.1原创 2017-05-17 22:30:02 · 17602 阅读 · 15 评论