
Spark
文章平均质量分 80
Spark
一只倔强的蜗牛
编码人生,深耕技术
展开
-
Spark入门系列(二)
Spark基础使用 下载Spark 使用 Spark 的第一步是下载和解压缩。我们先从下载预编译版本的 Spark 开始。访问 http://spark.apache.org/downloads.html, 选 择 包 类 型 为“Pre-built for Hadoop 2.4 and later”( 为Hadoop 2.4 及更新版本预编译的版本),然后选择“Direct Download”直接下载。这样我们就可以得到一个压缩的 TAR 文件,文件名为 spark-1.2.0-bin-hadoop2.4原创 2021-04-12 22:53:57 · 187 阅读 · 0 评论 -
Spark入门系列(一)
1. Spark 简介 Spark 项目包含多个紧密集成的组件。Spark 的核心是一个对由很多计算任务组成的、运行在多个工作机器或者是一个计算集群上的应用进行调度、分发以及监控的计算引擎。由于Spark 的核心引擎有着速度快和通用的特点,因此 Spark 还支持为各种不同应用场景专门设计的高级组件,比如 SQL 和机器学习等。这些组件关系密切并且可以相互调用,这样你就可以像在平常软件项目中使用程序库那样,组合使用这些的组件。 ...原创 2021-04-11 22:30:28 · 600 阅读 · 0 评论