大数据_程序哥聊面试的博客-优快云博客

大数据

关注

关注数：文章数：1 文章阅读量：943 文章收藏量：1

作者: 程序哥聊面试

hello, 大家好，我是Java程序哥，一个来自魔都的程序员，小马哥每个月会付我薪水！！！微信搜【VeryJava】关注我，关注后回复【资料】有我准备的大厂面经、简历模板和免费电子书， GitHub https://github.com/VeryJava 整理了很多我的文档，欢迎Star和完善，今天最大的努力，是明天最低的要求，加油。

展开

Java接入Spark之创建RDD的两种方式和操作RDD

首先看看思维导图，我的spark是1.6.1版本，jdk是1.7版本spark是什么？Spark是基于内存计算的大数据并行计算框架。Spark基于内存计算，提高了在大数据环境下数据处理的实时性，同时保证了高容错性和高可伸缩性，允许用户将Spark 部署在大量廉价硬件之上，形成集群。下载和安装可以看我之前发表的博客Spark安装安装成功后运行示例程序在spark安装目录下examples/src/main目录中。运行的一个Java或Scala示例程序,使用bin/run-example

转载 2020-09-13 10:35:27 · 943 阅读 · 0 评论

大数据

作者: 程序哥聊面试

Java接入Spark之创建RDD的两种方式和操作RDD