Spark
关注
分享
扫一扫
文章平均质量分 81
Spark大数据处理技术
wanglingli95
希望可以在这个平台上和大牛们一起学习、进步！
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Spark3.5.6伪分布式集群搭建（Ubuntu系统）
JDK 8：至少4GB内存，20GB磁盘空间以下是基于Ubuntu系统的Spark伪分布式集群搭建全流程。以。原创 2025-07-10 09:34:03 · 1250 阅读 · 0 评论 -
在IDEA运行spark程序（搭建Spark开发环境）
在IDEA中运行spark程序原创 2023-11-01 15:56:32 · 30716 阅读 · 11 评论 -
Spark编程基础
RDD是一个容错的、只读的、可进行并行操作的数据结构，是一个分布在集群各个节点中的存放元素的集合，即弹性分布式数据集。原创 2024-04-06 19:58:55 · 1702 阅读 · 0 评论 -
Spark3.2.1伪分布式集群搭建（CentOs系统）
软件版本安装包VMware虚拟机16.exeSSH连接工具FinalShellLinux OSCentOS7.5.isoJDK1.8Spark3.2.1。原创 2024-03-11 17:23:42 · 1403 阅读 · 0 评论 -
Spark算子
RDD算子原创 2023-11-12 13:49:40 · 366 阅读 · 0 评论 -
Spark3.5.6本地模式环境搭建(Ubuntu系统)
出现以上界面，则基于Linux的Spark本地（Local）模式的环境搭建成功！没有安装Hadoop！注意：如果没有安装JDK请先学习。原创 2025-07-04 21:18:49 · 721 阅读 · 0 评论 -
IDEA的Scala环境搭建实验指导书
因为上一步安装的IDEA版本是2025.1.3，所以要下载对应版本的Scala插件（2025.1.27）选择Scala版本（选择已安装在windows系统的scala）配置项目SDK（选择已安装的JDK）输入项目名称和位置，点击create。3. 安装完成后重启IDEA。双击安装包，直接傻瓜式安装。启动IDEA，完成初始配置。注意：zip包不用解压。原创 2025-07-04 11:39:15 · 573 阅读 · 0 评论