- 博客(6)
- 收藏
- 关注
原创 Scala 基础
第一种方法:第二种方法:1~50,每间隔5取值取奇数1~20,每间隔2取值取偶数1~20,每间隔2取值用第一种方式 定义两个整数相除的代码:用第二种方式 定义两个整数相加的代码:
2024-05-16 16:35:55
159
原创 伪分布式安装+spark+Scala
伪分布式安装参考:[root@cxy opt]# tar -zxf spark-3.2.1-bin-hadoop2.7.tgz -C /usr/local/[root@cxy opt]# cd /usr/local/spark-3.2.1-bin-hadoop2.7/conf/
2024-04-25 16:12:17
651
3
原创 Hadoop伪分布式安装
2 查看Linux是否安装java jdk如果查询有其他java版本,则需要卸载rpm -e --nodeps 查询的包名3.cd至上传目录tar 指令解压:tar -zxvf jdk-8u361-linux-x64.tar.gz重命名为jdk(方便配置环境变量)mv jdk1.8.0_361/ jdk5.配置环境变量vim /etc/profile在这个文件最后换行添加如下三行:# JDKexport JAVA_HOME=/opt/jdkexport PATH=$JAVA_HOME/bin:$PATH6
2024-04-25 15:10:45
1019
1
原创 大数据那些事儿
Hadoop生态圈组建介绍Hadoop是一种大数据框架结构,我们可以把它比作一个大型的工厂。划重点:是个框架,MapReduce就是里面的核心组件HDFS和MapReduceHDPS提供存储,MapReduce提供计算,YARN用于管理和调度HDPS(Hadoop Distributed File System)是Hadoop的文件系统,它是Hadoop生态系统中的核心项目之一,是分布式计算中数据存储管理基础。
2024-03-07 17:41:42
961
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅