
Hadoop
文章平均质量分 89
资料总结自尚硅谷大数据课程
喵先生呢
优秀的人哪都好,唯一的缺点是让人觉得自己是个垃圾。
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
itbuild-hadoop生态圈
衣带渐宽终不悔,为伊消得人憔悴。原创 2020-12-21 13:20:35 · 957 阅读 · 0 评论 -
7. Hadoop完全分布式运行模式
准备3台客户机(关闭防火墙,静态IP,主机名称) 安装JDK 配置环境变量 安装Hadoop 配置环境变量 配置集群 单点启动 配置ssh 群启并测试集群 ...原创 2020-07-06 08:50:34 · 369 阅读 · 0 评论 -
6. 集群分发脚本xsync
scp可以实现服务器与服务器之间的数据拷贝(from server1 to server2);rsync 拷贝有差异的文件,rsync主要用于备份和镜像。具有速度快、避免复制相同内容和支持符号链接的优点。原创 2020-07-05 21:52:10 · 276 阅读 · 0 评论 -
5. Hadoop配置文件
Hadoop配置文件分两类:默认配置文件和自定义配置文件,只有用户想修改某一默认配置值时,才需要修改自定义配置文件,更改相应属性值。原创 2020-07-04 22:30:39 · 380 阅读 · 0 评论 -
4. Hadoop伪分布式运行模式
Hadoop伪分布式并不是真的分布式,这种模式是在一台机器上各个进程运行在Hadoop的各个模块上,各个进程是分开运行的,但是它们运行在同一操作系统上的,同一台机器上,而我们重点学习的是其中配置文件的配置,HDFS、YARN的启动和关闭等...原创 2020-06-30 17:23:22 · 1141 阅读 · 0 评论 -
2. Hadoop框架引出大数据生态
大数据基础知识储备原创 2020-06-28 14:02:10 · 436 阅读 · 0 评论 -
1. 大数据概论
掌握大数据第一步原创 2020-06-28 13:55:21 · 427 阅读 · 0 评论 -
3. 安装Jdk、Hadoop以及测试Hadoop本地运行模式
bin目录:存放对Hadoop相关服务(`HDFS,YARN`)进行操作的脚本etc目录:Hadoop的配置文件目录,存放Hadoop的配置文件lib目录:存放Hadoop的本地库(对数据进行压缩解压缩功能)sbin目录:存放启动或停止Hadoop相关服务的脚本share目录:存放Hadoop的依赖jar包、文档、和`官方案例`原创 2020-06-27 21:31:37 · 408 阅读 · 0 评论