
Hadoop
Frost-xie
运维成长记
展开
-
配置Hadoop3.3.0完全分布式集群
前言:本文主要介绍配置Hadoop3.3.0完全分布式集群;一、部署环境规划1.服务器地址规划2.需要部署的环境(1)关闭火墙(开机自启可以不设置)[root@localhost java]# systemctl stop firewalld[root@localhost java]# systemctl disable firewalldRemoved symlink /etc/systemd/system/multi-user.target.wants/firewa原创 2020-11-01 15:37:14 · 2609 阅读 · 0 评论 -
部署Hadoop(3.3.0)伪分布式集群
前言:本文主要介绍部署Hadoop(3.3.0)伪分布式集群注:本文部署伪分布式集群的前提是已经装好hadoop(3.3.0)以及jvm。一、什么叫做伪分布式?顾名思义,伪分布就是假分布式,假就假在只有一台机器而不是多台机器来完成一个任务,但是模拟了分布式的这个过程,所以伪分布式下Hadoop也就是虽然在一个机器上配置了hadoop的所有节点,但伪分布式完成了所有分布式所必须的事件。伪分布式Hadoop和单机版最大区别就在于需要配置HDFS。二、配置伪分布式Hadoop集群1...原创 2020-11-01 15:13:07 · 1762 阅读 · 0 评论 -
Hadoop-3.3.0的单机版测试和集群节点的搭建
前言:本文主要介绍对Hadoop-3.3.0的单机版测试和集群节点的搭建1. 下载hadoop-3.3.0安装包[root@localhost bags]# wget http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-3.3.0/hadoop-3.3.0.tar.gz2. 添加hadoop用户并且设定密码[root@localhost~]# useradd -u 1000 hadoop [root@localho...原创 2020-10-30 18:02:40 · 450 阅读 · 0 评论