(七)Hadoop 3.3.0学习——HDFS

一、准备工作

1. 环境配置

1.1 解压hadoop安装包

在服务器的/usr/local/hadoop目录下进行解压

tar -zxvf hadoop-3.3.0.tar.gz

1.2 配置环境变量

1.2.1 配置hadoop环境变量

打开Linux系统配置:

vim /etc/profile
source /etc/profile

在末尾添加下面内容:

export HADOOP_HOME=/usr/local/hadoop/hadoop-3.3.0
PATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin
1.2.2 配置网络映射
vi /etc/hosts

添加下面内容,后面直接用hadoop代表该主机

192.168.***.*** hadoop
1.2.3 生成公私钥

生成公私钥:

ssh-keygen -t rsa

将公钥拷贝到所有hadoop节点,我这里只有一个节点

ssh-copy-id hadoop

2. HDFS配置

hadoop-3.3.0/etc/hadoop文件目录下进行修改

2.1 core-site.xml

<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://hadoop:9000</value>
    </property>
    <property>
        <name>hadoop.tmp.dir</name>
        <value>/usr/local/hadoop/hadoop-3.3.0/hadoop-tmp</value>
    </property>
</configuration>

2.2 hdfs-site.xml

由于我没有搭集群,只部了一个HDFS服务,所以备份数量是1

<configuration>
    <property
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

郭建華

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值