Hadoop之HDFS操作

本文详细介绍Hadoop环境下HDFS的配置与操作流程,包括核心配置文件core-site.xml的设置,如何在HDFS上创建文件夹及上传文件,以及运行主程序后的输出查看,为Hadoop初学者提供实用指导。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

其实本篇文章是我Hadoop环境安装的续篇。在Hadoop本地开发入门这篇文章中,我的输入输出文件全部在本地,并没有上传到HDFS上面。今天就是HDFS的操作。

1 配置core-site.xml

<?xml version="1.0" encoding="UTF-8"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
   <property>
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:9000/</value>
    </property>

    <property>
        <name>hadoop.tmp.dir</name>
        <value>file:///D:/hadoop-info/hadoop-2.8.1/data/tmp</value>
    </property>
</configuration>


2 配置运行参数:
在这里插入图片描述

3 在HDFS上新建input文件夹:

D:\hadoop-info\hadoop-2.8.1\sbin>hadoop fs -mkdir hdfs://localhost:9000/input

4 往input文件夹里面上传readme.txt

D:\hadoop-info\hadoop-2.8.1\sbin>hadoop fs -put D:\hdfs\readme.txt hdfs://localhost:9000/input

5 运行主程序

6 查看output输出:

D:\hadoop-info\hadoop-2.8.1\sbin>hadoop fs -ls hdfs://localhost:9000/output

在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值