【小白视角】大数据基础实践(三)HDFS的简单基本操作_使用客户端节点执行hdfs dfs -put文件上传至hdfs很慢

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化资料的朋友，可以戳这里获取

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

HDFS的简单基本操作

• • 1. 实验环境
    • 2. HDFS
    • • 2.1 简介
        • 2.2 体系结构
        • • 2.2.1 NameNode
            • 2.2.2 SecondaryNameNode
            • 2.2.3 DataNode
            • 2.2.4 通讯协议
            • 2.2.5 局限性
    • 3. 利用Shell命令HDFS进行交互
    • • 3.1 概要
        • 3.2 目录操作
        • 3.3 文件操作
    • 4. 利用web界面管理HDFS
    • 5. 使用JavaApi进行管理HDFS
    • • 5.1 导包并测试
        • 5.2 题目
        • • 第一题
            • 第二题
            • 第三题
    • 6. 在集群上运行
    • 7. 结语
    • 最后

1. 实验环境

⚫操作系统：Linux（Ubuntu18.04）；
⚫ Hadoop版本：3.1.3；
⚫ JDK版本：1.8；
⚫ Java IDE：IDEA；
⚫ Hadoop伪分布式配置。

2. HDFS

2.1 简介

HDFS（Hadoop Distributed File System）分布式文件系统，是Hadoop项目的核心子项目，是分布式计算中数据存储管理的基础。

优点：

• 兼容廉价的硬件设备
• 流数据读写<