hadoop 增加存储目录

Hadoop配置：增加HDFS存储目录

最新推荐文章于 2024-03-14 15:22:09 发布

HanLaotwo

最新推荐文章于 2024-03-14 15:22:09 发布

阅读量1.8k

点赞数

CC 4.0 BY-SA版权

分类专栏： hadoop 文章标签： hadoop hdfs

本文链接：https://blog.youkuaiyun.com/BoomHankers/article/details/78925506

hadoop 专栏收录该内容

1 篇文章

订阅专栏

本文介绍了如何在CDH集群上扩展Hadoop HDFS的存储容量，具体操作是在DataNode节点的配置中，增加`dfs.data.dir`或`dfs.datanode.data.dir`参数来添加新的数据目录，无需预先创建该目录。

直接在cdh上配置

HDFS -> 配置 -> datanode ->DataNode 数据目录dfs.data.dir,dfs.datanode.data.dir

增加一个目录，不用提前创建

[root@hs03 dn]# hadoop fs -df -h
Filesystem           Size     Used  Available  Use%
hdfs://hs03:8020  854.0 G  291.8 G    337.7 G   34%

[root@hs03 dn]# df -h
Filesystem            Size  Used Avail Use% Mounted on
/dev/mapper/vg_dev023053-lv_root    295G  229G   52G  82% /
tmpfs                               16G     0   16G   0% /dev/shm
/dev/sda1                           477M   33M  419M   8% /boot
cm_processes                        16G   89M   16G   1% /opt/cm-5.7.1/run/cloudera-scm-agent/process

[root@hs03 dn]# hadoop fs -df -h
Filesystem           Size     Used  Available  Use%
hdfs://hs03:8020  859.7 G  291.8 G    343.5 G   34%
[root@hs03 dn]#