hadoop配置文件说明

一、dfs.name.dir

这个参数用于确定将HDFS文件系统的元信息保存在什么目录下。如果这个参数设置为多个目录,那么这些目录下都保存着元信息的多个备份。在实际生产中,一台机器一般会挂多块物理磁盘,这个配置项就会以多目录的方式配置,每个目录放到一个不同的磁盘中,避免机器中某块磁盘坏了无法恢复fsimage的灾难后果。
如:
<property>
    <name>dfs.name.dir</name>
    <value>/pvdata/hadoopdata/name/,/opt/hadoopdata/name/</value>
</property>
二、dfs.data.dir 
这个参数用于确定将HDFS文件系统的数据保存在什么目录下。我们可以将这个参数设置为多个分区目录,即可将HDFS建立在不同分区上。
如:
<property>
    <name>dfs.data.dir</name>
    <value>/dev/sda3/hadoopdata/,/dev/sda1/hadoopdata/</value>
</property>
 
引用如下作者文章
http://blog.itpub.net/24167542/viewspace-1120232/
四、hadoop新旧配置对比
引用作者文章
http://blog.youkuaiyun.com/lifuxiangcaohui/article/details/39106243
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值