hadoop 安装注意事项

   最近需要研究hadoop,昨天开始搭建环境。网上有相关的教程,可以参考http://wenku.baidu.com/view/9638bc0d4a7302768e9939ca.html

 

 

 但是在安装过程中也出现了一些问题,需要注意的。

 1.还需要设置

   在hdfs.site.xml中设置的属性dfs.name.dir,dfs.data.dir

 <property>

    <name>dfs.data.dir</name>
    <value>/home/hadoop/dfs/data</value>
    <final>true</final>
  </property>
  <property>
    <name>dfs.name.dir</name>
    <value>/home/hadoop/dfs/name</value>
    <final>true</final>
  </property>

  如果按照教程中的做法,没有设置,会有默认设置

dfs.name.dir:${hadoop.tmp.dir}/dfs/name

dfs.data.dir${hadoop.tmp.dir}/dfs/data

而tmp目录下的内容会定期删除的,不利于设计应用。

另外,dfs.name.dir,dfs.data.dir目录需要手动创建,否则集群启动时会目录不存在的错误。

 

 

2.在使用hadoop namenode -format命令时

 首次格式化时,会让选择Y OR NOT 记得使用大写 Y来选择,根据我的经验,用y格式化不成功哦。

 

3.养成好习惯,用户个人环境变量最好设置在~/.bash_profile中而不要设置在/etc/profile

 

接下来遇到问题,再跟大家分享

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值