在ubuntu 10.04上安装Hadoop

本文详细介绍了在Ubuntu Linux环境下安装Hadoop的过程,包括遇到的环境变量设置、权限问题,以及如何通过修改配置文件来解决Java堆内存不足的错误。提供了从安装到错误处理的完整指南。


前两天晚上包括今天都在弄这个,一直被些现在看来是小问题的事情给弄得很纠结(make me crazy), 和 Imagine - How Creativity Works中说的很符合,过程是曲折的。

下面是具体安装步骤。

  1 安装

     Running Hadoop On Ubuntu Linux (Single-Node Cluster)

    是的,你没看错,照上面的做就行了。

 

 2 错误处理

   安装完成之后,根据官方文档的例子,一直提示问题,其中有环境变量的原因、有权限的缘故。

   经验教训就是,为了避免这一系列的问题,专门为hadoop建立一个用户吧,步骤1中也有。

   这些都搞定后,运行:

    bin/hadoop jar hadoop-examples-*.jar grep input output 'dfs[a-z.]+'
 会提示:
    java.lang.OutOfMemoryError:Java heap space
 解决方法:
   修改/etc/hadoop/hadoop-env.sh,没错,在这里竟然也还有一个hadoop-env.sh。

 3 参见上面两点

 


转载于:https://www.cnblogs.com/wufawei/archive/2012/02/19/2357834.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值