CentOS安装Hadoop并运行WordCount实例

本文档详细介绍了在CentOS6.2系统中安装Hadoop的步骤,包括下载JDK,配置Hadoop环境,设置SSH免密码登录,格式化Namenode,启动Hadoop,解决因tmp目录问题导致的运行错误,以及运行WordCount示例的完整流程。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

整个配置过程参考http://hadoop.apache.org/docs/r0.19.2/cn/index.html

Linux系统是CentOS6.2

1. 安装jdk。在oracle上下载最新jdk的rpm包,双击安装。系统默认安装到了/usr/java/jdk1.7.0_07文件夹里。

2. 在apache下载最新稳定版hadoop,我下的是hadoop-1.0.3.tar.gz

3.解压到文件夹hadoop-1.0.3文件夹下,配置一下文档(这里我直接配的伪分布模式)。

3.1 hadoop-1.0.3/conf/hadoop-env.sh配置JAVA_HOME为jdk安装路径:export JAVA_HOME=/usr/java/jdk1.7.0_07

3.2 hadoop-1.0.3/conf/core-site.xml添加

<property>
    <name>fs.default.name</name>
    <value>hdfs://localhost:9000/</value>
</property>
3.3 hadoop-1.0.3/conf/mapred-site.xml添加

<property>
    <name>mapred.job.tracker</name>
    <value>localhost:9001</value>
</property>
3.3 hadoop-1.0.3/conf/hdfs-site.xml添加

<
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值