Ubuntu下Hadoop伪分布式配置(Pseudo-Distributed Mode)

本文详细介绍如何在Ubuntu 12.04上部署Hadoop 1.1.2的伪分布式环境,包括配置文件详解及启动过程。适用于初学者实践Hadoop集群的基本操作。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

背景:

ubuntu-12.04
JDK 1.7
Hadoop 1.1.2

步骤:

1.解压

 把Hadoop的tar包拷贝到指定目录,使用tar -zxvf hadoop-version.tar.gz命令解压。

2.测试单点(本步骤可省略)

进入hadoop目录:
cd hadoop-1.1.2/
cp conf/*.xml input  
bin/hadoop jar hadoop-examples-1.1.2.jar grep input output 'dfs[a-z.]+'
cat output/*

3.伪分布式的配置

3.1在hadoop的conf/hadoop-env.sh中配置JAVA_HOME

3.2配置基本信息:

conf/core-site.xml:

<configuration>
     <property>
         <name>fs.default.name</name>
         <value>hdfs://localhost:9000</value>
     </property>
</configuration>


conf/hdfs-site.xml:

<configuration>
     <property>
         <name>dfs.replication</name>
         <value>1</value>
     </property>
</configuration>


conf/mapred-site.xml:

<configuration>
     <property>
         <name>mapred.job.tracker</name>
         <value>localhost:9001</value>
     </property>
</configuration>
3.3启动:

bin/hadoop namenode -format

bin/start-all.sh

4. Browse the web interface for the NameNode and the JobTracker; by default they are available at:



评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值