hadoop2.8.2配置

最新推荐文章于 2022-08-16 15:07:22 发布

笑傲江湖小白

最新推荐文章于 2022-08-16 15:07:22 发布

阅读量274

点赞数

CC 4.0 BY-SA版权

分类专栏： hadoop 文章标签： hadoop

本文链接：https://blog.youkuaiyun.com/wangzy0327/article/details/78758742

hadoop 专栏收录该内容

6 篇文章

订阅专栏

本文档详细介绍了Hadoop2.8.2版本在单机模式下的安装配置步骤，包括核心配置文件core-site.xml、hdfs-site.xml、mapred-site.xml和yarn-site.xml的具体设置，以及启动脚本和服务的使用方法。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

路径:hadoop2.8.2/etc/hadoop下

core-site.xml

<configuration>
<property>
<name>hadoop.tmp.dir</name>
<value>/home/wzy/hadoop_tmp</value>
</property>
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>
</configuration>

hdfs-site.xml

<configuration>
<property>
<name>dfs.namenode.name.dir</name>
<value>/home/wzy/hadoop_name</value>
</property>
<property>
<name>dfs.datanode.data.dir</name>
<value>/home/wzy/hadoop_data</value>
</property>
</configuration>

mapred-site.xml

<configuration>
    <property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
    </property>
</configuration>

yarn-site.xml:

<configuration>
    <property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
    </property>
</configuration>

bin/hdfs namenode -format

sbin/start-dfs.sh

sbin/stop-dfs.sh

sbin/start-yarn.sh

sbin/stop-yarn.sh

另附ssh无密码配置

$ ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa
$ cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
$ chmod 0600 ~/.ssh/authorized_keys