hadoop单机版安装

最新推荐文章于 2025-08-11 13:56:33 发布

转载最新推荐文章于 2025-08-11 13:56:33 发布 · 96 阅读

0 ·

CC 4.0 BY-SA版权

原文链接：https://segmentfault.com/a/1190000004165877

文章标签：

#大数据

本文详细介绍了Hadoop单机版的安装与配置过程，包括下载、关键配置文件（如hadoop-env.sh、core-site.xml等）的设置，以及权限调整等内容。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

刚刚安装好了hadoop的单机版，这里记录一下

其实hadoop是免安装的，直接下载包就可以使用

关键是单机版的配置

hadoop下载地址：http://hadoop.apache.org/releases.html
注意不要把源码下载下来，要下载binary包

下载好之后主要配置一下几个地方：

hadoop-env.sh：主要配置JAVA_HOME

core-site.xml：

<configuration>
    <property>
        <name>hadoop.tmp.dir</name>
        <value>/datapool/fengkai/hadoop/tmp</value>
        <description>A base for other temporary directories.</description>
    </property>
    <property>
        <name>fs.default.name</name>
        <value>hdfs://localhost:9000</value>
    </property>
</configuration>

hdfs-site.xml:

<configuration>
    <property>
        <name>dfs.replication</name>
        <value>1</value>
        (备注：replication 是数据副本数量，默认为3，salve少于3台就会报错)
    </property>
</configuration>

mapred-site.xml:

<configuration>
<property>
    <name>mapred.job.tracker</name>
    <value>localhost:9001</value>
</property>
</configuration>

这样的配置是单机版的配置，如果是分布式的话还压迫配置slaves和masters，不过单机版就不用了
最后还要注意hadoop的存放目录要改成hadoop:hadoop的权限，之后就差不多了
首先：
hadoop namenode -format
start-all.sh
直接运行一下jps；

    jar
    NameNode
    DataNode
    SecondaryNameNode
    Jps