Hadoop 3.xx + Windows 搭建开发环境

xxr_yl

于 2022-08-15 15:55:36 发布

阅读量946

点赞数

分类专栏：大数据文章标签： hadoop windows hdfs

本文链接：https://blog.youkuaiyun.com/m0_57102326/article/details/126348048

版权

本文详细介绍了在Windows系统中如何搭建Hadoop 3.x开发环境，包括下载JDK和Hadoop，配置环境变量，处理winutils，配置Hadoop的Configuration文件，创建必要文件夹，以及启动和关闭Hadoop集群的步骤。完成这些步骤后，可以通过WebUI检查HDFS和YARN集群的状态。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

第一步

下载 JDK 1.8.0 ++ 配置JDK环境变量 JAVA_HOEM
下载 Hadoop ，推荐镜像下载HADOOP，配置 Hadoop环境变量 HADOOP_HOME HADOOP_USER_NAME
下载相近版本的 winutils

下载的winutils，将其bin目录下的所有文件复制到hadoop3.xx/bin下面，再将里面的hadoop.dll 拷贝一份放到windows/system32下面，然后重新启动计算机（或者重新启动IDE）

测试hadoop是否成功 cmd命令：

hadoop version

第二步

配置 hadoop 的Configuration 文件

./etc/hadoop/core-site.xml，粘贴到下方并保存此文件

<configuration>
   <property>
       <name>fs.defaultFS</name>
       <value>hdfs://localhost:9000</value>

最低0.47元/天解锁文章