hadoop路径:
cd /usr/lib/JDK_2021/hadoop-3.1.2/
hadoop下载链接:
https://archive.apache.org/dist/hadoop/common/hadoop-3.1.2/hadoop-3.1.2.tar.gz
配置Windows的hadoop环境
存放路径 F:\hadoop_2021\Windows_Hadoop_API\hadoop-3.1.2
一、在win10系统的本地进行hadoop3.1.2环境配置:
1.下载hadoop-3.1.2.tar.gz,解压到你新建的文件夹里,里面包含了bin文件夹
2、
通过这个链接:https://gitee.com/fulsun/winutils-1?_from=gitee_search 下载文件,选择使用的是里面的hadoop-3.1.2文件夹,这个文件夹里面有个bin文件夹,
用他这个bin文件夹把hadoop-3.1.2.tar.gz中的bin文件夹替换
3、把bin文件夹中的hadoop.dll复制放到win10系统的C:\Windows\System32\ 目录下
4、配置hadoop环境变量HADOOP_HOME和PATH变量中分别加入
%HADOOP_HOME\bin和%HADOOP_HOME%\sbin
二、Maven3.8.1的配置:
1.Maven下载以及环境配置:
下载链接:
https://maven.apache.org/download.cgi
下载windows系统的apache-maven-3.8.1-bin.zip文件,下载以后解压,配置Maven环境变量Maven_HOME和Path设置
新增变量名:Maven_HOME
变量名:F:\JAVA_2021\apache-maven-3.8.1
以及Path新建:
%MAVEN_HOME%\bin
2.settings.xml文件配置
在路径F:\JAVA_2021\apache-maven-3.8.1\conf中,找到settings.xml文件,进行如下配置:
<?xml version="1.0" encoding="UTF-8"?>
<settings xmlns="http://maven.apache.org/SETTINGS/1.2.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.org/SETTINGS/1.2.0 http://maven.apache.org/xsd/settings-1.2.0.xsd">
<!--本地maven仓库地址-->
<localRepository>F:\JAVA_2021\Maven</localRepository>
<offline>ture</offline>
<pluginGroups></pluginGroups>
<proxies></proxies>
&nbs

本文详细介绍了如何在Windows环境下配置Hadoop 3.1.2,包括环境变量设置、Hadoop.dll的放置、Maven 3.8.1的下载与配置。接着讲解了在Intellij IDEA中创建Maven项目,并配置Maven的settings.xml文件,以及在项目中添加Hadoop相关依赖。最后,创建了log4j.properties文件用于日志记录,并指导了如何在项目中创建Java类。
最低0.47元/天 解锁文章
511

被折叠的 条评论
为什么被折叠?



