WIN10配置Hadoop+IDEA+Maven开发环境

最新推荐文章于 2024-03-15 20:54:29 发布
原创 最新推荐文章于 2024-03-15 20:54:29 发布 · 839 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

这篇博客介绍了如何在Windows上使用IDEA和Maven搭建Hadoop 3.1.3的本地开发环境。首先，配置IDEA和Maven，然后设置HADOOP_HOME环境变量，并将Hadoop安装目录添加到Path中。接着，下载并解压Hadoop至指定路径。最后，在项目的pom.xml文件中添加Hadoop客户端的依赖项，以便于开发和运行Hadoop相关程序。

Hadoop版本：3.1.3

Windows下使用IDEA+Maven搭建本地Hadoop开发环境

0、安装和配置IDEA+Maven

https://yellow520.blog.youkuaiyun.com/article/details/115352475

1、Hadoop环境变量

  1. 控制面板\系统和安全\系统->高级系统设置->环境变量->系统变量
  2. HADOOP_HOME设置值D:\coding\hadoop
  3. Path加入%HADOOP_HOME%\bin

2、下载并解压Hadoop

下载压缩包，然后解压
https://download.youkuaiyun.com/download/Yellow_python/16672738

解压到上述和环境变量一样的路径D:\coding\hadoop

3、pom.xml 加入 Hadoop依赖

最低0.47元/天 解锁文章
WIN10配置Spark+IDEA+Maven开发环境
ArYe
04-29 700
发出火花的目录1、配置IDEA+Maven+Scala开发环境2、配置WIN10上Hadoop开发环境3、pom.xml 添加 Spark4、关联Spark源码5、日志等级修改6、试运行7、打包+提交到集群 1、配置IDEA+Maven+Scala开发环境 2、配置WIN10上Hadoop开发环境 log4j-core
win10+jdk1.8+IntelliJ IDEA+maven搭建java开发环境
guoxinbuct的专栏
10-10 635
一、下载软件 jkd1.8下载地址： Java Archive Downloads - Java SE 8 IntelliJ IDEA下载地址：https://download.jetbrains.com/idea/ideaIC-2021.2.2.exe?_ga=2.223366299.1221095049.1633513390-895722379.1633513390&_gl=1*csxfyi*_ga*ODk1NzIyMzc5LjE2MzM1MTMzOTA.*_ga_V0XZL7QHEB*M
maven开发环境搭建
10-13
maven安装、配置，以及在eclipse下搭建开发环境，建立javaweb项目，并运行
【MAVEN】 Maven开发环境搭建
Awsmsniper的博客
07-11 931
1、准备 1.1 下载maven安装包 maven的官方下载地址是http://maven.apache.org/download.cgi 根据自己的操作系统选择相应的版本 1.2 jdk环境变量 因为maven依赖Java环境运行，所以在使用maven之前需要配置Java环境变量，Linux下的Java环境变量的方法可参考我之前的帖子基于CentOS7开发之路 --- 第二章
Maven开发环境搭建
weixin_52629592的博客
08-11 775
在进行Maven开发环境搭建之前我们必须要有两个前提1.我们的电脑已经安装并配置了jdk;2.因为Maven工作时经常需要通过网络下载各种所需文件,因此我们需要保证网络的通常.
Maven 开发环境配置
moonspiritacm
09-22 164
目录1. 安装部署1.1 Windows 平台1.1.1 设置环境变量1.1.2 修改本地仓库路径1.1.3 配置国内镜像 1. 安装部署 1.1 Windows 平台 1.1.1 设置环境变量 set M2_HOME=C:\Softwares\Maven set MAVEN_HOME=C:\Softwares\Maven set Path=%Path%;%M2_HOME%\bin 1.1.2 修改本地仓库路径 Maven 本地仓库默认位于 ${user.home}/.m2/repository 目录下，
Maven--搭建开发环境（一）
袁伏彪 —— 共享，共赢
02-28 7064
Maven下载        Apache Maven项目的web站点：http://maven.apache.org/        Maven可以运行在JDK1.4以上版本。  解压安装包       例如：Maven的安装目录D:\apache-maven-3.0.4   安装包说明        bin/目录包含了运行Maven的mvn脚本 boot/目录包含了
Hadoop——使用idea+maven开发Hadoop项目入门
Stay Hungry Stay Foolish
02-26 4030
我们这里使用windows系统作为开发系统 首先保证已在Linux中正确开启Hadoop集群，然后要在windows的环境变量里新加一个变量HADOOP_USER_NAME，值为集群里开启Hadoop服务的账户，笔者在服务器中用root用户使用的start-dfs.sh，所以这里的值为root。 然后我们将Hadoop的两个配置文件core-site.xml和hdfs-site.xml传输到win...
win+idea连接Hadoop（非maven）（包含mapreduce）
BangLiSang的博客
10-21 366
整理一下以前的思路，自用 将Hadoop包解压到本地硬盘中 添加环境变量HADOOP_HOME 追加path变量 Windows下缺少winutils.exe和hadoop.dll文件前往GitHub下载对应Hadoop版本的文件 将下载的所有的文件放到HADOOP_HOME/bin下即可 在idea创建普通Java项目 导入\hadoop\share\hadoop文件夹下的jar包（主要为每个子文件夹中以及所有lib文件夹中） 至此可以连接Hadoop下面是配置mapre
windows配置maven环境变量
qq_41791492的博客
03-13 1309
11.修改配置中的远程仓库为国内的，因为默认为远程仓库在国外，工作中需要通过maven下载依赖时，为了提高访问效率通常会使用国内的阿里云远程仓库，也是在settings.xml 文件，找到mirrors标签，复制下面的代码，保存。13.修改配置中的远程仓库为国内的，因为默认为远程仓库在国外，工作中需要通过maven下载依赖时，为了提高访问效率通常会使用国内的阿里云远程仓库，也是在settings.xml 文件，找到mirrors标签，复制下面的代码，保存。3.按照如图所示打开环境变量。
windows maven 环境变量配置
小爬虫
12-12 251
maven 免安装包下载：http://maven.apache.org/download.cgi windows 下选择 windows 选择环境变量 设置环境变量 ： path 变量设置
32-maven（开发环境，转载）
weixin_42688085的博客
02-11 380
1、Maven概述 1.1 Maven简介 Maven翻译为“专家”，“内行”。Maven是Apache下的一个纯java开发的开源项目。 Maven 是一个项目管理工具，可以对 Java 项目进行构建、依赖管理。 Maven 也可被用于构建和管理各种项目，例如 C#，Ruby，Scala 和其他语言编写的项目。 Maven创始者希望能够更多的让Java开发人员的日常工作更加容易，帮助理解任何基于Java项目。 1.2 Maven的两大功能 项目构建和依赖管理。 1.2.1项目构建 项目构建是一个项目从：源
Maven——win10配置maven环境变量
二郎神的博客
01-08 926
Maven包地址:maven地址 点击下载，将下载好的压缩包解压到任意目录下 开始配置 右键我的电脑→属性→高级系统设置→环境变量 在系统变量（S）下单击“新建”按钮，弹出新建系统变量对话框，分别填写变量名：M2_HOME和变量值：解压maven的目录，可通“浏览目录”按钮选中，单击“确定”按钮。 在系统变量（S）下找到变量名为：path，双击path，弹出编辑环境...
Maven--多环境开发配置与应用
PeterLee3333的博客
06-02 231
使用多环境mvn 指令 -P 环境定义id方法一 （弊端：调过了所有测试）方法二 mvn 指令-D skipTests
win10下配置maven环境变量
热门推荐
Jesiah的博客
10-24 5万+
第一步：请到官网下载安装包http://maven.apache.org/download.cgi Binary tar.gz archive apache-maven-3.3.9-bin.tar.gz apache-maven-3.3.9-bin.tar.gz.md5 apache-maven-3.3.9-bin.tar.gz.asc
maven介绍及环境环境搭建
qq_43220836的博客
06-15 368
maven介绍及环境环境搭建 一、Maven 简介 ​ 是 Apache 下的一个纯 Java 开发的开源项目。基于项目对象模型（缩写：POM）概念，Maven利用一个中央信息片断能管理一个项目的构建、报告和文档等步骤。 Maven 是一个项目管理工具，可以对 Java 项目进行构建、依赖管理。 二、Maven 功能 Maven 能够帮助开发者完成以下工作： · 构建 · 文档生成 · 报告 · 依赖 · SCMs ·
Maven简介及环境搭建和基本使用（Java开发中的实用工具）
2301_77523019的博客
01-04 2822
介绍了Maven的环境搭建和基本操作
配置MAVEN环境
最新发布
2302_77971734的博客
03-15 9043
配置Maven环境先来介绍一下mavenMaven 是一个流行的构建工具和依赖管理工具，用于管理 Java 项目的构建、发布和依赖。它提供了一个标准化的项目结构、构建生命周期和插件体系，使开发人员能够更轻松地构建和管理复杂的 Java 项目。下面是 Maven 的一些关键概念：项目对象模型（Project Object Model，POM）：Maven 项目的核心是一个名为 POM 的 XML 文件。POM 文件描述了项目的元数据、依赖关系、构建配置和插件等信息。
Maven安装和开发环境配置
GPFXTX的博客
09-16 694
安装maven之前请先确保已经安装配置过JAVA环境,，可以去https://blog.csdn.net/GPF19950411/article/details/79428997 浏览 软件准备和安装： 请到http://maven.apache.org/download.cgi 下载最新版本的maven，或者去https://download.csdn.net/download/g...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

小基基o_O

您的鼓励是我创作的巨大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值