Windows 下配置hadoop

最新推荐文章于 2024-11-30 18:29:09 发布
原创 最新推荐文章于 2024-11-30 18:29:09 发布 · 502 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#hdfs

本文详细介绍了在Windows上配置Hadoop的步骤，包括下载JDK和Hadoop二进制文件，设置环境变量，修改配置文件如core-site.xml、hdfs-site.xml等，解决路径空格问题，格式化HDFS，启动和检查Hadoop集群状态。

 0.自己编译安装步骤在这里，有英文版本链接：《英文传送门》。

自己编译尝试后不成功，换为下面使用别人编译好的版本的方法。参考博客：《初学hadoop,windows下安装》 

 

1.下载JDK，并设置JAVA_HOME。(使用不带空格的路径，比如Program Files，将在后面的配置中报错！)

假设JAVA_HOME路径为C:\Java\jdk1.8.0_73

 

2.下载hadoop。下载地址：http://hadoop.apache.org/releases.html

如果在当前页中没找到2.8.3版本，可以到所有版本的下载列表中去找：https://archive.apache.org/dist/hadoop/common/

这里下载使用的是2.8.3的二进制版本文件,解压到d:/hadoop-2.8.3

 

3.下载winutils。这个是别人编译好的hadoop的windows版本二进制文件，不需要我们自己进行编译。下载下来然后将hadoop-2.8.3进行！覆盖！即可。

下载地址：

最低0.47元/天 解锁文章
windows下Hadoop配置
09-24
windows下Hadoop配置的详细过程
精选资源
windows下配置hadoop
01-07
3.配置HADOOP_HOME （地址最好不要有空格，如果有的话，下面有解决办法） path添加%HADOOP_HOME%\bin（win10不用分号或者如下编辑界面不用分号，其余加上 ；） 4.配置hadoop-env.cmd PS: 此处的路径C:\Program ...
Windows下配置Hadoop环境（全过程）
热门推荐
qq_35535690的博客
08-23 9万+
首先到官方下载官网的hadoop2.7.7,链接如下 https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/ 找网盘的hadooponwindows-master.zip 链接如下 https://pan.baidu.com/s/1VdG6PBnYKM91ia0hlhIeHg 把hadoop-2.7.7.tar.gz解压后...
windows配置hadoop（详细）
xuan314708889的博客
07-25 1万+
一、环境 windows7 64位 hadoop2.7 二、安装java1.8，并配置环境变量 下载地址： http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html 下载对应的jdk 配置环境变量： 电脑---属性---高级电脑设置---环境变量 系统变量那里，点击新...
windows环境下安装配置hadoop
celosvwz的博客
09-15 4472
windows环境下安装配置hadoop
大数据之——Window电脑本地配置hadoop系统（100%包避坑！！方便日常测试，不用再去虚拟机那么麻烦）
m0_73991249的博客
11-03 5768
之前我们的hadoop不管是伪分布式还是分布式，都是配置在虚拟机上，我们有的时候想要运行一些mapreduce、hdfs的操作，又要把文件移到虚拟机，又要上传hdfs，麻烦得要死，那么有的时候我们写的一些java、python的hadoop代码，我们只想在本地运行一下看看有没有问题、会是一个什么结果怎么办？；那就需要在window配置hadoop系统环境，然后以后只需要在本地写代码运行就行了。
windows下配置hadoop3.1.4环境
最新发布
2401_86523075的博客
11-30 1928
winutils 是 Hadoop 在 Windows 操作系统上运行时所需的一个工具集。它主要用于提供一些 Unix/Linux 系统上默认存在的功能和命令的替代实现，因为 Hadoop 大部分是在这些系统上开发和运行的。[在这里插入图片描述](https://i-blog.csdnimg.cn/direct/4e40fda9f66942dbb2f624a1f5828ff8.png。
Windows下配置Hadoop环境
weixin_43915303的博客
06-30 1316
1、首先到官方下载官网的hadoop2.7.7,链接如下 https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/ 2、下载对应版本都是hadooponwindows-master.zip 下载网址：https://github.com/4ttty/winutils 或者找网盘的hadooponwindows-master.zip 链接如下：https://pan.baidu.com/s/1vxtBxJyu7HNmOhsdjLZkYw 提取码：y9
Windows10配置Hadoop
PhotoerZJX的博客
12-02 3014
极简又详细的7个Step帮你完成Windows10的Hadoop配置。
hadoop安装与配置详细教程【Windows下】（亲测有效）
此人很懒
01-13 1万+
，点击下一步。3.弹出状态进度界面如下，稍等片刻，等待跳出Java安装界面如下（注意与前面的jdk不同这里是安装Java），点击更改安装目录选择安装到D:\LeStoreDownload\
Windows下hadoop环境搭建之NameNode启动报错
北桥苏的博客
02-16 6728
前言： 因为平时工作和日常接触到的大都是的中型项目，所以少有个性化推荐等涉及大数据的功能。但是后期应该也会在自己项目中添加信息推荐模块，所以就开始关注spark，hadoop，Thrift等工具，以下就以hadoop先开始，包括环境搭建和配置过程中踩坑过程。 关于hadoop的环境搭建，网上也有各种各样的教程。拿来直接按着他们的方法来，前期当前问题不大，但是呢，可能在安装过程中由于每个工具的版本不一致。又或者配置中文件路径不一样等等都很可能导致踩坑无数。不管是开发调测bu...
Windows环境下安装Hadoop全过程（一条龙服务）
weixin_41612207的博客
10-31 4735
配置完成后，打开终端cmd，进入到进入到hadoop的安装目录：D:\apps\hadoop\hadoop-3.4.1\bin>，输入hadoop version，如果显示Hadoop的版本号，就表示安装成功了。（3）在“系统变量”区域找到名为“Path”的变量，选择它然后点击“编辑”（或鼠标双击它），在“编辑环境变量”窗口中，点击“新建”，然后添加 %JAVA_HOME%\bin。配置完成后，按照本文前面的第1条，“查看是否安装好了Java运行环境(JRE)和java开发工具包（JDK）”，进行验证。
【Hadoop】Windows下安装Hadoop（手把手包成功安装）
tttzzzqqq2018的博客
07-26 5万+
【实操】Windows下安装Hadoop（手把手包成功安装）
windows下配置hadoop开发环境
GPF的博客
04-16 484
Windows下搭建Hadoop本地模式运行环境参考：http://wiki.apache.org/hadoop/Hadoop2OnWindows 下面配置windows环境： 2.1、Java JDK ：我采用的是1.8的，配置JAVA_HOME，如果默认安装，会安装在C:\Program Files\Java\jdk1.8.0_51。此目录存在空格，启动hadoop时将报错，JAVA_HOM
windows下安装配置hadoop
lpxuan151009的专栏
07-11 6864
windows下安装配置hadoop
Hadoop在Windows下的安装配置
走在前往架构师的路上
11-12 2767
因为本人最近最近一段时间 都在学习Hadoop，接触了比较多的理论，但是想要深入的去学习Hadoop整个平台，那就必须实战的训练，首先第一步，当然是先搭建好一个Hadoop平台为先。但是比较坑爹的是，Hadoop是要求安装在Linux环境下的，在Windows下是不能直接运行的。所以只能在Windows下搞个Cygwin，然后把Hadoop安装包往里面扔了。我对Cygwin的印象一直不是很好，以前
Windows安装Hadoop
Vulpes corsac
12-06 1918
1.安装JDK 安装jdk配置环境https://blog.youkuaiyun.com/qq_36535820/article/details/102831841https://blog.youkuaiyun.com/qq_36535820/article/details/102831841 2.安装Hadoop 2.1下载Hadoop 下载Hadoophttps://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/https://mirrors.tuna.tsingh
windows下配置hadoop环境
03-16
在Windows下配置Hadoop环境需要以下步骤： 1. 下载Hadoop安装包并解压缩到本地目录。 2. 配置Java环境变量，确保Java已经正确安装并配置好JAVA_HOME环境变量。 3. 配置Hadoop环境变量，将Hadoop的bin目录添加到PATH环境变量中。 4. 配置Hadoop的core-site.xml、hdfs-site.xml、mapred-site.xml和yarn-site.xml等配置文件，确保Hadoop能够正确启动。 5. 启动Hadoop集群，可以使用start-all.sh或start-dfs.sh和start-yarn.sh等命令启动Hadoop。 6. 验证Hadoop是否正常工作，可以使用hadoop fs -ls /命令查看Hadoop文件系统中的文件列表。 以上就是在Windows下配置Hadoop环境的基本步骤，需要注意的是，Hadoop在Windows下的性能可能不如在Linux下，因此建议在Linux环境下使用Hadoop。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值