Cygwin上配置Hadoop的Java_home

最新推荐文章于 2023-07-19 13:47:26 发布
原创 最新推荐文章于 2023-07-19 13:47:26 发布 · 900 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文介绍如何在Cygwin环境下配置Hadoop的Java_home环境变量。主要步骤包括修改hadoop-env.sh文件中的JAVA_HOME路径，并确保路径符合Unix格式。此外，还需要使用dos2unix工具对配置文件进行格式转换。

在Cygwin上配置Hadoop的Java_home,首先到了${HADOOP_HOME}的conf目录下，修改hadoop-env.sh文件。主要分为如下几步：
1. 找到JAVA_HOME,修改JAVA_HOME的路径指向你本机安装的Jdk路径。注意，这里的路径不能以window的路径出现，应该用unix的形式出现，例如c:\Program Files\Java\jdk1.6.0，应该写成/cygdrive/c/ProgramFiles/Java/jdk1.6.0.而且，还有一点要注意的是，如果路径有空格，如Program Files间的空格，则应该将路径用双引号括起("/cygdrive/c/Program Files/Java/jdk1.6.0")。
2. 修改完hadoop-env.sh文件后，如果马上启动Hadoop，仍会报错，出现“/bin/java:No such file or directoryva/jdk1.6.0_10 ”的错误。经过上网查证，发现是dos环境与Unix的字符编码的问题，可以用dos2unix来实现 DOS <=> UNIX text file 转换。所以切换到conf目录下，对hadoop-env.sh进行Unix文本转化：dos2unix hadoop-env.sh.如此就可以正常启动Hadoop了！

centOS安装Hadoop时环境变量JAVA_HOME配置
ZhifanSk的博客
04-09 1532
Hadoop安装单节点的官方文档戳这里????Hadoop: Setting up a Single Node Cluster. 但是环境变量JAVA_HOME的配置是依据具体情况的，而这点在官方文档中没有明确的叙述。 通常情况下JAVA_PATH应该被设置为/usr/lib/jvm中的jdk，可以通过ls /usr/lib/jvm命令查看 明确需要指向的jdk的文件名，JAVA_HOME应该被设置为/...
$HADOOP_HOME/bin/hadoop脚本文件分析
行云流水的博客
08-11 7425
#!/usr/bin/env bash # Licensed to the Apache Software Foundation (ASF) under one or more # contributor license agreements. See the NOTICE file distributed with # this work for additional information
Cygwin下Hadoop的安装与配置详解
neu_swc的专栏
07-05 227
Hadoop 支持 Linux 及 Windows 操作系统, 但其官方网站声明 Hadoop 的分布式操作在 Windows 上未做严格测试，建议只把 Windows 作为 Hadoop 的开发平台。在 Windows 环境上的安装步骤如下( Linux 平台类似，且更简单一些): 一、安装Cygwin 下载Cygwin，运行step.exe，选择从网络安装，选择安装路径和临时下载文件的存放...
JAVA_HOME环境配置
fack
12-23 4517
java环境变量配置 windows xp下配置JDK环境变量：       1.安装JDK，安装过程中可以自定义安装目录等信息，例如我们选择安装目录为D:\java\jdk1.5.0_08；   　 2.安装完成后，右击“我的电脑”，点击“属性”；         3.选择“高级”选项卡，点击“环境变量”；         4.在“系统变量”中，设置3项属性，JAVA_HOME,
hadoop java配置环境变量_hadoop配置环境变量
weixin_36249804的博客
02-26 1655
hadoop安装包解压tar -xvf hadoop-2.7.7.tar.gz解压成功ll查看文件配置环境变量1.vi /home/wj/hadoop-2.7.7/etc/hadoop/hadoop-env.sh修改export JAVA_HOME={$JAVA_HOME}为 exportJAVA_HOME=/usr/java/jdk1.8.0_162/2.vi yarn-env.sh找到#...
配置java和hadoop环境变量
jiangguodong0215的专栏
01-10 710
vi /etc/profile 末尾添加： #set Java Environment export JAVA_HOME=/usr/java/jdk1.8.0_20 export CLASSPATH=.:$CLASSPATH:$JAVA_HOME/lib export PATH=.:$PATH:$JAVA_HOME/bin:$PATH #set hadoop path export HADOO
cygwin中安装hadoop+eclipse编译源码并调试
04-13
安装完Hadoop源码后，我们需要配置环境变量，包括JAVA_HOME和HADOOP_HOME，指向Java SDK和Hadoop安装目录。在Cygwin的.bashrc文件中添加相应的路径，并使用`source ~/.bashrc`使更改生效。 接下来是编译Hadoop源码...
Cygwin环境下配置Hadoop详细教程
在Hadoop环境配置中，Cygwin扮演着至关重要的角色，因为它提供了一个在Windows上运行类Unix命令行环境的平台。以下是对配置过程的详细解释： 1. **Cygwin的安装**： - 首先，从官方站点`http://www.cygwin.com/`...
Windows下Cygwin环境下Hadoop的Unix模拟安装与配置教程
本文主要介绍了如何在Windows环境下利用Cygwin...总结，本文主要指导用户如何在Windows平台通过Cygwin模拟Unix环境，配置必要的软件（JDK和Hadoop），以及解决SSH的相关问题，以便在Windows上搭建并运行Hadoop环境。
$HADOOP_HOME/bin/hadoop version 错误: 找不到或无法加载主类 org.apache.hadoop.util.VersionInfo
最新发布
09-28
同样，需要在 `$HADOOP_HOME/etc/hadoop/hadoop-env.sh` 文件中确保 `JAVA_HOME` 配置正确： ```bash # 设置 JAVA_HOME export JAVA_HOME=/path/to/your/java ``` ### 5. 检查操作系统兼容性 某些情况下，操作系统...
Hadoop安装与配置完整版
04-17
在Linux之中最为重要的用户就是root，而且为了简化权限的问题，将直接使用root用户操作，但是默认情况下Ubuntu是隐藏了root用户的。在最早的时候设置的用户为wangke，密码为123。这个时候如果要使用一些跟超级管理员配置的话，就需要加入“sudo”的配置。
关于Java中的classpath,path,java_home的设置
jessieca的专栏
09-26 1213
1,在“用户变量”中，设置3项属性，JAVA_HOME，PATH，CLASSPATH（大小写无所谓），若已存在则点击“编辑”，不存在则点击“新建”；2,JAVA_HOME设为JDK的安装路径（如C：/Program Files/Java/jdk1.5.0_11），此路径下包括lib，bin，jre等文件夹（此变量最好设置，因为以后运行tomcat，eclipse等都需要依靠此变量）；Pat
关于 hadoop 的安装和配置 java的本地安装和配置
qq_37344885的博客
10-28 1980
  本文介绍在无外网络的Ubuntu的下的的Hadoop的配置与安装 一，JAVA的本地安装和配置 1，解压JDK 将你下载的JDK放置在你指定目录下，使用tar命令进行解压 sudo tar -zxvf jdk-8u181-linux-x64.gz 解压后使用LS命令你会发现一个JDK文件夹我这里是jdk1.8.0_181  为了避免之后配置java的JDK环境变量时需要输入过长...
cygwin 安装hadoop java_home变量引起的问题
yangsen251024的专栏
05-21 4787
bin/hadoop: line 258: \cygdrive\c\Program: command not found bin/hadoop: line 289: \cygdrive\c\Program Files\Java\jdk1.7.0_07/ bin/java: No such file or directorybin/hadoop: line 289: exec: \cygdriv
Hadoop配置之中JAVA_HOME设置问题
热门推荐
Tang
05-05 2万+
初次配置Hadoop，
Hadoop的简单配置以及与Eclipse的整合
放飞我心
02-28 2406
Hadoop的简单配置以及与Eclipse的整合 Posted on December 25, 2011 by huangchao 1.Hadoop的简介 wikipedia:hadoop 2.安装与配置 我用的操作系统为Ubuntu 11.10 安装Hadoop: 下载地址 需要注意的是，目前各个版本的信息如下 0.20.X – legacy stable vers
WINDOWS 配置HADOOP遇到的几个问题
06-09 1692
具体配置的方法网上很多，不写了。实际操作中遇到了几个问题，虽然不大但遇到可能会卡得难受。 1. CreateSymbolicLink error (1314): A required privilege is not held by the client. Windows 的执行权限问题，望这方面找就对了。 网上找到的具体解决办法： 1.open Local Group Pol
云计算与大数据第15章 分布式大数据处理平台Hadoop习题带答案
m0_63394128的博客
08-29 4232
Step1：将用户手机号、上行流量、下行流量、总流量封装到一个自定义的bean中，由于这个bean需要在Hadoop中进行传输，我们还需要让bean实现hadoop中的序列化接口。我们需要从数据中统计出每个用户的所有请求的使用的总流量，即统计用户所有请求的上行流量（索引为8）、下行流量（索引为9）之和。1、根据用户手机上网的行为记录，基于 MapReduce编程模型设计程序统计不同手机号的用户使用的总流量。A．不是开源的 B．面向列的 C．分布式的 D．NoSQL数据库。.
hadoop分布式系统复习题 选择题
学习日常分享
07-19 7513
D 、 HDFS 有高容错性的特点，并且设计用来部署在低廉的（low- cost ）硬件上。C 、 HDFS 为海量的数据提供了存储，而 MapReduce 为海量的数据提供了计算。C 、每个文件的 Block 大小和复制（ Replication ）因子都是可配置的。D 、响应客户端的所有读写数据请求，为客户端的存储和读取数据提供支撑。B 、除了最后一个 Block ，所有的Block都是同样的大小。A 、 HDFS 既适合超大数据集存储．也适合小数据集的存储。...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值