org/apache/hadoop/util/PlatformName 异常

最新推荐文章于 2023-07-10 08:22:06 发布
原创 最新推荐文章于 2023-07-10 08:22:06 发布 · 1.6k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#大数据 #java

本文介绍如何将hadoop-auth-xx.jar模块集成到Hadoop系统中，该模块对于实现特定的安全认证功能至关重要。

[轉]http://www.blogjava.net/snoics/archive/2010/10/10/333408.html

 

加上hadoop-auth-xx.jar

Flume数据采集至HDFS的排雷日记
wsjslient的博客
03-11 892
文章目录写在前面一、pandas是什么？ 写在前面        本篇文章对于想了解Flume采集数据至HDFS的过程中有哪些需要注意的小伙伴有一定的帮助，这里为了模拟真实环境，临时搭建一台虚拟机，将数据存入TOMCAT中后，我们将数据从当前虚拟机传输至另外一台虚拟机的HDFS上。 环境所涉及版本： apache-tomcat-8.5.63 flume-ng-1.6.0-cdh5.14.2 hadoop-2.6.0-cdh5.14.2
$HADOOP_HOME/bin/hadoop脚本文件分析
行云流水的博客
08-11 7417
#!/usr/bin/env bash # Licensed to the Apache Software Foundation (ASF) under one or more # contributor license agreements. See the NOTICE file distributed with # this work for additional information
解决Window环境下启动Hadoop时出现的 java.lang.NoClassDefFoundError: org/apache/hadoop/util/P...
fishyych
04-12 1699
在Window下启动Hadoop-0.21.0版本时，会出现下面这样的错误提示：  1  java.lang.NoClassDefFoundError: org / apache / hadoop / util / PlatformName  2  Caused by: java.lang.ClassNotFoundException: org.apache.hadoop...
org.apache.hadoop.util.PlatformName
鱿鱼的博客
08-26 3338
启动jstorm时出现org.apache.hadoop.util.PlatformName， 缺少hadoop-auth-2.2.0.jar这个包造成 copy至jstorm的lib目录下即可
java.lang.ClassNotFoundException: org.apache.hadoop.util.PlatformName
Xgx120413的专栏
07-12 9802
windows下eclipse 配置Hadoop环境所需jar包
hadoop -java.lang.ClassNotFoundException: org.apache.hadoop.util.PlatformName(转)
hehaibo
08-23 480
[code="java"] 在Window下启动Hadoop-0.21.0版本时，会出现下面这样的错误提示： java.lang.NoClassDefFoundError: org / apache / hadoop / util / PlatformName Caused by: java.lang.ClassNotFoundException: org.apache.hadoop.u...
hadoop 启动java.lang.ClassNotFoundException:org.apache.hadoop.util.PlatformName
令狐二中
01-19 2623
hadoop 启动java.lang.ClassNotFoundException:org.apache.hadoop.util.PlatformName org.apache.hadoop.util.PlatformName属于hadoop auth包里面的一个类。 默认引入hadoop client的时候不会带入hadoop auth这个包。 引入hadoop client的时候需要带入hadoop auth包。 还有一种情况是引入的低版本的hadoop auth包。 改为引用相同包即可。 <de
hdfs distcp 报错java.lang.NoSuchMethonError:org.apache.hadoop.fs.Path.getParent(i) lorg/apache/hadoop/fs/Path
最新发布
10-24
hadoop org.apache.hadoop.util.PlatformName | grep Path # 期望输出 jar:file:/opt/hadoop-3.3.4/share/hadoop/common/hadoop-common-3.3.4.jar!/org/apache/hadoop/fs/Path.class ``` #### ⚠️ 关键注意事项 1...
hadoop@hth-virtual-machine:/usr/local$ hbase version 错误: 找不到或无法加载主类 org.apache.hadoop.hbase.util.GetJavaProperty 错误: 找不到或无法加载主类 org.apache.hadoop.hbase.util.VersionInfo
10-22
我们正在解决在Hadoop环境下执行`hbase version`命令时出现"找不到或无法加载主类org.apache.hadoop.hbase.util.GetJavaProperty"和"org.apache.hadoop.hbase.util.VersionInfo"的问题。根据提供的引用信息，我们...
hadoop2.7.6相关依赖包缺失
尘雨::执着VC
07-10 924
在Hadoop相关开发中，因很多时候大数据集群的版本比较低，例如CDH6.3.1所集成的是hadoop2.7.6版本，所以需要客户端开发时，也要做版本适配，需引入hadoop-common-2.7.6.jar，hadoop-hdfs.2.7.6.jar等jar包依赖。添加htrace-core-3.1.0-incubating.jar到项目中。添加commons-cli-1.5.jar到项目中。添加guava-30.1.1-jre.jar。添加guava-30.1.1-jre.jar。
ClassNotFoundException: org.apache.hadoop.util.PlatformName问题解决
BlackWing
11-25 1778
转载请标明出处：http://blackwing.iteye.com/blog/1980219 服务器上hbase用的是hadoop 2.2.0的hdfs，java程序访问hbase时报如下错误： [code="java"] java.lang.NoClassDefFoundError: org/apache/hadoop/util/PlatformName Caused by:...
org.apache.hadoop.util.PlatformName //cgywin下Hadoop-0.21.0 错误问题
风行天下
07-02 4171
windows 7 专业版 32位 cgywin下Hadoop-0.21.0 错误问题 格式化管理者，即namenode，创建HDFS 执行命令 $ bin/hadoop namenode -format $ bin/hadoop namenode -format cygwin warning: MS-DOS style path detected: C:\cygwin\hadoo
hbase无法启动Regionserver：ClassNotFoundException: org.apache.hadoop.util.PlatformName问题解决
热门推荐
Format的专栏
11-20 1万+
java.lang.RuntimeException: Failed construction of Regionserver: class org.apache.hadoop.hbase.regionserver.HRegionServer  at org.apache.hadoop.hbase.regionserver.HRegionServer.constructRegionServer(
zz:解决Window环境下启动Hadoop时出现 java.lang.NoClassDefFoundError: org/apache/hadoop/util
missian（高性能异步RPC框架）
12-11 527
原文链接：http://www.blogjava.net/snoics/archive/2010/10/10/333408.html 在Window下启动Hadoop-0.21.0版本时，会出现下面这样的错误提示： java.lang.NoClassDefFoundError: org/apache/hadoop/util/PlatformName Caused by: java.lang....
Could not find or load main class org.apache.hadoop.util.VersionInfo
sx5486510的专栏
09-19 1万+
搭建 hadoop，总是报Could not find or load main class org.apache.hadoop.util.VersionInfo错误，纠结好久，终于解决，但是不知道为什么 ，方法如下 you can also add the following to your ~/.bashrc export HADOOP_CLASSPATH=$(cygpa
hadoop 安装 Error: Could not find or load main class org.apache.hadoop.util.VersionInfo
weixin_49718263的博客
12-17 1321
前沿：根据林子雨老师的教程下载hadoop。 https://dblab.xmu.edu.cn/blog/7/ 但是输入hadoop version时，终端一直报错： 错误: 找不到或无法加载主类org.apache.hadoop.util.VersionInfo 找了很多教程，也更改了很多关于java_home路径配置的问题，但是仍然一直报错。 后来我发现，是我的hadoop版本下错了！！！！
执行Hadoop version时报错Error: Could not find or load main class org.apache.hadoop.util.VersionInfo
陈十一
01-06 1066
当查看Hadoop版本时报错： 可添加如下配置(vim~/.bashrc)： export HADOOP_CLASSPATH=$(cygpath -pw $(hadoop classpath)):$HADOOP_CLASSPATH
Hadoop学习（2）Eclipse配置Hadoop开发环境+HDFS Java API测试+Bug解决记录
小白的专栏
09-27 5404
目录 参考： 1. 添加插件 2. 在Windows上安装Hadoop2.9.1 （1）在本地安装Hadoop （2）配置Hadoop的环境变量 （3）修改hadoop-env.cmd文件中的JAVA_HOME （4）添加Windows支持文件（winutils.exe，hadoop.dll） （5）重启Eclipse（File-&gt;Restart） 3. Eclipse中的...
tar: hadoop-3.3.6: Cannot mkdir: Permission denied tar: hadoop-3.3.6/share/doc/hadoop/hadoop-mapreduce-client/hadoop-mapreduce-client-app/apidocs/org/apache/hadoop/mapreduce/jobhistory/class-use: Cannot mkdir: No such file or directory hadoop-3.3.6/share/doc/hadoop/hadoop-mapreduce-client/hadoop-mapreduce-client-app/apidocs/org/apache/hadoop/mapreduce/jobhistory/class-use/JobHistoryEventHandler.MetaInfo.html tar: hadoop-3.3.6: Cannot mkdir: Permission denied tar: hadoop-3.3.6/share/doc/hadoop/hadoop-mapreduce-client/hadoop-mapreduce-client-app/apidocs/org/apache/hadoop/mapreduce/jobhistory/class-use/JobHistoryEventHandler.MetaInfo.html: Cannot open: No such file or directory hadoop-3.3.6/share/doc/hadoop/hadoop-mapreduce-client/hadoop-mapreduce-client-app/apidocs/org/apache/hadoop/mapreduce/jobhistory/class-use/JobHistoryEventHandler.html tar: hadoop-3.3.6: Cannot mkdir: Permission denied tar: hadoop-3.3.6/share/doc/hadoop/hadoop-mapreduce-client/hadoop-mapreduce-client-app/apidocs/org/apache/hadoop/mapreduce/jobhistory/class-use/JobHistoryEventHandler.html: Cannot open: No such file or directory hadoop-3.3.6/share/doc/hadoop/hadoop-mapreduce-client/hadoop-mapreduce-client-app/apidocs/org/apache/hadoop/mapreduce/jobhistory/class-use/JobHistoryEvent.html tar: hadoop-3.3.6: Cannot mkdir: Permission denied tar: hadoop-3.3.6/share/doc/hadoop/hadoop-mapreduce-client/hadoop-mapreduce-client-app/apidocs/org/apache/hadoop/mapreduce/jobhistory/class-use/JobHistoryEvent.html: Cannot open: No such file or directory
09-28
<think>嗯，用户遇到了在解压Hadoop时出现的权限和路径问题。让我仔细想想用户的需求场景——用户应该是在Linux环境下尝试安装Hadoop 3.3.6，但被系统权限和目录校验拦住了。从用户引用的材料来看，用户似乎有一定Linux基础但可能对权限管理不够熟悉。 注意到引用[1]明确提到了解压命令的参数，但没提权限问题；引用[2][3]都指向Windows下的权限错误，这和用户当前环境不符；而引用[4][5]展示了环境变量配置的重要性，这可能间接相关。用户真正需要的不是这些引用内容，而是针对tar命令的具体排错方案。 用户的核心痛点有两个：Permission denied和No such file or directory。前者需要权限提升或归属权调整，后者需要路径校验。考虑到用户正在操作/opt目录，这通常需要sudo权限。我想到四个关键解决层次： 首先要确认目标目录/opt/app是否存在——如果不存在自然要创建，且必须用sudo创建 其次检查当前用户是否有opt/app的写权限，可能需要用ls -ld查看 然后解压命令本身可能需要sudo前缀，特别是当用户不属于root组时 最后解压后的文件归属权问题，用chown解决 特别要注意-C参数后的路径必须绝对存在，这点在引用[1]的示例里体现为/opt/app目录。如果用户漏掉了这个目录创建步骤，就会触发第二个错误。另外，用户引用的[4]提到环境变量，虽然不直接相关，但提示我后续需要提醒用户配置HADOOP_HOME。 用户的操作环境很可能不是root账户而是普通用户，所以sudo会成为关键。在回复时需要强调危险操作前的备份提醒，比如建议先备份安装包。考虑到Hadoop安装的连续性，还应该补充环境变量配置的建议，这样用户完成解压后就能顺利进入下一步配置。 对了，用户引用的错误案例里有Windows路径的斜杠问题，虽然当前是Linux环境，但还是要提醒用户注意tar命令里路径分隔符必须用正斜杠。最后用分层步骤+代码块呈现解决方案最清晰，每个步骤配简要说明，比如创建目录时解释-p参数防父目录缺失的功能。 </think>针对使用 `tar` 解压 Hadoop-3.3.6 时出现的 **Permission denied** 和 **No such file or directory** 问题，以下是系统性的解决方案： --- ### **问题原因与解决方法** #### 1. **No such file or directory（目录不存在）** - **原因**：`-C` 参数指定的目标目录（如 `/opt/app`）未创建。 - **解决**： ```bash # 创建目标目录（需sudo权限） sudo mkdir -p /opt/app # 验证目录是否存在 ls -ld /opt/app ``` > **说明**： > `-p` 参数确保自动创建父目录[^1]。 #### 2. **Permission denied（权限不足）** - **原因**：当前用户对 `/opt/app` 或压缩文件无操作权限。 - **解决**： ```bash # 方案1：使用sudo执行解压（推荐） sudo tar -zxvf /opt/soft/hadoop-3.3.6.tar.gz -C /opt/app # 方案2：更改目标目录所有者 sudo chown -R $USER:$USER /opt/app # 将目录归属当前用户 tar -zxvf /opt/soft/hadoop-3.3.6.tar.gz -C /opt/app # 方案3：赋予用户写权限 sudo chmod -R u+w /opt/app # 给当前用户添加写权限 ``` #### 3. **文件路径错误** - **验证压缩包路径是否正确**： ```bash ls -l /opt/soft/hadoop-3.3.6.tar.gz # 检查文件是否存在 ``` > 若路径错误，修正为实际路径（如 `/home/user/downloads/...`）。 --- ### **完整操作流程** ```bash # 1. 创建目标目录（需sudo） sudo mkdir -p /opt/app # 2. 赋予当前用户操作权限 sudo chown -R $USER:$USER /opt/app # 3. 解压文件（权限足够时可省略sudo） tar -zxvf /opt/soft/hadoop-3.3.6.tar.gz -C /opt/app # 4. 验证解压结果 ls /opt/app/hadoop-3.3.6 ``` --- ### **关键注意事项** 1. **权限层级**： - `/opt` 属系统目录，默认需 root 权限操作。 - 若需避免频繁用 `sudo`，可将目录所有权移交普通用户： ```bash sudo chown -R $USER:$USER /opt/app ``` 2. **路径规范**： - 使用绝对路径（如 `/opt/app`），避免相对路径歧义。 3. **后续配置**： - 解压后需设置环境变量（引用[4]）： ```bash export HADOOP_HOME=/opt/app/hadoop-3.3.6 export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin ``` --- **
评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值