ERROR: Cannot find configuration directory "/xxxx/xxxx/xxxxx/hadoop-x.x.x/conf"

最新推荐文章于 2024-09-12 09:52:52 发布
最新推荐文章于 2024-09-12 09:52:52 发布
阅读量5.7k 收藏 1
点赞数
CC 4.0 BY-SA版权
分类专栏： hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/sx5486510/article/details/39552205

新检出的hadoop，

yarn version:

Hadoop 3.0.0-SNAPSHOT
Subversion git://git.apache.org/hadoop-common.git -r 42a61a4fbc88303913c4681f0d40ffcc737e70b5
Compiled by shen on 2014-09-25T01:32Z
Compiled with protoc 2.5.0
From source with checksum df70c29255f93f685db734fead08e8b
This command was run using /home/shen/Downloads/hadoop-2.5.0/share/hadoop/common/hadoop-common-3.0.0-SNAPSHOT.jar

输入start-yarn.sh，显示说ERROR: Cannot find configuration directory "/xxxx/xxxx/xxxxx/hadoop-x.x.x/conf"，发现需要修改/etc/hadoop中的yarn-evn.sh文件，将

export YARN_CONF_DIR="${YARN_CONF_DIR:-$HADOOP_YARN_HOME/conf}"
修改成
export YARN_CONF_DIR="${YARN_CONF_DIR:-$HADOOP_YARN_HOME/etc/hadoop}"

注：需要将此配置同步到所有的节点上

flume报错：java.lang.NoClassDefFoundError: org/apache/hadoop/conf/Configuration
zhengzaifeidelushang的博客
08-03 2534
flume报错：java.lang.NoClassDefFoundError: org/apache/hadoop/conf/Configuration Failed to start agent because dependencies were not found in classpath. Error follows. java.lang.NoClassDefFoundError:org/apache/hadoop/conf/Configuration at org.apache.flume.sin
Caused by: org.xml.sax.SAXParseException; systemId: file:/home/hadoop/hive-0.12.0/conf/hive-site.xml...
HiterCoder
12-12 4008
Caused by: org.xml.sax.SAXParseException; systemId: file:/home/hadoop/hive-0.12.0/conf/hive-site.xml; lineNumber: 5; columnNumber: 2; The markup in the document following the root element mus...
[异常笔记]启动DFS报错：Cannot find configuration directory: /etc/hadoop
weixin_34392906的博客
04-11 951
[hadoop@master ~]$ start-dfs.sh Incorrect configuration: namenode address dfs.namenode.servicerpc-address or dfs.namenode.rpc-address is not configured. Starting namenodes on [] Error: Cannot fin...
Error: Cannot find configuration directory: /etc/hadoop
weixin_43214096的博客
12-12 716
解决方法： 在hadoop-env.sh 配置一条hadoop配置文件所在目录 export HADOOP_CONF_DIR=/usr/hadoop-2.6.1/etc/hadoop/ 执行命令 source hadoop-env.sh
【启动Hadoop】 Error: Cannot find configuration directory: /etc/hadoop
无敌摸鱼高手的博客
09-12 574
【代码】【启动Hadoop】 Error: Cannot find configuration directory: /etc/hadoop。
Hbase 出现：/usr/local/hadoop/bin/../libexec/hadoop-functions.sh: line 2395: HADOOP_ORG.APACHE.HADOOP.H
weixin_45702261的博客
10-02 5288
项目场景： - 操作系统：Ubuntu 18 - Hadoop版本：Hadoop 3.1.3 - HBase版本：2.2.2 - JDK版本：1.8 - Java IDE：eclipse 问题描述： 进入shell界面时蹦出好多信息： 提示：/usr/local/hadoop/bin/…/libexec/hadoop-functions.sh: line 2395: HADOOP_ORG.APACHE.HADOOP.HBASE.UTIL.GETJAVAPROPERTY_USER: bad substit
hadoop3.2启动报错：hadoop/libexec/hadoop-functions.sh: line 398: syntax error near unexpected t
W
02-24 3892
1. Hadoop3.2.0启动报错 [ec2-user@master ~]$ sh $HADOOP_HOME/sbin/start-all.sh /usr/local/src/hadoop/libexec/hadoop-functions.sh: line 398: syntax error near unexpected token `<' /usr/local/src/hadoop/libexec/hadoop-functions.sh: line 398: ` done < <(
解决安全模式”mkdir: Cannot create directory /hadoop001/test. Name node is in safe mode.“Bug
weixin_45666566的博客
12-11 7188
刚刚在hadoop想创建一个目录的时候，发现报错了 具体信息如下： 问题： \quad \quad从错误信息可以看到hadoop当前的Name node是处于安全模式。 问题原因 \quad \quadhdfs在启动开始时会进入安全模式，这时文件系统中的内容不允许修改也不允许删除，直到安全模式结束。安全模式主要是为了系统启动的时候检查各个DataNode上数据块的有效性，同时根据策略必要的复制或者删除部分数据块。运行期通过命令也可以进入安全模式。在实践过程中，系统启动的时候去修改和删除文件也会有安全模式不
hadoop-2.7.１：Error: Cannot find configuration directory: /etc/hadoop
果果糖的博客
11-08 1847
安装hadoop参考：http://blog.csdn.net/hitwengqi/article/details/8008203 由于配置是Hadoop-2.7.１所以后来在启动过程会发现 终端执行 ./start-yarn.sh starting yarn daemons Error: Cannot find configuration directory: /etc/hado
hadoop2.7.7报错Error: Cannot find configuration directory: /etc/hadoop
柒柒柒柒
11-21 2880
配置好hadoop-2.7.7后，执行启动 ./start-all.sh，报错： Incorrect configuration: namenode address dfs.namenode.servicerpc -address or dfs.namenode.rpc-address is not configured. [root@master hadoop]#Incorrect configuration: namenode address dfs.namenode.servicerpc -addre
SVN Working copying 'xxxxx/xxxx/xxxx' locked
duoduo_333的专栏
06-05 2270
使用SVN想更新上传时提示Working copying 'xxxx/xxxx/xxx' locked 解决方法: 选中你的项目,上面工具栏一行找到  Action → Cleanup all  Working Copy Locks
将日期格式格式化为XXXX/XX/XX
weixin_42505611的博客
05-11 1836
function dateFormat(date){ var cardValday = ""; date = date.replace(/-/g,'').replace(/\//g,''); if(date == '长期'){ cardValday = "9999/12/31"; }else if(date != ''){ var arr = date.split(""); arr.splice(4, 0, "/"); arr.splice(7, 0, "/"); cardVa.
xxxxxxxxxxxxxxxxxxxxxxxxxxxx
热门推荐
weixin_34273481的博客
04-05 71万+
Get Authorization code:Request: https://accounts.google.com/o/oauth2/v2/auth?redirect_uri=https%3A%2F%2Fdevelopers.google.com%2Foauthplayground&prompt=consent&response_type=code&client_id=...
HDU1501（dfs）
Mad_boys的博客
07-29 3400
#include #include #include #define maxn 205 using namespace std; int len1,len2,len3; int vis[maxn][maxn]; char str1[maxn],str2[maxn],str3[maxn*2]; bool dfs(int cur1, int cur2, int cur3) { if(cur
django Invalid HTTP_HOST header: 'x.x.x.x:xxxx'. You may need to add u'x.x.x.x' to ALLOWE
keeper的博客
01-25 1750
刚搭了一个环境开始学习django，遇到 Invalid HTTP_HOST header: '10.255.64.81:50205'. You may need to add u'10.255.64.81' to ALLOWED_HOSTS. 在本地是正常的，提示很明确，让我们添加准许的hosts，找了一下，在settings.py中有这样一行。 ALLOWED_HOSTS = []
车机软件测试ADB&Shell命令集合
weixin_38003033的博客
04-02 7266
## ########车机软件测试ADB&Shell命令集合######## ## @author:tao.yu update:2021/4/2 tips ：查找本文档中内容时，查找模式最好选择“正则表达式” 否则中文关键字不好查询到##### ########ADB命令######## 获取root权限 adb root 示例： C:\Users\taoyu>adb root 获取remount权限 adb remount 示例： C:\Users\taoyu>adb remoun
[root@hadoop02 hadoop-2.7.2]# sbin/start-yarn.sh starting yarn daemons Error: Cannot find configuration directory: /etc/hadoop Error: Cannot find configuration directory: /etc/hadoop
最新发布
03-12
### 解决 Hadoop 启动时找不到配置目录的问题 当遇到 `./start-yarn.sh` 报错提示无法找到 `/etc/hadoop` 配置目录的情况，这通常是因为环境变量未正确设置或者路径不匹配所引起的。 #### 设置正确的配置文件路径 为了使Hadoop能够识别到配置文件的位置，需确保在 `hadoop-env.sh` 文件中指定了正确的配置文件夹位置： ```bash export HADOOP_CONF_DIR=/opt/hadoop-2.7.1/etc/hadoop/ ``` 此操作可以使得所有依赖于该配置的组件都能访问到必要的XML配置文件[^2]。 对于YARN而言，在 `yarn-env.sh` 中也需要做相应的设定来指向配置文件所在的目录: ```bash export YARN_CONF_DIR="${YARN_CONF_DIR:-$HADOOP_YARN_HOME/etc/hadoop}" ``` 这样做的目的是让YARN知道去哪里寻找它的特定配置项[^4]。 #### 修改默认查找路径 如果希望改变整个集群范围内Hadoop及其子项目（如MapReduce, YARN）默认使用的配置文件夹，则可以在全局范围内的shell profile里添加上述两个导出命令。例如编辑 `.bashrc`, `.zshrc` 或者其他登录Shell初始化脚本，并重新加载这些更改以生效。 另外需要注意的是，默认情况下很多安装指南建议创建符号链接至实际存放配置的地方以便简化管理；但如果直接修改了 `$HADOOP_HOME/etc/hadoop` 的目标地址而忘记更新相关环境变量的话也会引发此类错误。 #### 检查并验证配置 完成以上调整之后，可以通过运行以下命令测试是否已经成功解决了问题： ```bash echo $HADOOP_CONF_DIR echo $YARN_CONF_DIR ``` 这两个命令应该返回之前指定的确切路径而不是空值或默认值 (`/etc/hadoop`) 。接着尝试再次启动YARN服务看看报错是否消失。 #### 关联的服务启动流程解析 在整个Hadoop生态系统中，各个守护进程之间的启动顺序和服务间的关系非常重要。比如通过 `start-all.sh` 脚本会依次调用 `start-dfs.sh` 和 `start-yarn.sh` 来分别启动分布式文件系统(DFS)以及资源调度器(YARN)[^5]。因此除了关注单个服务外还需要考虑整体架构的影响因素。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值