Hadoop安装配置
关注
分享
扫一扫
经常在安装配置hadoop时有一些报错，这里收入了一些我的总结
徐亦宸
每个人的一生都会遇到很多边界，有些边界可以突破，有些则不能。那些无法突破的边界就是你的极限，而划分边界的标准就是“阈值”。每次突破阈值之后，人生轨迹就会发生剧烈变化，其间需要你做出很多思考和判断，直到最后找到自己的极限。
展开
-
解决Hadoop中多次格式化导致DataNode无法启动的问题
一般由于多次格式化NameNode导致。在配置文件中保存的是第一次格式化时保存的NameNode的ID，因此就会造成NataNode与NameNode之间的id不一致1.首先进入 hadoop 目录下的logs文件夹查看日志cat hadoop/logs/hadoop-root-datanode-hadoop02.log (要根据你们的安装路径来)出现以下报错信息，可以明显看到 namenode 和 datanode 的clusterID不一致2.这时要记录下 namenode的 cluste原创 2020-09-12 09:10:47 · 1227 阅读 · 1 评论 -
启动start-yarn.sh报错ERROR: Attempting to operate on yarn resourcemanager as root ERROR: but there is no
出现以上报错信息需要到 sbin 目录下 更改 start-yarn.sh 和 stop-yarn.sh 信息，在两个配置文件的第一行添加：YARN_RESOURCEMANAGER_USER=rootHADOOP_SECURE_DN_USER=yarnYARN_NODEMANAGER_USER=root最后再 输入命令 /sbin/start-yarn.sh 启动 yarn...原创 2020-09-12 11:48:02 · 15340 阅读 · 5 评论 -
使用scp时报错ssh: Could not resolve hostname hadoop03: Name or service not known lost con
Error：ssh: Could not resolve hostname hadoop03: Name or service not known lost con…将服务器hostname与对应的IP地址加到文件名/etc/hosts中。如：127.0.0.1 localhost192.168.80.101 hadoop101例如我的：192.168.1.101 hadoop01192.168.1.102 hadoop02192.168.1.103 hadoop03192.168.1.1原创 2020-09-19 09:02:53 · 7013 阅读 · 12 评论