Hadoop三:hadoop运行错误3:yarn执行作业卡死

本文详细介绍了在部署Hadoop集群过程中遇到的常见错误及其解决方案,包括因主机名配置不当导致的UnknownHostException,以及系统时间不一致引起的授权过期问题。通过修改/etc/hosts文件和调整系统时间同步,确保集群稳定运行。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

部署步骤一致,每次错误不一样;

错误1:

 INFO org.apache.hadoop.yarn.server.resourcemanager.amlauncher.AMLauncher: Error launching appattempt_1541382172965_0001_000001. Got exception: java.net.UnknownHostException: Invalid host name: local host is: (unknown); destination host is: "node03":50682; java.net.UnknownHostException; For more details see: http://wiki.apache.org/hadoop/UnknownHost

修改/etc/hosts。/etc/sysconfig/network中主机名

错误2:

18/11/06 09:04:30 INFO mapreduce.Job: Task Id : attempt_1541465096076_0006_m_000000_1000, Status : FAILED
Container launch failed for container_1541465096076_0006_02_000002 : org.apache.hadoop.yarn.exceptions.YarnException: Unauthorized request to start container. 
This token is expired. current time is 1541476768229 found 1541466870379
Note: System times on machines may be out of sync. Check system time and time zones.
	at sun.reflect.NativeConstructorAccessorImpl.newInstance0(Native Method)
	at sun.reflect.NativeConstructorAccessorImpl.newInstance(NativeConstructorAccessorImpl.java:57)
	at sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:45)

集群系统时间不一致造成的。分别在集群每台机器上执行:

# cp /usr/share/zoneinfo/Asia/Shanghai /etc/localtime
# ntpdate s2c.time.edu.cn
再利用date查看时间是否成功。
注:执行 ntpdate s2c.time.edu.cn时可能会报错,错误为:
 6 Nov 12:21:24 ntpdate[6941]: the NTP socket is in use, exiting
关闭ntpd服务即可,命令为:service ntpd stop或/bin/systemctl status ntpd.service

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值