Hadoop【问题记录 03】【ipc.Client: Retrying connect to server:xxx/:8032+InvalidResourceRequestException】解决

最新推荐文章于 2024-07-22 13:21:48 发布

@寻觅远方

最新推荐文章于 2024-07-22 13:21:48 发布

阅读量1.7k

点赞数 3

CC 4.0 BY-SA版权

分类专栏： .... ... .. . Hadoop 文章标签： hadoop 大数据

本文链接：https://blog.youkuaiyun.com/yuanzhengme/article/details/119733384

.... ... .. . Hadoop 专栏收录该内容

14 篇文章 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

本文记录了在使用Hadoop 3.1.3版本进行基准测试时遇到的两个问题：1) 'Retrying connect to server' 错误，原因是未启动YARN，启动YARN后问题解决；2) 'InvalidResourceRequestException'，原因是请求的资源小于0或超过最大分配，通过调整yarn-site.xml配置文件解决了问题。尽管还有未解决的问题，但不影响执行。

起因

我使用的是 hadoop-3.1.3 版本，在进行基准测试时，执行以下代码；

[root@tcloud mapreduce]# hadoop jar ./hadoop-mapreduce-client-jobclient-3.1.3-tests.jar \
 TestDFSIO \
 -write \
 -nrFiles 10 \
 -size 10kb \
 -resFile home/hadoop/tmp/TestDFSIO.log