在启动Hadoop集群时遇到错误，包括mapreduce.shuffle初始化失败和DataNode的hostname问题。解决方案是修正`yarn.nodemanager.aux-services`配置为`mapreduce_shuffle`，并确保在`/etc/hosts`文件中正确设置主机名和IP对应关系。
在配置完成启动集群时，碰到一些错误。记录下来。
1：2018-05-16 07:37:19,231 FATAL org.apache.hadoop.yarn.server.nodemanager.containermanager.AuxServices: Failed to initialize mapreduce.shuffle
java.lang.IllegalArgumentException: The ServiceName: mapreduce.shuffle set in yarn.nodemanager.aux-services is invalid.The valid service name should only contain a-zA-Z0-9_ and can not start with numbers
根据网上的教程。是他写错了。
解决方法：修改yarn-site.xml中错误的写法：应该为下划线。不是点
<property>
<name>yarn.nodemanager.aux-services</name>
最低0.47元/天 解锁文章
扫一扫
1272
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
