Hadoop配置日志的聚集——jobhistory不显示任务问题

原创

已于 2024-03-06 16:56:38 修改 · 973 阅读

2 ·

CC 4.0 BY-SA版权

文章标签：

#hadoop #大数据 #分布式

于 2024-03-06 16:45:53 首次发布

问题：

一开始job history是正常的，配置了日志的聚集以后不管做什么任务都不显示任务，hdfs是正常运行，而且根据配置步骤都重启过了。

下面先po出日志聚集的操作步骤，再讲问题
1.配置yarn-site.xml

cd $HADOOP_HOME/etc/hadoop

vim yarn-site.xml

添加如下代码

<!-- 开启日志聚集功能 -->
<property>
    <name>yarn.log-aggregation-enable</name>
    <value>true</value>
</property>
<!-- 设置日志聚集服务器地址 -->
<property>  
    <name>yarn.log.server.url</name>  
    <value>http://hadoop102:19888/jobhistory/logs</value>
</property