hadoop开启历史服务器的过程

最新推荐文章于 2024-12-19 14:00:07 发布

原创最新推荐文章于 2024-12-19 14:00:07 发布 · 1.8k 阅读

8 ·

CC 4.0 BY-SA版权

文章标签：

#hadoop #大数据 #分布式 #数据库 #junit

java 专栏收录该内容

286 篇文章

订阅专栏

本文档指导如何确保Hadoop服务开启，并详细说明在mapred-site.xml中添加历史服务器配置的步骤，包括历史服务器的地址和Web端口设置。然后，通过执行mr-jobhistory-daemon.sh start historyserver命令启动历史服务器，并通过浏览器检查8088端口确认服务已成功启动。

部署运行你感兴趣的模型镜像

1.确保Hadoop服务开启，在打开mapred-site.xml添加如下配置，我的hadoop版本为2.7.1

<!-- 历史服务器端地址 -->
<property>
<name>mapreduce.jobhistory.address</name>
<value>hadoop105:10020</value>
</property>
<!-- 历史服务器web端地址 -->
<property>
    <name>mapreduce.jobhistory.webapp.address</name>
    <value>hadoop105:19888</value>
</property>

2.不用关闭Hadoop服务我们可以直接启动

mr-jobhistory-daemon.sh start historyserver

jps查看服务，发现启动了历史服务器

3.查看历史服务器是否开启，浏览器进入到8088端口，有些Hadoop版本不一样，详细的可以百度。点击右下角的history，有如下页面则开启成功

您可能感兴趣的与本文相关的镜像

Llama Factory

模型微调

LLama-Factory

LLaMA Factory 是一个简单易用且高效的大型语言模型（Large Language Model）训练与微调平台。通过 LLaMA Factory，可以在无需编写任何代码的前提下，在本地完成上百种预训练模型的微调