解决spark无法查看web页面状态

本文记录了Spark集群中master节点端口配置的问题解决过程。博主在配置spark-env.sh文件并尝试通过指定端口访问WebUI时遇到困难,最终通过查看日志文件发现实际使用的端口与配置不符,调整后成功访问。分享此经验,帮助遇到类似问题的开发者。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

参考网上教程配置spark-env.sh文件,端口设置为 SPARK_MASTER_PORT=7077

尝试用 http://IP地址:7077打开网址查看状态,发现并不可以打开(8080端口也一样)。

之后查看主机master的日志文件(/root/spark/logs/spark-root-org.apache.spark.deploy.master.Master-1-master.out

在这里插入图片描述

仔细查看日志发现,端口似乎发生了变动(在WARN中),具体为什么会这样,希望有大神指点【博主还是小白】。看最后一行MasterWebUI,发现这不是访问web页面的有关信息吗?很明显是需要你使用 http://IP地址:8081 来访问。

然后我使用8081端口,果然成功了!!!
在这里插入图片描述

发个贴作为学习记录,如有大神看到,希望帮我解读上述日志图片中的意思,因为我还不懂。
感激不尽!!!

感谢各位耐心阅读,一位希望成为有知识输出的,而不是乱搬粗造的底层程序猿
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值