本文记录了一次解决Spark端口占用问题的经历。通过检查默认端口7337是否被占用，查找YARN和Spark配置文件中相关端口设置，并通过列出所有端口进行逐一排查，最终采用重启的方法解决了问题。
提示端口被占用，但日志没找到具体端口，默认spark.shuffle.service.port是7337，日志有打印但发现未被占用
然后找了下yarn和spark配置文件相关的端口，还列出所有端口，一个个根据端口找到应用排查，折腾了半个多小时，最终还是采用重启大法搞定
扫一扫
评论
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
添加红包
