临地的博客

再次吐槽，spark的文档对初学者真的非常不友好。同时下面的错误大概率也是可以解决掉的。java.io.IOException: 远程主机强迫关闭了一个现有的连接问题描述在本地idea执行spark streaming相关代码时，setMaster为“local[2]”时，我是可以正常执行的，但是当我在 StandAlone 模式下启动本地集群的 setMaster 时，就会出现这个错误。然后我分别根据不同的搜索结果，设置jars等，甚至看到官网关于此问题的两个issueht

Master为“local[2]”时，这是正常的。但是当我在 StandAlone 模式下启动本地集群的 setMaster 时，出现错误： lost an executor 2 (already removed): Unable to create executor due to java.io.FileNotFoundException: java.io.FileNotFoundException: HADOOP_HOME and hadoop.home解决方法：下载并且设计HADOOP_H

1.表现与原因表现为将spark streaming提交到集群时（setMaster()），没有接受到任何数据，并打印Initial job has not accepted any resources; check your cluster UI to ensure that workers are registered and have sufficient resources原因为集群没有资源执行job，基本是因为只启动了msater，没有启动work2.解决方法启动work即