当遇到Spark无法找到Hadoop的问题时，解决方案是将hive-site.xml、core-site.xml和hdfs-site.xml文件的内容复制到项目resource目录下，并创建同名文件。确保本地路径前缀正确，否则Spark会尝试从配置文件中查找。这一方法有助于确保Spark正确连接到Hive和Hadoop。
是spark找不到hadoop导致的
hive-site.xml、core-site.xml、hdfs-site.xml这几个文件都应该把内容复制到项目的resource目录下建立同名文件。spark才能找到hive与hadoop。
此外，本地路径，最好加上文件系统的前缀，不然spark会去配置文件中去找路径。
扫一扫
评论
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
添加红包
