在进行 PySpark 开发的时候出现了一个小小的异常,鉴于网络内容较为繁杂,作为解决后的内容记录一下。
因为修正完毕,没有进行完整错误展示,仅展示部分错误内容:
The root scratch dir: /tmp/hive on HDFS should be writable.
解决方案:
进入到 /tmp 目录下,使用
chmod -R 777 /tmp/hive
重新执行程序后问题解决。
本文介绍了一种常见的PySpark开发过程中遇到的HDFS权限问题,即/tmp/hive目录不可写导致的问题。通过调整目录权限为777解决了这一问题。
在进行 PySpark 开发的时候出现了一个小小的异常,鉴于网络内容较为繁杂,作为解决后的内容记录一下。
因为修正完毕,没有进行完整错误展示,仅展示部分错误内容:
The root scratch dir: /tmp/hive on HDFS should be writable.
解决方案:
进入到 /tmp 目录下,使用
chmod -R 777 /tmp/hive
重新执行程序后问题解决。
1133
1798
8185
4774

被折叠的 条评论
为什么被折叠?