pycharm版本23.2
Python 3.8.12
PySpark 版本 3.1.2
hive 版本 3.1
源代码是
from pyspark.sql import SparkSession
if __name__ == '__main__':
spark = SparkSession.builder.master("local[2]").appName("").config("spark.sql.warehouse.dir", 'hdfs://bigdata01:9820/user/hive/warehouse') \
.config('hive.metastore.uris', 'thrift://bigdata01:9083') \
.config(
"spark.sql.shuffle.partitions", 2).enableHiveSupport().getOrCreate()
spark.sql("""
select * from mydb03.par3
""").show()
spark.sql("""show databases""").show()
df=spark.read.table("mydb03.par3")
df.createOrReplaceTempView("abc")
spark.sql("""
select * from abc
""").show()
spark.stop()
遇到这个问题,
![]()
接着在D盘中创建tmp文件夹随

随后遇到这个问题,但我在HDFS上修改权限之后依旧报错。

1260

被折叠的 条评论
为什么被折叠?



