最近往hive进数的时候遇见这个问题:
Original Exception : org.apache.hive.service.cli.HiveSQLException: java.io.IOException: org.apache.parquet.io.ParquetDecodingException: Can not read value at 0 in block -1 in file hdfs://mycluster/use
头疼了一段时间:
这个是hive的parquet文件转换时有问题
找了一下应该在spark中配置文件中增加下面的参数:
spark.sql.parquet.writeLegacyFormat=true
重新启动下就好了。
1483

被折叠的 条评论
为什么被折叠?



