报错：Codec [xxx] is not available. Available codecs are brotli,uncompressed,lz4,gzip,lzo,snappy,none

最新推荐文章于 2022-12-30 12:05:52 发布

原创最新推荐文章于 2022-12-30 12:05:52 发布 · 733 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#hive #大数据 #hadoop

改BUG 专栏收录该内容

5 篇文章

订阅专栏

在尝试将数据写入Hive表时遇到了编码器不可用的问题，错误提示表明可能在建表语句中配置的Parquet压缩编码不正确。常见的Parquet压缩选项包括snappy、gzip和uncompressed。错误信息显示可用的codec有brotli、uncompressed、lz4、gzip、lzo、snappy和none。解决此问题需要检查建表语句，确保'PARQUET.compression'参数设置为系统支持的压缩编码。

写入到hive中报错，编码器不可用。
可能是建表语句中TBLPROPERTIES (‘PARQUET.compression’=‘xxx’)
xxx填错了。建议填snappy gzip uncompressed

EROR [Driver]  User class threw exception: java.lang.IllegalArgumentException:
 Codec [xxx] is not available. Available codecs are brotli,uncompressed,lz4,gzip,lzo,snappy,none