Hive注释乱码问题

本文介绍了解决Hive中文注释乱码的方法,包括调整MySQL字符集、修改元数据表字段编码等步骤,确保Hive能正确处理UTF-8格式的中文注释。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

在HIVE中建表的时候,有时候难免要表中文注释,然而如果不经过配置,会导致desc某个表名的时候,直接以?的方式返回。
因此也来解决一下HIVE中文注释乱码的问题。由于HIVE的元数据是存在于MYSQL上的,因此需要在MYSQL上进行元数据的候。

当hive使用mysql作为元数据库的时候mysql的字符集要设置成latin1 default。
alter database hive character set latin1;
为了保存那些utf8的中文,要将mysql中存储注释的那几个字段的字符集单独修改为utf8。
1.修改字段注释字符集

修改mysql-hive数据库当中的COLUMNS_V2表
alter table COLUMNS_V2 modify column COMMENT varchar(256) character set utf8;

2.修改表注释字符集

修改mysql-hive数据库当中的TABLE_PARAMS表
alter table TABLE_PARAMS modify column PARAM_VALUE varchar(4000) character set utf8;

3.修改分区表参数,以支持分区键能够用中文表示

修改mysql-hive数据库当中的PARTITION_PARAMS与PARTITION_KEYS表
alter table PARTITION_PARAMS modify column PARAM_VALUE varchar(4000) character set utf8;
alter table PARTITION_KEYS modify column PKEY_COMMENT varchar(4000) character set utf8;

如果以上修改还不成功,需要在hive-site.xml修改mysql对于hive的编码为utf8

4.修改相关表相关字段编码

alter table INDEX_PARAMS modify column PARAM_VALUE varchar(4000) character set utf8;

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值