hive乱码问题完全解决方案

修改数据库编码集
SET GLOBAL character_set_client = utf8;
SET GLOBAL character_set_connection = utf8;
SET GLOBAL character_set_database = utf8;
SET GLOBAL character_set_results = utf8;
SET GLOBAL character_set_server = utf8;

show variables like ‘character_set%’;
show create database hive;

alter database hive character set latin1;

FLUSH PRIVILEGES;

修改元数据的编码
A:修改字段注释和表注解
alter table COLUMNS_V2 modify column COMMENT varchar(255) character set utf8;
alter table TABLE_PARAMS modify column PARAM_VALUE varchar(255) character set utf8;
B:修改分区字段注解
alter table PARTITION_PARAMS modify column PARAM_VALUE varchar(255) character set utf8;
alter table PARTITION_KEYS modify column PKEY_COMMENT varchar(255) character set utf8;
C:修改索引注解
alter table INDEX_PARAMS modify column PARAM_VALUE varchar(255) character set utf8;
#修改视图,支持视图中文
ALTER TABLE TBLS modify COLUMN VIEW_EXPANDED_TEXT mediumtext CHARACTER SET utf8;
ALTER TABLE TBLS modify COLUMN VIEW_ORIGINAL_TEXT mediumtext CHARACTER SET utf8;

show create table COLUMNS_V2;
show create table TABLE_PARAMS;
show create table PARTITION_PARAMS;
show create table PARTITION_KEYS;
show create table INDEX_PARAMS;

FLUSH PRIVILEGES;

在hive-site.xml里面的mysql jdbc配置中增加?createDatabaseIfNotExist=true&useUnicode=true&characterEncoding=UTF-8

javax.jdo.option.ConnectionURL
jdbc:mysql://re****ger001:3306/hive?createDatabaseIfNotExist=true&useUnicode=true&characterEncoding=UTF-8

重启hive

关于Hive中的乱码问题解决方案,可以参考以下步骤: 1. 首先,确认Hive使用的底层数据库是MySQL。因为Hive默认使用Derby作为元数据存储,而Derby不支持修改编码方式。 2. 接下来,需要修改MySQL的编码设置为UTF-8。可以通过以下步骤进行修改: a. 如果是离线安装的MySQL,可以通过修改my.cnf文件来设置编码。在my.cnf文件中,找到[mysqld]配置段,添加以下两行: character-set-server=utf8 collation-server=utf8_general_ci b. 如果是在线安装的MySQL,可以通过以下命令修改编码: ALTER DATABASE database_name CHARACTER SET utf8 COLLATE utf8_general_ci; ALTER TABLE table_name CONVERT TO CHARACTER SET utf8 COLLATE utf8_general_ci; 3. 确保Hive的配置中指定了正确的MySQL连接参数。在Hivehive-site.xml文件中,设置以下参数: hive.metastore.uris - 指定MySQL的连接地址 javax.jdo.option.ConnectionURL - 指定MySQL的连接URL javax.jdo.option.ConnectionUserName - 指定MySQL的用户名 javax.jdo.option.ConnectionPassword - 指定MySQL的密码 通过以上步骤,可以解决Hive中的乱码问题,并确保数据以UTF-8编码存储。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* *3* [hive中解决中文乱码](https://blog.youkuaiyun.com/zmzdmx/article/details/113778839)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 100%"] [ .reference_list ]
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值