Hive comment中文乱码解决

已于 2024-02-20 22:53:24 修改
阅读量786 收藏 13
点赞数 7
分类专栏： bigdata 文章标签： hive hadoop 数据仓库
于 2024-02-20 22:51:53 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/llllalune/article/details/136200186
版权
本文介绍了Hive中由于底层MySQL编码限制导致中文注释乱码的问题，提供了解决方案，包括修改表的列和参数字符集，并指出对已有乱码表的操作可能无效，需先删除并重建表。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

文章目录

1 原因分析

由于hive底层的运行机制，即把元数据存储在MySQL中，但是MySQL的默认编码是支持Latin1的编码，不支持中文编码。

2 解决方案

首先就是进入MySQL

[hadoop@node1 ~]$ mysql -u root -p
Enter password: 
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 103
Server version: 5.7.44 MySQL Community Server (GPL)

Copyright (c) 2000, 2023, Oracle and/or its affiliates.

Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| hive               |
| mysql              |
| performance_schema |
| sys                |
+--------------------+
5 rows in
最低0.47元/天 解锁文章
hive comment注释乱码问题解决
爱米酱的博客
07-23 478
今天在给hive建表后发现建表时添加的注释都变成了乱码，其实这个问题是hive的元数据的问题我们只要到hive的元数据库也就是mysql执行以下语句即可 注意：执行完以下语句之后，之前建的表的注释依然乱码，只会对执行语句之后新建的表生效 1.解决表字段注释和表注释乱码 alter table COLUMNS_V2 modify column COMMENT varchar(256) character set utf8; alter table TABLE_PARAMS modify column P
Hive中文乱码解决方法
zhengzaifeidelushang的博客
08-13 6008
Hive中文乱码解决方法 一、错误原因： hive的元数据是由mysql管理的，mysql默认编码是latin1，中文存储进去容易乱码，所以最好把mysql的编码改成utf-8 二、解决方法 需要把相应注释的地方的字符集由 latin1 改成 utf-8，用到注释的就三个地方，表、分区、视图 修改表字段注解和表注解 alter table COLUMNS_V2 modify column COMMENT varchar(256) character set utf8; alter table TAB
0004-Hive表字段Comment中文乱码
weixin_34411563的博客
11-15 751
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 1.问题描述 默认Hive中创建有中文注释的表时，无论是在Hive CLI还是Hue中该注释显示都会是乱码。如使用以下建表语句： create external table test_table ( s1 string comment 'abc', s2 string comment '你好啊' ) row for...
hive 的注释(comment) 中文乱码的解决方法(亲测有效)
热门推荐
JasonLee实时计算
06-01 1万+
最近群里有人问我hive中文显示乱码的问题, 下面就来说一下,怎么设置. 创建表的时候，comment说明字段包含中文，表成功创建成功之后，desc的时候中文说明显示乱码.如下图所示: 我们知道hive的元数据是有mysql管理的,所以这是mysql的元数据的问题.下面我们就修改一下字符编码 （1）修改表字段注解和表注解 alter table COLUMNS_V2 modify co...
解决hive表中comment中文乱码问题
weixin_40167653的博客
06-03 2205
解决hive表中comment中文乱码问题。
Hive表comment中文乱码???
DraGon_HooRay的博客
09-21 656
hive注释中文乱码问题： 针对元数据库metastore中的表，分区，视图的编码设置。 1、进入数据库metastore中修改mysql编码设置。 2、修改metastore的连接URL。 1、修改表字段注解和表注解 进入mysql 选择hive库执行： alter table COLUMNS_V2 modify column COMMENT varchar(256) character set utf8 ; alter table TABLE_PARAMS modify column PARAM_VAL
解决hive中comment中文乱码的问题
weixin_33750452的博客
04-02 311
默认情况下我们需要将数据库的编码设置为lanin1.alter database hive character set latin1;但为了以下是为了支持hive建表时插入中文注释 需要在mysql中做如下设置：//修改字段注释字符集alter table COLUMNS_V2 modify column COMMENT varchar(256) character set ...
Hive中文注释乱码解决方案
jessicaiu的博客
10-16 3558
本文来自网易云社区作者：王潘安快速解决方法目前的hive客户端在执行desc tablexxx和show create table xxx命令的时候，字段的中文注释会出现乱码情况，如(????)。在使用　ROW FORMAT SERDE 'org.openx.data.jsonserde.JsonSerDe'　建表的时候，注释则会出现from deserializer。以下几个步骤可以帮你快速解决...
解决hive中文注释乱码
yzzwyzr9的博客
03-21 181
解决hive中文注释乱码。
hive comment中文乱码
最新发布
03-29
好的，我现在要解决Hive中注释显示中文乱码的问题。用户提到在show create table时中文注释显示乱码，这可能和元数据存储的编码有关。根据提供的引用，Hive的元数据存储在MySQL中，而MySQL默认的编码可能是latin1，...
Hive学习之路 （八）Hive中文乱码
weixin_33796205的博客
04-07 161
Hive注释中文乱码 创建表的时候，comment说明字段包含中文，表成功创建成功之后，中文说明显示乱码 create external table movie( userID int comment '用户ID', movieID int comment '电影ID', rating int comment '电影评分', timestamped bigint comment '...
hive comment 中文乱码
qq_34897849的博客
10-22 325
hive注释中文乱码 use hive; alter table COLUMNS_V2 modify column COMMENT varchar(256) character set utf8; alter table TABLE_PARAMS modify column PARAM_VALUE varchar(4000) character set utf8; alter table P...
Hive表comment中文乱码解决方案
weixin_39916734的博客
09-20 1842
hive注释中文乱码问题： 针对元数据库metastore中的表，分区，视图的编码设置。 1、进入数据库metastore中修改mysql编码设置。 2、修改metastore的连接URL。 1、修改表字段注解和表注解 进入mysql 选择hive库执行： alter table COLUMNS_V2 modify column COMMENT varchar(256) character...
Hive 解决 comment 中文乱码
afunyusong的专栏
12-18 2253
当hive使用mysql作为元数据库的时候mysql的字符集要设置成latin1 default。alter database hive character set latin1;为了保存那些utf8的中文，要将mysql中存储注释的那几个字段的字符集单独修改为utf8。 修改字段注释字符集alter table COLUMNS_V2 modify column COMMENT varchar(2
hive中COMMENT乱码
weixin_37796929的博客
05-12 634
1.问题描述 默认Hive中创建有中文注释的表时，无论是在Hive CLI还是Hue中该注释显示都会是乱码 mysql> show databases; +--------------------+ | Database | +--------------------+ | information_schema | | amon | | cm ...
关于hive的COMMENT 中文乱码问题
qq_40808283的博客
11-11 374
#关于hive的COMMENT 中文乱码问题 你好！ 这是你第一次第一次写blog不足之处请多多谅解 hive> create external table ods_payment_info( > `id` bigint COMMENT '编号', > `out_trade_no` string COMMENT '对外业务编号', > `order_id` string COMMENT '订单编号', &
解决hive建表中文乱码问题
ZhShH0413的博客
05-30 5914
当hive建表字段注释中出现中文乱码时，可能是因为字符集编码不匹配所导致的。我们可以在建表语句中指定字符集编码来解决这个问题。参数，来指定字符集编码为 UTF-8。参数，来指定字符集编码为 UTF-8。这个参数可用于指定各种 CLI 输出数据的字符集编码，例如控制台输出、日志和报告等。需要注意的是，在进行配置时，建议采用统一的字符集编码，以确保所有代码能够正常工作。（3）判断hive的所依赖的mysql元数据库的编码格式是否是UTF-8。来指定使用 UTF-8 字符集编码。在这个示例中，我们通过设置。
修改 Hive 元数据库默认字符集，解决乱码问题
想练武，就得下功夫
03-16 5566
修改 Hive 元数据库默认字符集
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值