insert 导入 hive和中文乱码问题导入CSV格式的数据到hive表格

最新推荐文章于 2023-06-20 17:55:27 发布

原创最新推荐文章于 2023-06-20 17:55:27 发布 · 1.1k 阅读

CC 4.0 BY-SA版权

文章标签：

本文介绍了解决Hive插入数据及导入CSV格式数据时出现的中文乱码问题。通过使用特定的INSERT语句和正确配置，可以确保中文字符正确显示。同时，详细步骤包括创建Hive表、上传CSV文件至HDFS以及查询数据。

一、insert 插入数据中文乱码
hive写入数据的方式有三种，最为熟知的insert ，但是在用insert 单句执行的时候，中文导入是会出现乱码的，我试了网上大家给出来的解决方法，好像都不行，最后终于找到了一个方法

insert overwrite table mergeflie select 1,decode(binary('维护'),'utf-8'),18;

用这个语句就可以解决insert插入数据中文乱码的问题
在这里插入图片描述
二、导入csv格式的数据到hive表格
但是，假如数据很多的时候，我们这样插入不太方便。可以把数据编辑成csv的格式，直接导入hive的表格中。
首先在hive里面创表

create table if not exists ods.mergeflie(
id string,
name string,
age int
)row format delimited fields terminated by ','
lines terminated by '\n';

然后把本地的csv文件上传到hdfs相对于hive表的文件夹下

hdfs dfs -put /export/datas/mergeflie.csv /user/hive/warehouse/ods.db/mergeflie/

/export/datas/ 这个路径是我Linux上放文件的路径，
/user/hive/warehouse/dldev.db/这个路径是hive中ods层在hdfs上存放表的路径
然后在hive的ods层查询这个表，就会有数据了