在将CSV文件数据导入hive数据仓库时出现中文乱码问题,现将解决方案记录下
1, 先将CSV文件编码设置为UTF-8格式
2, 创建hive表
- 设置
'serialization.encoding'='GBK'
- 如果表已存在则执行
alter table TMP.SAMPLE_TABLE set SERDEPROPERTIES('serialization.encoding'='GBK')
CREATE TABLE IF NOT EXISTS TMP.SAMPLE_TABLE (
ID STRING,
NAME STRING
)
ROW FORMAT SERDE 'org.apache.hadoop.hive.serde2.OpenCSVSerde' WITH SERDEPROPERTIES (<