Hive加载数据时遇到NULL数据错误的解决方法

最新推荐文章于 2024-02-29 15:08:04 发布

jiajiahebangbang

最新推荐文章于 2024-02-29 15:08:04 发布

阅读量4.5k

点赞数

分类专栏： HIVE

本文链接：https://blog.youkuaiyun.com/u014571011/article/details/51883217

版权

HIVE 专栏收录该内容

6 篇文章

订阅专栏

本文记录了一个关于使用特定格式创建表单并导入数据时遇到的问题。具体来说，在使用制表符作为字段分隔符进行数据导入的过程中，由于数据中多余的空格导致了数据格式错误，最终使得部分数据被标记为NULL。此经历强调了在进行数据导入前确保数据格式正确的重要性。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

仅是个人遇到的问题，以下是具体情境。
创建表单：

create table  if not exists user_info(
user_id int,
gender int,
birthdate string,
create_time string,
address string
) 
ROW FORMAT DELIMITED 
FIELDS TERMINATED BY '\t' 
stored as textfile;

导入的数据：
1 1 2016-07-01 2016-07-01 民生
2 2 2016-07-02 2016-07-02 银行隔壁
3 3 2016-07-03 2016-07-03 民生银行隔壁
4 1 2016-07-04 2016-07-04 民生隔壁
5 1 2016-07-05 2016-07-05 隔壁

标记了以’\t’作为分隔符，最终导入出现NULL，很简单的操作，最后发现是导入数据中多出了空格导致了多导入数据。所以血泪教训导入数据时要确保格式正确。