Hive Partition 操作

最新推荐文章于 2024-05-08 00:15:00 发布

weixin_30764883

最新推荐文章于 2024-05-08 00:15:00 发布

阅读量68

点赞数

CC 4.0 BY-SA版权

文章标签：大数据

原文链接：http://www.cnblogs.com/TendToBigData/p/10501270.html

本文介绍如何使用Hive创建Parquet格式的外部表，包括表结构定义、数据存储格式及分区操作等内容。此外还介绍了如何加载数据到指定分区。

create external table demo (userid int ,name string ,address string)
comment 'demo'
partitioned by (txdate string ,txhour string)
row format delimited fields terminated by '\t'
lines terminated by '\n' stored as parquet    //parquet 是采用列式存储的 sorted as textfile

如果创建的table 是 parquet 模式 那么 loclation 的 数据也需要时parquet 的 否则 就又问题了

增加partition 
alter table table_name add partition (name 1 = 1 ,name 2 = 3 ) location '///' 在已经存在的table 增加分区，跟db2 一样 事先增加分区
此处的location 不是必须的 ，但是想创建分区的时候 同时导入数据这么加上location 是没有问题的 

load data local inpath '' into  table table_name partition()

转载于:https://www.cnblogs.com/TendToBigData/p/10501270.html