20180604早课记录24-Hive

最新推荐文章于 2018-06-11 13:37:21 发布

转载最新推荐文章于 2018-06-11 13:37:21 发布 · 90 阅读

0 ·

CC 4.0 BY-SA版权

原文链接：http://blog.51cto.com/10814168/2125944

本文详细介绍了 Hive 数据库的基本概念，包括数据存储方式、建表 SQL 语句的构成、默认分隔符等内容，并深入探讨了分区表的概念、静态与动态分区的区别以及如何使用 Hive 进行数据操作。

1. hive数据分为哪两块?分别存储在哪?

元数据和数据本身； mysql等关系型数据库和 hdfs

2. hive的建表SQL语句你们觉得里有哪些内容?（不光光是字段的定义）

定义分区，分隔字符，内外表之分

3. 默认的换行符和分割符是什么?

/t /r

4. 加载数据或本地数据到hive表或者覆盖hive表，语法是什么?

LOAD DATA LOCAL INPATH 'xxx' OVERWRITE INTO TABLE xxxx;

5.hive的执行引擎是mr，请问哪种hive SQL是触发mr job的

带聚合函数,某些insert,还有create table as select

6. create table a as select * from b; 你们觉得有没有mr job?

有

7. 谈谈你们对分区表的理解? 怎样定义的，怎样加载数据，怎么查询

定义：CREATE TABLE order_created_partition (
order_number string,
event_time string
)
PARTITIONED BY (event_month string)
ROW FORMAT DELIMITED FIELDS TERMINATED BY "\t";
加载数据：LOAD DATA LOCAL INPATH "/tmp/order_created.txt"
OVERWRITE INTO TABLE order_created_partition
PARTITION (event_month='2017-12');
查询：select * from test1.order_created_partition
where event_month='2017-12';