hive sql执行顺序

在hive和mysql中都可以通过explain+sql语句,来查看执行顺序。

对于一条标准sql语句,它的书写顺序是这样的:

select … from … where … group by … having … order by … limit …

(1)mysql语句执行顺序:

from... where...group by... having.... select ... order by... limit …

(2)hive语句执行顺序:

from … where … select … group by … having … order by … limit …

hive基于MapReduce程序,它的执行顺序决定了hive语句的执行顺序


 
  1. Map阶段:

  2. 1.执行from加载,进行表的查找与加载

  3. 2.执行where过滤,进行条件过滤与筛选

  4. 3.执行select查询:进行输出项的筛选

  5. 4.执行group by分组:描述了分组后需要计算的函数

  6. 5.map端文件合并:map端本地溢出写文件的合并操作,每个map最终形成一个临时文件。

  7. 然后按列映射到对应的reduceReduce阶段:

  8.  
  9.  
  10. Reduce阶段:

  11. 1.group by:对map端发送过来的数据进行分组并进行计算。

  12. 2.select:最后过滤列用于输出结果

  13. 3.limit排序后进行结果输出到HDFS文件

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值