当前位置:   article > 正文

hive sql执行顺序_hive sql 执行顺序

hive sql 执行顺序

在hive和mysql中都可以通过explain+sql语句,来查看执行顺序。

对于一条标准sql语句,它的书写顺序是这样的:

select … from … where … group by … having … order by … limit …

(1)mysql语句执行顺序:

from... where...group by... having.... select ... order by... limit …

(2)hive语句执行顺序:

from … where … select … group by … having … order by … limit …

hive基于MapReduce程序,它的执行顺序决定了hive语句的执行顺序

 
  1. Map阶段:

  2. 1.执行from加载,进行表的查找与加载

  3. 2.执行where过滤,进行条件过滤与筛选

  4. 3.执行select查询:进行输出项的筛选

  5. 4.执行group by分组:描述了分组后需要计算的函数

  6. 5.map端文件合并:map端本地溢出写文件的合并操作,每个map最终形成一个临时文件。

  7. 然后按列映射到对应的reduceReduce阶段:

  8.  
  9.  
  10. Reduce阶段:

  11. 1.group by:对map端发送过来的数据进行分组并进行计算。

  12. 2.select:最后过滤列用于输出结果

  13. 3.limit排序后进行结果输出到HDFS文件

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/Gausst松鼠会/article/detail/688718
推荐阅读
相关标签
  

闽ICP备14008679号