当前位置:   article > 正文

Hive的架构原理以及运行原理_hive的体系架构和运行机制

hive的体系架构和运行机制

Hive的架构原理

在这里插入图片描述

一、客户端:Hive是Mapreduce的客户端,Hive的客户端有两种方式:

  1. CLI:命令行的方式
  2. JDBC:这种我们也可以通过java代码来实现,不过一般不这样做。
二、四个器
  1. 解析器:将SQL字符串转换成抽象语法树AST,这一步一般都用第三方工具库完成,解析器是对sql的语法,表是否存在,以及字段是否存在做检查,hql通过了解析器就说明语法上没有问题
  2. 编译器:根据AST生成执行计划
  3. 优化器:对逻辑执行计划进行优化
  4. 执行器:将逻辑执行计划转换为可以运行的物理计划,对于hive来说就是hadoop或者spark

三、Hive的类似于关系型数据库

  1. hive有自己的执行引擎,就是Mapreduce。
  2. hive存储数据使用的是hdfs
  3. hive的元数据存储的位置是关系型数据库

四、Hive的运行机制

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/知新_RL/article/detail/396274
推荐阅读
相关标签
  

闽ICP备14008679号