Hive内部流程和架构图_基于hive网络聊天数据分析设计流程图

作者：从前慢现在也慢 | 2024-06-17 17:04:16

踩

基于hive网络聊天数据分析设计流程图

在这里插入图片描述
hive可以理解为将HQL语句转换成MapReduce的程序的工具，其内部流程是
首先在用户接口,使用shell黑窗口来书写HQL语句,也可以使用ODBC客户端书写HQL
在写Web项目实战的时候，使用驱动字符串和连接字符串来连接MySQL数学SQL语句,Hive也是一样的,也有可视化界面,可在JDBC可视化界面书写HQL

Hive中有解析器,解析Hive用户提交的HQL语句,将写入的HQL语句的意图，交给编译器进行编译,编程成MapReduce扔进优化器进行优化,优化后的代码提交给执行器,执行器作用不是执行MapReduce而是将MapReduce代码提交到Hadoop集群上

在Hive流程中用到了元数据库,在解析器到编译器,从HQL语句转换成MapReduce的过程中
MapReduce计算完成后,原路返回到执行器,优化器,编译器,通过thrift服务返回到客户端
会有HQL语句执行后的效果

声明：本文内容由网友自发贡献，转载请注明出处：【wpsshop博客】