赞
踩
hive on Spark是由Cloudera发起,由Intel、MapR等公司共同参与的开源项目,其目的是把Spark作为Hive的一个计算引擎,将Hive的查询作为Spark的任务提交到Spark集群上进行计算。通过该项目,可以提高Hive查询的性能,同时为已经部署了Hive或者Spark的用户提供了更加灵活的选择,从而进一步提高Hive和Spark的普及率。
hive on spark大体与SparkSQL结构类似,只是SQL引擎不同,但是计算引擎都是spark!敲黑板!这才是重点!
结构上Hive On Spark和SparkSQL都是一个翻译层,把一个SQL翻译成分布式可执行的Spark程序。而且大家的引擎都是spark
SparkSQL与Hive on Spark的比较
参考这;https://blog.csdn.net/yeruby/article/details/51448188
详细对比看这
https://blog.csdn.net/weixin_34146805/article/details/91894144
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。