当前位置:   article > 正文

SparkSQL与Hive的区别,为什么要用SparkSQL?_有spark为什么还要hive

有spark为什么还要hive

Hive

将HiveSQL转换为MapReduce提交到集群上运行,简化了编写MapReduce的复杂性。

由于MapReduce计算模型(基于磁盘)执行效率比较慢,于是Spark(基于内存)推出了SparkSQL

SparkSQL

将SparkSQL转换为RDD,然后提交到集群上运行,执行效率比MapReuce快。

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/Monodyee/article/detail/389364
推荐阅读
相关标签