Spark2.x和Spark1.x版本的区别_spark2x和spark1x区别

作者：凡人多烦事01 | 2024-06-09 00:18:32

踩

spark2x和spark1x区别

1、Spark2.x实现了对Spark SQL和Hive SQL操作API的统一

2、Spark2.x引入了SparkSession的概念，提供了一个统一的切入口来使用Spark的各项功能，统一了旧的SQLContext和HiveContext

3、统一了DataFrame和DataSets的API

4、Spark Streaming基于Spark SQL构建了high-level API，使得Spark Streaming更好的受益于Spark SQL的易用性和性能提升

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/凡人多烦事01/article/detail/691819