热门标签
热门文章
- 1【微信小程序】一文带你吃透开发中的常用组件_微信小程序组件
- 2派工单系统 源码_「青鸟报修云」酒店设备报修管理系统
- 3大模型日报｜今日必读的7篇大模型论文_综述大视觉模型的背景、技术、限制和机遇
- 4非常好用的最新版uninstall Toll 附加注册机_uninstall tool注册机
- 5【Harmony OS】【JAVA UI】webView动画加载资源加载动画交互_webview.setwebagent
- 6leetcode：173. 二叉搜索树迭代器
- 72013年各大小IT公司待遇
- 8《一种改进的YOLOv5用于无人机捕获场景中的目标检测》论文笔记_论文中引用yolov5
- 9leetcode 309. 最佳买卖股票时机含冷冻期_leetcode 309 最佳买卖股票时机含冷冻期 java
- 10unity编辑器扩展#1 自定义窗口、面板、和属性_unity 自定义窗口显示自定义类型
当前位置: article > 正文
Spark 01 概述_spark01 重访周期
作者：小蓝xlanll | 2024-05-19 14:19:51
赞
踩
spark01 重访周期
1）介绍
Apache Spark™ is a unified analytics engine for large-scale data processing.
快速通用的处理大规模数据的引擎。
2）产生背景
MapReduce局限性
1）代码繁琐
2）只能够支持map和reduce方法
3）执行效率低下
4）不适合迭代多次、交互式、流式的处理框架多样化
1）批处理（离线）：MapReduce、Hive、Pig
2）流式处理（实时）：Storm，JStorm
3）交互式计算：Impala
3）特点
- 速度快 speed
- 易用 ease of use
- 通用 generality
- 在多平台运行 runs everywhere
4）Spark和Hadoop的协作性
Hadoop优势
Spark优势
Hadoop+Spark
声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/小蓝xlanll/article/detail/593273
推荐阅读
相关标签
