当前位置:   article > 正文

Spark环境搭建部署全流程(Linux),看这一篇就够了_linux spark

linux spark

前言

本篇文章将给各位展示如何快速地在linux上搭建spark,本文搭建的环境为Vmware 16 pro 下的CentOS 7 linuxhadoop版本为3.x以上,Jdk1.8,
以下是我总结出的spark几种模式的部署流程,如果是新手,请按流程走完,如果是有过搭建经验的,可根据所需点击相应链接。

传送门

一、Local模式部署

1、linux安装Anaconda
2、Spark Local 环境部署

二、StandAlone模式部署

1、Spark StandAlone环境部署
2、StandAlone程序测试
3、ZooKeeper安装部署
4、Spark StandAlone HA 环境部署

三、Spark on YARN模式部署

1、Spark on YARN环境部署
2、Spark on YARN 两种运行模式

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/小舞很执着/article/detail/766833
推荐阅读
相关标签
  

闽ICP备14008679号