Windows下Spark开发环境的搭建_spark开发windows环境搭建

作者：盐析白兔 | 2024-06-22 02:10:55

踩

spark开发windows环境搭建

1.下载和安装Java

在安装Spark之前，需要先安装Java。可以从Oracle官网下载Java安装程序，或者使用操作系统自带的包管理器安装Java。

2. 下载和解压Spark

从Spark官网下载最新版本的Spark，解压到任意目录（我是解压到D盘下)

3.配置Spark，创建一个自定义的Spark环境配置文件

进入spark文件夹中的conf中，将spark-env.sh.template复制一份，将文件名修改为spark-env.sh

4.配置环境变量

将Spark的bin目录添加到系统的PATH环境变量中，以便可以在任意目录下运行Spark命令。

属性中进入高级系统设置，

进入path路径下编辑路径

5.验证spark的安装

win+R 输入cmd 进入cmd命令行中，输入spark-shell

声明：本文内容由网友自发贡献，转载请注明出处：【wpsshop】