当前位置:   article > 正文

下载Spark并在单机模式下运行它_spark单机模式下载

spark单机模式下载

声明:
以下是在Windows 10 64位系统下面进行的操作。
使用的语言以及版本是Python 2.7。
JDK版本是 JDK1.8。

下载Spark

Spark的下载地址为:https://archive.apache.org/dist/spark/
在这个里面可以选择你自己想要的版本。
我下载的是spark-1.6.0-bin-hadoop2.6.tgz
注:在Spark1.4起增加了对R语言和Python3的支持!

解压Saprk

将压缩包解压,我解压的路径是F:\spark
注意:路径中不能含有空格

环境变量配置

新建 SPARK_HOME,设置值为解压目录,如:F:\spark\spark-1.6.0-bin-hadoop2.6
添加PATH:%SPARK_HOME%\bin

下载Hadoop

Hadoop下载地址为:http://mirror.bit.edu.cn/apache/hadoop/common/
我这里下载的是hadoop 2.6的。

Hadoop环境变量的配置

将Hadoop解压在spark的同一路径(可

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/爱喝兽奶帝天荒/article/detail/766781
推荐阅读
相关标签
  

闽ICP备14008679号