大数据入门--linux和windows安装spark-3.0.1-bin-hadoop3.2.tgz_spark-3.4.1-bin-hadoop3-scala2.13 download

作者：小小林熬夜学编程 | 2024-04-01 14:47:36

踩

spark-3.4.1-bin-hadoop3-scala2.13 download

下载

wget https://downloads.apache.org/spark/spark-3.0.1/spark-3.0.1-bin-hadoop3.2.tgz
1

解压

gunzip spark-3.0.1-bin-hadoop3.2.tgz
tar xvf spark-3.0.1-bin-hadoop3.2.tar
1
2

启动

sbin/start-all.sh
1

访问
http://ip:8080

在这里插入图片描述
进入spark-shell

./bin/spark-shell
1

下载
官网：http://spark.apache.org/downloads.html
官网关联链接：https://www.apache.org/dyn/closer.lua/spark/spark-3.0.1/spark-3.0.1-bin-hadoop2.7.tgz
官网下载链接：https://mirrors.tuna.tsinghua.edu.cn/apache/spark/spark-3.0.1/spark-3.0.1-bin-hadoop2.7.tgz
解压
下载后解压即可
依赖
需要安装python
需要安装Hadoop 《hadoop安装》
进入spark-shell
\bin下运行spark-shell
进入scala则为成功
提交任务
HelloWorld.jar 放入bin目录下

spark-submit --class Hello HelloWorld.jar
1

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/小小林熬夜学编程/article/detail/349315