当前位置:   article > 正文

(四)win10安装Scala和Spark_exception when trying to compute pagesize, as a re

exception when trying to compute pagesize, as a result reporting of processt

相关内容参考

专栏:大数据入门

【软件安装】(一)win10安装hadoop 2.8.5(详细步骤)

(二)win10 Eclipse上配置Hadoop(详细步骤)

(三)Hadoop简单应用 单词统计

目录

1 scala

1.1 下载    1.2 .msi安装(无需配置)     1.3 .zip安装+配置            1.4 测试

2 spark

2.1 下载解压               2.2 配置测试

3 踩坑记录

【已解决】报错:WARN ProcfsMetricsGetter


 

1 scala

1.1 下载

官方下载网址 或 github下载zip

1.2 .msi安装(无需配置)

安装完后,path中自动添加路径,方便

1.3 .zip安装+配置

解压后还要配置环境变量

1.4 测试

2 spark

2.1 下载解压

官方下载网址

跳转页面后继续点击

2.2 配置测试

3 踩坑记录

【已解决】报错:WARN ProcfsMetricsGetter:

Exception when trying to compute pagesize, as a result reporting of ProcessTree metrics is stopped

思路:看了很多博客,比如java安装路径带空格、python路径等,都没有用。

后来翻开了朋友的安装路径,发现是spark版本问题。

最开始选的spark版本为v3.0.0,但是不太合适,改成v2.4.6,就ok了。

 

 

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/2023面试高手/article/detail/401179
推荐阅读
相关标签
  

闽ICP备14008679号