当前位置:   article > 正文

解决spark运行中ERROR Shell:Failed to locate the winutils binary in the hadoop binary path的问题_error shell: failed

error shell: failed

spark要hadoop中的yarn调度,spark的输入输出一般也是来自hdfs,所以spark是依赖hadoop的,因为运行需要有hadoop

解决方法:下载hadoop,配置环境变量,重启idea,或者在代码中加入
System.setProperty(“hadoop.home.dir”, “hadoop下载路径”)

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/小蓝xlanll/article/detail/686168
推荐阅读
相关标签
  

闽ICP备14008679号