当前位置:   article > 正文

Failed to locate the winutils binary in the hadoop binary path 报错解决_error shell:397 - failed to locate the winutils bi

error shell:397 - failed to locate the winutils binary in the hadoop binary

WINDOWS10环境下单机下调试pyspark代码,在没有配置HADOOP_HOME的环境变量,会产生

ERROR Shell:397 - Failed to locate the winutils binary in the hadoop binary path
java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries.

的错误,解决的方法是要代码中加入

os.environ['HADOOP_HOME'] = 'F:\winutils'

并且在项目加入,目录 结构如下

F:\2019download\Users\pingan\PycharmProjects\pyshark-project 的目录

2019/01/07  09:44    <DIR>          .
2019/01/07  09:44    <DIR>          ..
2019/01/06  11:00    <DIR>          .idea
2019/01/04  09:31    <DIR>          spark
2019/01/04  09:09    <DIR>          venv
2019/01/07  09:44    <DIR>          winutils
               0 个文件              0 字节

    

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/盐析白兔/article/detail/711179
推荐阅读
相关标签
  

闽ICP备14008679号