当前位置:   article > 正文

Python运行spark时出现版本不同的错误

Python运行spark时出现版本不同的错误

异常描述:

Exception: Python in worker has different version 2.7 than that in driver 3.4, PySpark cannot run with different minor versions.
Please check environment variables PYSPARK_PYTHON and PYSPARK_DRIVER_PYTHON are correctly set.
  • 1
  • 2

问题解决:

import os
#此处指定自己的python路径
os.environ["PYSPARK_PYTHON"]="/Library/Frameworks/Python.framework/Versions/3.7/bin/python3"
  • 1
  • 2
  • 3
声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/从前慢现在也慢/article/detail/496284
推荐阅读
相关标签
  

闽ICP备14008679号