当前位置:   article > 正文

spark提交任务到odps无法打开spark ui界面_odps.cupid.volume.paths

odps.cupid.volume.paths

问题解决:

提交命令加入spark ui等参数:

spark-submit --master yarn-cluster \
--conf spark.hadoop.odps.access.id='XXXXXXXX' \
--conf spark.hadoop.odps.access.key='XXXXXXXX' \
--conf spark.hadoop.odps.cupid.history.server.address='XXXXX' \
--conf spark.hadoop.odps.cupid.proxy.domain.name='XXXXXXX' \
--conf spark.hadoop.odps.moye.trackurl.host='XXXXXX' \
--conf spark.hadoop.odps.cupid.proxy.end.point='XXXXX' \
--conf spark.hadoop.odps.cupid.volume.paths='path' \
--class com.VideoCalTFModel \
/Users/spark-examples_2.11-1.0.0-SNAPSHOT-shaded.jar 
args1 args2 args3...
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/不正经/article/detail/653189
推荐阅读
相关标签
  

闽ICP备14008679号