赞
踩
周知,spark ui的默认端口是4040,然后被占用了就会顺序取+1的端口,当开了多个spark程序之后,当端口号加到了4045,在chrome浏览器里面就打不开了。会返回一个UNSAFE PORT的错误信息,其实这是浏览器禁用了你访问这个端口,程序其实是正常运行的。
因此建议手工指定spark.ui.port=4046在spark-defaults.conf配置文件中,如果4046被占用了,就从4046开始往后+1,跳过4045这个端口,避免看不到spark ui界面的困扰。
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。