关于spark ui的端口号,踩到一个浏览器的坑,其实不算一个问题

来源:互联网 发布:java调用系统api接口 编辑:程序博客网 时间:2024/05/16 08:20

周知,spark ui的默认端口是4040,然后被占用了就会顺序取+1的端口,当开了多个spark程序之后,当端口号加到了4045,在chrome浏览器里面就打不开了。会返回一个UNSAFE PORT的错误信息,其实这是浏览器禁用了你访问这个端口,程序其实是正常运行的。

因此建议手工指定spark.ui.port=4046在spark-defaults.conf配置文件中,如果4046被占用了,就从4046开始往后+1,跳过4045这个端口,避免看不到spark ui界面的困扰。


0 0
原创粉丝点击