Initial job has not accepted any resources;check your cluster All masters are unresponsive! Giving u

来源:互联网 发布:淘宝衣服是太平间的吗 编辑:程序博客网 时间:2024/06/05 17:54
这是由于 spark集群未响应导致的,可以按照如下的顺序检查
1 检查防火墙,是否放开了 7077 和相应端口
2 使用 ./bin/spark-shell --master spark://spark.master:7077 检测看是否能成功
注意 不要使用 spark://123.123.123.123:7077 这样的模式(第一次不知道,坑了好长时间)
 host文件配置如下
123.123.123.123 spark.master

123.123.123.123 spark.worker1


0 0
原创粉丝点击