注意首先确保上面加粗的全部启動非加粗的有些是提交任务后出现的,在启动检查这一部分可以忽略
启动集群节点是什么意思log中没有报错
启动集群节点是什么意思log中沒有报错,
提交spark任务没有报错
如果是的话,表明资源耗尽,解决方案:
上面这个绿色进度条所表示的队列的总长度是Memory Total
绿色进度条所表示的每個节点占据的内存可以在中看到,如下:
当上图中的Desktop(master)超过Memory Total时就会发生"所有节点都启动,但是只有一个节点实际参与计算"的现象
当上图中的尐量节点的Mem Used之和超过Memory Total时,就会发生"所有节点都启动但是只有部分节点实际参与计算"的现象。