Spark任務調度和資源分配

Spark任務調度和資源分配 1、Spark調度模式 FIFO和FAIR Spark中的調度模式主要有兩種：FIFO和FAIR。 默認情況下Spark的調度模式是FIFO（先進先出），誰先提交誰先執行，後面的任務需要等待前面的任務執行。 而FAIR（公平調度）模式支持在調度池中爲任務進行分組，不同的調度池權重不同，任務可以按照權重來決定執行順序。 2、資源分配概述 spa

>>阅读原文<<