圖解Spark的任務調度機制

文章目錄 1. 相關概念 2. 任務調度 2.1 Stage級別任務調度： 2.2 Task級別的調度 2.2.1 Task的調度策略： 2.2.1.1 FIFO調度策略： 2.2.1.2 Fair調度策略： 2.2.2 本地化調度 2.2.3 失敗重試和黑名單 由於在實際開發中都是使用yarn-cluster模式，所以本文也以該模式爲分析的前提。 1. 相關概念 首先明確幾個在任務調度方面的常用

>>阅读原文<<