spark做業調度原理

概述          spark有多種方式調度各個計算所需的資源.node          首先,每一個application(即sparkContext實例)有一組獨立的Executor進程。各類cluster manager(yarn Resource manager,standalone master等等)爲application間的調度提供本身的方式。算法          其次,一個
相關文章
相關標籤/搜索