spark core 作業調度

圖片 一. 概念 二. 作業調度流程 三. Spark運行架構具有以下特點 四. spark 詳細運行過程 1) 2) 3) 一. 概念 一個Application由一個Driver和若干個Job構成, 一個Job由多個Stage構成, 一個Stage由多個沒有Shuffle關係的Task組成(多個RDD算子操作) stage:寬窄依賴劃分 當執行一個Application時,Driver會向集羣
相關文章
相關標籤/搜索