Spark On Yarn的兩種模式解析

使用yarn能對spark的運行資源調動進行動態劃分，spark on yarn有yarn-client和yarn-cluster兩種模式。這兩種模式的作業雖然都運行在yarn上，但是運行方式不一樣；下面解析一下這兩種模式下提交作業到運行的全過程。 運行中涉及到的名詞 Application: Appliction都是指用戶編寫的Spark應用程序，其中包括一個Driver功能的代碼和分佈在集羣中

>>阅读原文<<