Spark on YARN任務提交流程

Spark on YARN是spark運行在yarn上，其中有yarn-client和yarn-cluster兩種模式，它們的區別在於Driver運行的結點位置。 yarn-client模式 yarn-client模式下的spark的Driver運行在客戶端，適用於交互、調試，希望立即看到app的輸出。 yarn-cluster模式 yarn-cluster模式下的spark的Driver運行在R

>>阅读原文<<