Spark on yarn 的兩種模式的區別

1. spark on yarn cluster 模式

ResourceManger 分配資源  ApplicationMaster (AM)通訊 NodeManager NodeManger 開闢 Container，Container進行 executor執行job。同時資源狀況以及job狀態 的收集經過AM傳給 RM

2.spark on yarn client 模式

Client 客戶端 向RM請求提交 job, ResourceManger 分配資源  ApplicationMaster (AM)通訊 NodeManager NodeManger 開闢 Container，Container進行 executor執行job，資源狀況以及job狀態 的收集經過AM傳給Client 。Driver就是運行在這個Client