spark資源調度與yarn類比

spark資源調度與yarn類比:node master負責資源調度:就是決定在那些worker上啓動executor,監控worker) ————>   yarn上的是resourcemanagerspa worker負責啓動執行任務的進程(executor),而且監控executor,而且將當前機器的信息經過心跳彙報給master進程 ————>nodemanager資源 executor負責
相關文章
相關標籤/搜索