Spark面試:Spark on yarn 運行流程

一: Spark on YARN能讓Spark計算模型在雲梯YARN集羣上運行,直接讀取雲梯上的數據,並充分享受雲梯YARN集羣豐富的計算資源。 二: 基於YARN的Spark作業首先由客戶端生成作業信息,提交給ResourceManager, ResourceManager在某一 NodeManager彙報時把AppMaster分配給NodeManager, NodeManager啓動 Spar
相關文章
相關標籤/搜索