Spark整理

Spark介紹   一個分佈式的並行計算框架 spark是下一代的map-reduce，擴展了mr的數據處理流程 executor都是裝載在container裏運行，container默認內存是1G（參數yarn.scheduler.minimum-allocation-mb定義） AM(Application Master)在Spark中叫driver，AM向RM申請的是executor資源，當

>>阅读原文<<