Spark和MapReduce的比較(包含磁盤內存,算子,粗粒度資源申請和細粒度資源申請)【文字說明原理+圖片】

Spark是開源的通用的計算框架,目的是爲了使數據分析更快。MR也是計算框架。         區別?             1).MR是基於磁盤迭代,Spark是基於內存迭代。             2).Spark中有DAG有向無環圖。             3).MR中只有map,reduce兩個類,相當於Spark中兩個算子。Spark中有三類算子(轉換算子,行動算子,持久化算子)。
相關文章
相關標籤/搜索