spark-core學習筆記

1.spark和MapReduce比較：緩存 1）MR是批量計算框架，Spark-Core也是批量計算框架 2）Spark相比MR速度快，MR做爲一個job，在中間環節中結果是落地的（會通過磁盤交換），Spark計算過程當中數據流轉都是在內存的（減小了對HDFS的依賴）多線程 3）MR：多進程模型（缺點：每一個任務啓動時間長，因此不適合於低延遲的任務              優勢：資源隔離，穩定

>>阅读原文<<