spark 處理業務，使用spark比MR快的原因

處理業務，使用spark比MR快的原因 前言 內存&硬盤 MapReduce Spark spark DAG任務劃分減少了不必要的shuffle 資源申請粒度：進程&線程 MapReduce Spark 多任務計算示例 前言 從官網上看，使用spark處理業務要比MR快100倍左右。 原因主要有三點： 運算資源：內存&硬盤 根本原因：spark DAG任務劃分減少了不必要的shuffle 資源申請

>>阅读原文<<