Spark中的角色介紹

  Spark 是基於內存計算的大數據並行計算框架。因爲其基於內存計算，比Hadoop 中 MapReduce 計算框架具有更高的實時性，同時保證了高效容錯性和可伸縮性。從 2009 年誕生於 AMPLab 到現在已經成爲 Apache 頂級開源項目，併成功應用於商業集羣中，學習 Spark 就需要了解其架構。 Spark 架構圖如下： Spark架構使用了分佈式計算中master-slave模型

>>阅读原文<<