Spark安裝部署

Spark是UC Berkeley AMPLab開發的類MapRed計算框架。MapRed框架適用於batch job，但是由於它自身的框架限制，第一，pull-based heartbeat作業調度。第二，shuffle中間結果全部落地disk，導致了高延遲，啓動開銷很大。而Spark是爲迭代式，交互式計算所生的。第一，它採用了actor model 的akka 作爲通訊框架。第二， 它 使用了

>>阅读原文<<