【Spark二九】塗鴉

  塗鴉一 1. Spark爲什麼如此之外 a.基於內存 Spark將數據加載到內存中之後，此後的計算都在內存中進行，這就非常適合遞歸迭代的計算任務，同時對交互式即席查詢型任務也能做到將數據加載到內存中，如下圖所示。 b. DAG Spark在內部將對數據的操作繪製成一張有向無環圖，只有在真正需要結果的時候，纔對數據依次執行這些操作。也就是說，在有向無環圖中，除非需要結果而不得不進行計算時纔會進行

>>阅读原文<<