spark的架構思考（一）

任何架構都是由需求分析得來，而spark是由怎麼樣的需求分析而來的呢？web 需求：怎樣快速計算大數據 解決方案：將大量的數據分紅不少塊，讓不一樣的計算機進行計算，而後再彙總起來，這就是簡單的MR計算模型。 可是hadoop的MR計算模型，太單一，並且重度依賴IO， 新的需求：需求又來了，怎樣又讓它快，又讓它計算模型複雜呢？架構 需求分析： 1. 非功能性需求：計算快 什麼致使MR 計算模型慢呢：

>>阅读原文<<