Spark簡述及基本架構

Spark簡述 Spark發源於美國加州大學伯克利分校AMPLab的集羣計算平臺。它立足 於內存計算,從多迭代批量處理出發,兼收幷蓄數據倉庫、流處理和圖計算等多種計算範式。 特色: 一、輕 Spark 0.6核心代碼有2萬行,Hadoop1.0爲9萬行,2.0爲22萬行。web 二、快 Spark對小數據集能達到亞秒級的廷遲,這對於Hadoop MapReduce是沒法想象的(因爲」心跳」間隔機制
相關文章
相關標籤/搜索