Spark學習筆記

產生背景 數據增長 隨着互聯網規模的爆發式增長，不斷增加的數據量要求程序能夠在更大規模的集羣中進行計算 集羣計算 集羣計算引發數據共享，單點故障，執行效率以及程序併發執行等問題，從而產生了許多大數據處理框架。 不同的大數據計算框架帶來了新的問題 大量數據模型的誕生，導致不同類型的計算，通常需要不同的處理框架，不同的處理框架由於天生的差異帶來了重複計算，適用範圍的侷限性，資源分配，統一管理等問題。

>>阅读原文<<