1.spark基礎概念

hadoop存在問題 spark優點 Spark技術棧 Spark體系架構 核心架構 hadoop存在問題 基於磁盤，運行慢 函數函數較少，只有map/reduce，不夠靈活 spark優點 基於內存，優先存儲在內存 使用DAG(有限無環圖)，優化流程 基於RDD數據集，提供更多的操作函數，且可以基於Scala或Python Shell快速驗證原型 Spark技術棧 如下，基於Spark Code

>>阅读原文<<