spark學習筆記（一）

一、spark是什麼 擴展了mapreduce的計算模型，高效的支持多種計算模型。 Spark Core 實現了Spark 的基本功能，包含任務調度、內存管理、錯誤恢復、與存儲系統交互等模塊。 Spark SQL 是Spark 用來操作結構化數據的程序包。使用hive sql，支持多種數據格式。 Spark 提供的對實時數據進行流式計算的組件。本質是微批處理 Spark 提供的包含常見機器學習（M

>>阅读原文<<