spark原理：概念與架構、工作機制

一、Hadoop、Spark、Storm三大框架比較 Hadoop:離線海量數據批處理,基於磁盤的 Spark：基於內存。 Spark特點：運行速度快，使用DAG執行引擎以支持循環數據流與內存計算， 2、容易使用：多種語言編程，通過spark shell進行交互式編程 3、通用性：提供了完整而強大的技術棧，包括sQL查詢、流式計算、機器學習和圖算法組件 4、運行模式多樣：可運行在獨立集羣模式中，可

>>阅读原文<<