spark基礎
spark可類比於hadoop的MapReduce，性能上有更多優化，一個主要的特點就是spark是基於內存運算的，相比於MapReduce的基於磁盤，減少了IO開銷，運算速度快；另一個優化是spark提供基於DAG的運算，防止數據反覆落地；同時spark提供多種計算模式，滿足不同需求 spark 生態系統 下圖展示了spark生態系統的主要模塊： Mesos,hadoop YARN:底層資源調度
相關文章
- 1. spark基礎-001
- 2. spark-sql基礎
- 3. Spark基礎 DAG
- 4. Spark core基礎
- 5. spark 基礎 下
- 6. Spark基礎
- 7. spark streaming基礎
- 8. spark 基礎
- 9. spark基礎
- 10. spark 基礎 上
- 更多相關文章...
- • Kotlin 基礎語法 - Kotlin 教程
- • Scala 基礎語法 - Scala教程
- • Kotlin學習（二）基本類型
- • ☆基於Java Instrument的Agent實現
相關標籤/搜索
每日一句
-
每一个你不满意的现在，都有一个你没有努力的曾经。
歡迎關注本站公眾號,獲取更多信息
相關文章
- 1. spark基礎-001
- 2. spark-sql基礎
- 3. Spark基礎 DAG
- 4. Spark core基礎
- 5. spark 基礎 下
- 6. Spark基礎
- 7. spark streaming基礎
- 8. spark 基礎
- 9. spark基礎
- 10. spark 基礎 上