spark架構和調優

爲什麼80%的碼農都做不了架構師？>>>    基本設計思想   1. Spark模塊設計       整個Spark主要由以下模塊組成： Spark Core：Spark的核心功能實現，包括：SparkContext的初始化（DriverApplication通過SparkContext提交）、部署模式、存儲體系、任務提交與執行、計算引擎等。 Spark SQL：提供SQL處理能力，便於熟悉關係

>>阅读原文<<