Spark 執行流程&內存管理&SparkSQL

Spark 的相關概念我們整理清楚了，接下來就是讓 Spark 「跑起來」，讓我們看看它是怎麼運行的，包括它的任務提交和執行流程，執行過程中的內存管理機制，以及 SparkSQL 的執行和優化。掌握執行流程相關的內容對 Spark 任務的 debug 和優化有很大幫助，可以幫助我們迅速定位到哪個執行的環節出了問題，或者哪裏出現了瓶頸，解決此類問題通常是大數據工程師的日常工作，所以這不僅僅是對知識點

>>阅读原文<<