Spark Sql執行原理介紹

Spark SQL整體架構 從上圖可見，無論是直接使用 SQL 語句還是使用 DataFrame，都會經過如下步驟轉換成 DAG 對 RDD 的操作 1） Parser 解析 SQL，生成 Unresolved Logical Plan 在Unresolved Logical Plan中，不知道涉及表是什麼類型，數據存在何處，表的結構是什麼； 這一步主要完成詞法和語法解析，生成解析樹 2）由 An

>>阅读原文<<