spark-sql執行流程分析

spark-sql 架構   圖1 圖1是sparksql的執行架構，主要包括邏輯計劃和物理計劃幾個階段，下面對流程詳細分析。   sql執行流程 總體流程 parser；基於antlr框架對 sql解析，生成抽象語法樹 變量替換，通過正則表達式找出符合規則的字符串，替換成系統緩存環境的變量 SQLConf中的`spark.sql.variable.substitute`，默認是可用的；參考` S

>>阅读原文<<