Spark Catalyst-SparkSQL執行流程

工作流程 SQL語句首先通過Parser模塊被解析爲語法樹,即未解析的邏輯計劃(Unresolved Logical Plan); 然後通過Analyzer模塊藉助於數據元數據解析爲邏輯計劃(Logical Plan); 此時再通過各種基於規則的優化策略進行深入優化,得到優化過的邏輯計劃(Optimized Logical Plan); 優化後的邏輯計劃依然是邏輯的,並不能被Spark系統理解,此
相關文章
相關標籤/搜索