Spark SQL工做原理剖析和性能優化

1、工做原理剖析: Spark SQL 架構中主要有這幾個關鍵的組件:SqlParser(Sql分析程序) ,Analyser(分析器) ,Optimizer(優化器) ,SparkPlan(Spark計劃) SparkSQL大體的執行流程是這樣的: 1. SQL 語句通過SqlParser 完成sql 語句的語法解析功能,解析成Unresolved LogicalPlan(未解析的邏輯計劃);
相關文章
相關標籤/搜索