Catalyst 優化器

爲了解決過多依賴 Hive 的問題, SparkSQL 使用了一個新的 SQL 優化器替代 Hive 中的優化器, 這個優化器就是 Catalyst, 整個 SparkSQL 的架構大致如下 1.API 層簡單的說就是 Spark 會通過一些 API 接受 SQL 語句 2.收到 SQL 語句以後, 將其交給 Catalyst, Catalyst 負責解析 SQL, 生成執行計劃等 3.Catal

>>阅读原文<<