Spark學習筆記整理 --- 2018-08-10【Spark的SparkSQL介紹】

Spark SQL設計 Spark SQL的架構如圖所示，在Shark原有的架構上重寫了邏輯執行計劃的優化部分，解決了Shark存在的問題。Spark SQL在Hive兼容層面僅依賴HiveQL解析和Hive元數據，也就是說，從HQL被解析成抽象語法樹（AST）起，就全部由Spark SQL接管了。Spark SQL執行計劃生成和優化都由Catalyst（函數式關係查詢優化框架）負責。     S

>>阅读原文<<