Spark原理篇之Spark SQL

1 Spark SQL背景       Spark SQL是從Shark發展而來的。Shark爲了實現Hive兼容，在HQL方面重用了Hive中的HQL的析、邏輯執行計劃翻譯和執行計劃優化等邏輯可以近似認爲僅將物理執行計劃從MR作業替換成了Spark作業（輔以內存列式存儲等各種和Hive關係不大的優化）；同時依賴Hive MetaStore和Hive SerDe(用於兼容現有的各種Hive存儲格式

>>阅读原文<<