Adaptive Execution 讓 Spark SQL 更智能更高效

Spark 灰度發佈在十萬級節點上的實踐 Adaptive Execution 可在 Spark Job 執行過程中,自動基於中間結果的統計信息優化後續的執行計劃從而提高整體執行效率,並降低使用門檻 1 背景 前面《Spark SQL / Catalyst 內部原理 與 RBO》與《Spark SQL 性能優化再進一步 CBO 基於代價的優化》介紹的優化,從查詢本身與目標數據的特點的角度儘可能保證
相關文章
相關標籤/搜索