spark 發展史，最近迎來 3.0 時代

注：以下圖片均引用自2019年阿里雲棲大會 Spark發展史 1 動態分區(Dynamic Partition Pruning) 在3.0以前，spark是不支持動態分區的，所謂動態分區就是針對分區表中多個表進行join的時候，在on後面的條件語句滿足一定的要求後就會進行自動動態分區裁減優化，比如： 1SELECT t1.id,t2.pKey 2FROM t1 3JOIN t2 4ON t1.pK

>>阅读原文<<