spark 發展史，最近迎來 3.0 時代

本文的目的主要是介紹11月8日發佈的Apache Spark3.0預覽版所增加的一些功能和特性，希望能讓大家對這些新特性有一個基礎的瞭解，以便後面能夠更快的上手和適應新版本。 注：以下圖片均引用自2019年阿里雲棲大會 Spark發展史 1 動態分區(Dynamic Partition Pruning) 在3.0以前，spark是不支持動態分區的，所謂動態分區就是針對分區表中多個表進行join的時

>>阅读原文<<