Spark 中的Tungsten和Catalyst

spark內核的三大核心：基於RDD的調度系統、Tungsten和Catalyst解析優化引擎web Tungsten Tungsten面對： Memory , CPU, Disk IO 和 NetWork IOsql spark 1.6是第一階段面對Memory， spark 2.0的時候面對的是CPU編程 磁盤IO和網絡IO主要發生在Shuffle階段，Shuffle有Hash, Sort,

>>阅读原文<<