spark的shuffle過程

徹底搞懂spark的shuffle過程（shuffle write） 什麼時候需要 shuffle writer 假如我們有個 spark job 依賴關係如下 我們抽象出來其中的rdd和依賴關係: E <-------n------,                    C <--n---D---n-----F--s---,                            A <----

>>阅读原文<<