Spark源碼解讀之Shuffle原理剖析與源碼分析

在前面幾篇文章中,介紹了Spark的啓動流程Spark內核架構流程深度剖析,Spark源碼分析之DAGScheduler詳解,Spark源碼解讀之Executor以及Task工做原理剖析,Spark源碼解讀之Executor以及Task工做原理剖析等Spark重要組件的源碼剖析以後,接着以前的文章,本篇文章來剖析Shuffle的原理,shuffle階段不管是mapreduce仍是Spark都是其核
相關文章
相關標籤/搜索