《按部就班學Spark》一3.6 Shuffle機制

本節書摘來自華章出版社《按部就班學Spark》一書中的第3章,第3.6節,做者 小象學院 楊 磊,更多章節內容能夠訪問雲棲社區「華章計算機」公衆號查看。 算法 3.6 Shuffle機制markdown 在MapReduce框架中,Shuffle是鏈接Map和Reduce之間的橋樑,Map的輸出要用到Reduce中必須通過Shuffle這個環節,Shuffle的性能高低直接影響了整個程序的性能和吞
相關文章
相關標籤/搜索