Spark Sort Shuffle (二)

Spark Sort Shuffle (二) app [睡着的水-hzjs-2016.08.19]分佈式 1、爲何使用Sort-Based Shuffle?性能 ------# Shuffle通常包含兩階段的任務:大數據 一、產生Shuffle數據的階段(map階段;須要實現ShuffleManager中getWriter來寫數據【數據能夠BlockManager寫到Memory\Disk\Tac
相關文章
相關標籤/搜索