用JAVA多線程實現單機版Map-Shuffle-Reduce,以理解MapReduce原理

1 需求 如下有1個文件:一行數據中,第1列是key,第2列是value 我們要做的事是: 相同的key進行value累加 得出按key排序前5的key-value值 使用Map-Reduce模型(JAVA多線程)實現 2 思路 我們的map階段是4 core執行,Reduce階段也是4 core執行 待處理文件:mapreduce.txt Main函數階段: 1)讀取mapreduce.txt文
相關文章
相關標籤/搜索