深入理解MapReduce中環形緩衝區的概念

MapReduce過程圖解: 標題 環形緩衝區圖示: 環形緩衝區                      Map的輸出結果是由collector處理的,每個Map任務不斷地將鍵值對輸出到在內存中構造的一個環形數據結構中。使用環形數據結構是爲了更有效地使用內存空間,在內存中放置儘可能多的數據。                          這個數據結構其實就是個字節數組byte[],叫Kvbu
相關文章
相關標籤/搜索