MapReduce Yarn 詳解

Hadoop 分佈式計算框架(MapReduce)。 MapReduce設計理念: - 分佈式計算 - 移動計算,而不是移動數據 MapReduce計算框架 步驟1:split split切分Block,得到很多數據片段例如圖中的split0, split1, split2。 步驟2:map 有多少個片段,就有多少個map,map是一個Java線程。 線程爲硬件和對象。 數據按照鍵值對的形式傳給m
相關文章
相關標籤/搜索