MapReduce 的知識點詳解

Shuffle(混洗) shuffle 輸入是key value的 list shuffle 輸出是key value的list MapReduce計算任務的步驟 第一步 :inputFormat inputFormat到hdfs上讀取數據 將數據傳給split 第二步split split將數據進行邏輯切分,將數據傳給RR 第三步:RR RR:將傳入的數據轉換成一行一行的數據,輸出行首字母的偏移
相關文章
相關標籤/搜索