MapReduce 計算任務的步驟

圖示: 第1步:InputFormat InputFormat 到HDFS上讀取數據,將數據傳給Split 第2步:Split Split將數據進行邏輯切分,將數據傳給RR 第3步:RR RR:將傳入的數據轉換成一行一行的數據,輸出行首字母偏移量和偏移量對應的數據,將數據傳給MAP 第4步:MAP MAP:根據業務需求實現自定義代碼,將數據傳給Shuffle的partition 第5步:parti
相關文章
相關標籤/搜索