MR 原理

  MapReduce的執行步驟: 1、Map任務處理   1.1 讀取HDFS中的文件。每一行解析成一個<k,v>。每一個鍵值對調用一次map函數。                <0,hello you>   <10,hello me>                       1.2 覆蓋map(),接收1.1產生的<k,v>,進行處理,轉換爲新的<k,v>輸出。          <he
相關文章
相關標籤/搜索