hadoop1中mapreduce原理詳解

剖析Mapreduce作業運行機制:原理如下圖: 原理圖的解釋的可以分爲以下幾個部分 1、客戶端提交一個mapreduce的jar包給JobClient 2、JocClient通過RPC和JobTracker進行通信,返回一個存放jar包的地址(HDFS) 3、JobClient將jar包寫入到HDFS當中(path=hdfs上的地址(這個地址是有第二步的JobTracker返回的)+JobId)
相關文章
相關標籤/搜索