大數據開發1--MapReduce計算框架

MapReduce實現原理 一、MapReduce1.x架構 Job:用戶的每一個計算請求,稱爲一個作業。 JobTracker:負責接收用戶提交的作業,負責啓動、跟蹤任務執行。   作爲作業的管理者,它將作業分解成很多Task並分派給TaskTracker進行運行,Task包含MapTask和ReduceTask。   它還需要完成作業的監控以及容錯處理(task作業掛掉了,會重啓task)。如
相關文章
相關標籤/搜索