【MR原理-2】MapReduce作業提交與初始化過程分析

導讀: 1. 作業提交與初始化概述 2. 作業提交過程詳解 3. 作業初始化過程詳解 一、作業提交與初始化概述   作業提交過程比較簡單,主要爲後續作業執行準備環境,主要涉及創建目錄、上傳文件等操作;而一旦用戶提交作業後,JobTracker端便會對作業進行初始化。作業初始化的主要工作是根據輸入數據量和作業配置參數將作業分解成若干個Map Task以及Reduce Task,並添加到相關數據結構中
相關文章
相關標籤/搜索