Hadoop作業提交深度剖析

在這個系列中,我將深入分析一個MapReduce作業的提交與初始化過程 從用戶輸入提交作業命令到作業初始化的整個過程,該過程涉及JobClient、JobTrack和TaskScheduler三個組件,它們的功能分別是:準備運行環境、接收作業、初始化作業。 作業的提交過程比較簡單,主要是爲後續的作業執行準備環境,主要涉及創建目錄、上傳文件等操作,而一旦用戶提交作業後,JobTrack端便會對作業進
相關文章
相關標籤/搜索