hadoop學習之路3-MapReduce作業生命週期

本系列均爲hadoop1版本爲準。。 MR作業生命週期,即用戶從作業提交到運行結束經歷的整個過程。如圖所示: hadoop MR 作業生命週期 1.作業提交與初始化。用戶提交作業後,首先由JobClient實例將作業相關信息,比如將程序jar包、作業配置文件、分片元信息文件等上傳到hdfs上,其中分片元信息記錄了每個輸入分片的邏輯位置信息。然後JobClient通過RPC通知JobTracker。
相關文章
相關標籤/搜索