Hadoop MapReduce的生命週期

Hadoop MapReduce 作業的生命週期 假設用戶編寫了一個MapReduce程序,並將其打包成xxx.jar文件,並提交作業,該作業的運行過程如圖所示: 這個過程分爲以下5個步驟: 作業提交與初始化。 用戶提交作業後,首先由JobClient實例將作業相關信息,(比如講程序jar包、作業配置文件、分片元信息文件等)上傳到分不是文件系統(一般爲HDFS)上,其中分片元信息文件記錄了每個輸入
相關文章
相關標籤/搜索