Hadoop MapReduce作業的生命週期----Hadoop技術內幕學習筆記

2019獨角獸企業重金招聘Python工程師標準>>> 1、作業提交與初始化。用戶提交作業後,首先由JobClient實例將作業相關信息,比如將程序jar包、作業配置文件、分片元信息等上傳到分佈式文件系統,其中,分片元信息文件記錄了每個輸入分片的邏輯位置信息。然後JobClient通過RPC通知JobTracker。JobTracker收到新作業提交請求後,有作業調度模塊對作業進行初始化:爲作業創
相關文章
相關標籤/搜索