MapReduce工作原理

1.MapReduce作業運行流程 流程分析: 1.在客戶端啓動一個作業。 2.向JobTracker請求一個Job ID。 3.將運行作業所需要的資源文件複製到HDFS上,包括MapReduce程序打包的JAR文件、配置文件和客戶端計算所得的輸入劃分信息。這些文件都存放在JobTracker專門爲該作業創建的文件夾中。文件夾名爲該作業的Job ID。JAR文件默認會有10個副本(mapred.s
相關文章
相關標籤/搜索