MapReduce 原理分析

#MapReduce 分析 User 請求 MapReduce 處理,MapReduce 接收到 User 的文件,將文件劃分用戶事先定義的 M 份,每一份16MB到64MB, 然後使用fork將用戶進程拷貝到集羣內其它機器上。 user program的副本中有一個 Master , 其餘爲 Worker。 Master 負責調度, 爲空閒的 Worker 分配作業。司令指揮小兵撿地上的子彈。
相關文章
相關標籤/搜索