mapreduce的內部核心的工作機制

mapreduce框架的工作機制 劃分輸入切片: Job客戶端負責劃分 掃描輸入目錄中的所有文件 遍歷每一個文件 按照128規格劃分範圍 生成arrayList 序列化程job.split文件 根據job.split知道創建幾個mapTask ,明確每個mapTask會處理某個文件某一部分的內容 Map程序的啓動過程 TextInputFormat類:文本文件類型的讀取工具類。 mapTask會調
相關文章
相關標籤/搜索