MapReduce詳細流程

MR整體流程: 準備待處理文本,文本相關信息(輸入路徑: /user/input、文件名稱: ss.txt , 文件大小:200M)。 客戶端獲取待處理的數據信息(比如ss.txt根據塊大小128M切分成塊1的128M和塊2的72M),根據參數配置,形成任務分配的規劃。 客戶端submit(),提交Job到Yarn (提交內容:Job.split-切片信息, jar包, Job.xml)。 Res
相關文章
相關標籤/搜索