MapReduce執行流程的一點總結

首先,經過任務的控制檯log,能夠看到,首先任務在執行的時候, 先鏈接集羣的resourceManager。 而後計算出split的個數 下一步才提交任務 web 而在mr任務提交以後 。InputFormat 接口決定了輸入文件如何被 Hadoop 分塊(split up)與接受。 InputFormat 可以從一個 job 中獲得一個 split 集合(InputSplit[])(p: 一個s
相關文章
相關標籤/搜索