Hadoop 7days -hadoop序列化機制及 使用maven開發 MR統計上下行流量的例子開發

MR執行流程: (1).客戶端提交一個mr的jar包給JobClient(提交方式:hadoop jar ...) (2).JobClient通過RPC和ResourceManager進行通信,返回一個存放jar包的地址(HDFS)和jobId (3).client將jar包寫入到HDFS當中(path = hdfs上的地址 + jobId) (4).開始提交任務(任務的描述信息,不是jar, 包
相關文章
相關標籤/搜索