Mapreduce(MR)讀取配置文件的三種方式,遍歷HDFS目錄文件

第一種方式:     如果配置文件數據不是很大,可以放在本地,然後在打包進去,代碼如下: 第二種:     如果配置文件數據比較大,可以傳到HDFS裏,以傳參的形式加載,代碼: 這種方式需要在Main裏設置參數位置,核心代碼如圖: 第三種:  配置文件已經在HDFS上存在(以part文件形式存在,第二種是傳上去的文件不是part格式,比如txt形式), 以傳參的形式加載,代碼: 這種方式也要在Ma
相關文章
相關標籤/搜索