Hadoop學習系列筆記(四):MapReduce應用開發與MapReduce的工作機制

MapReduce應用開發 MapReduce編程流程:首先寫map函數和reduce函數,使用單元測試確保函數的運行符合預期,然後寫一個驅動程序來運行作業(可在本地IDE中用一個小數據集進行測試),最後將通過測試的程序放到集羣上運行。 資源文件: configuration.xml、core-default.xml、core-site.xml MapReduce的工作流: JobControl的
相關文章
相關標籤/搜索