MapReduce作業原理

MapReduce 分2個版本: 基於hadoop1.x的MR1 基於hadoop2.x的MR2 MapReduce1 工作原理: 首先客戶端要編寫好mapreduce程序,然後提交作業也就是job,job的信息會發送到JobTracker上,併爲該job分配一個ID值,接下來做檢查操作,確認輸入目錄是否存在,如果不存在,則會拋錯,如果存在繼續檢查輸出目錄是否存在,如果存在則會拋錯,否則繼續運行;
相關文章
相關標籤/搜索