MR(mapreduce)的工做原理圖解

MapReduce是一種分佈式計算模型,由Google提出,主要用於搜索領域,解決海量數據的計算問題. MR由兩個階段組成:Map和Reduce,用戶只須要實現map()和reduce()兩個函數,便可實現分佈式計算,很是簡單。 這兩個函數的形參是key、value對,表示函數的輸入信息。java 1、MR流程: 分佈式 1:代碼編寫 2:做業配置函數 3:提交做業 4:初始化做業oop 5:分配
相關文章
相關標籤/搜索