hadoop --MapReduce

    MapReduce 分佈式計算,移動計算而不是移動數據     步驟:split - map - shuffle - reduce     split : 把數據切成片段(計算框架自動做)。split塊的大小與block相同。     Map : 跟程序員編寫的代碼相關。(java程序)     shuffle : 合併、排序     reduce : reduce 的個數由程序決定。  
相關文章
相關標籤/搜索