使用Hadoop分析數據——簡單案例java語言編程之MaxTemperature

 爲了充分發揮Hadoop提供的並行處理優點,咱們須要將查詢表示成MapReduce做業。通過一些本地的小規模測試,咱們將可以在集羣設備上運行Hadoop。   Map階段和reduce階段     MapReduce任務過程被分爲兩個處理階段:map階段和reduce階段。每一個階段都以鍵/值對做爲輸入和輸出,並由程序員選擇他們的類型。程序員還須要具體定義兩個函數:map函數和reduce函數。
相關文章
相關標籤/搜索