Chapter04 編寫基本的MapReduce程序(二) 非JAVA語言編寫mapreduce程序

Hadoop也可以使用非Java語言來編寫,主要使用Streaming API編寫,但只適用較小、功能比較簡單的MapReduce程序。 下面是使用Shell 腳本來對被引用的專利排序: 運行的結果: 使用python語言編寫,需要使用file參數將程序打包成作業來運行, 可以看出並沒有設置特定的Reducer,採用默認的IdentifyReducer,把輸入直接轉變爲輸出。
相關文章
相關標籤/搜索