python調用mrjob實現hadoop的mapreduce日誌解析

咱們一般寫mapreduce是通過java和streaming來寫的,身爲pythoner的我, java不會,沒辦法就用streaming來寫mapreduce日誌分析。 這裏要介紹一個 模塊,是基於streaming搞的東西。 mrjob 可以讓用 Python 來編寫 MapReduce 運算,並在多個不同平臺上運行,你可以: 使用純 Python 編寫多步的 MapReduce 作業 在本
相關文章
相關標籤/搜索