hadoop(6)——mrjob的使用(2)——交給hadoop集羣

(1)開啓hdfs和yarn服務 (2)查看寫好的文件(同上一篇hadoop(5)) (3)執行命令 (4)任務完成 (5)查看output ps:中間遇到了很多坑,比如說在執行該命令向前,一定要先hadoop fs -rm -r /output,不然已經建立了該文件夾hadoop會報錯 還有就是如果在虛擬環境下創建該任務,除了(3)的命令外,一定要加上– python-bin +/python解
相關文章
相關標籤/搜索