Hadoop Streaming的一些基本知識

Streaming工做原理: 在上面的例子裏，mapper和reducer都是可執行文件，它們從標準輸入讀入數據（一行一行讀）， 並把計算結果發給標準輸出。Streaming工具會建立一個Map/Reduce做業， 並把它發送給合適的集羣，同時監視這個做業的整個執行過程。java 如 果一個可執行文件被用於mapper，則在mapper初始化時， 每個mapper任務會把這個可執行文件做爲一個單獨

>>阅读原文<<