hadoop streaming 輸出數據分割與二次排序

輸出數據分割 默認狀況下Streaming框架將map輸出的每一行第一個」\t」以前的部分做爲key,以後的部分做爲value,key\tvalue又做爲reduce的輸入。能夠用-D stream.map.output.field.separator改變map輸出中key和value的分隔符,用-D stream.num.map.output.key.fields設置分隔符的位置,該位置以前的部
相關文章
相關標籤/搜索