pig避免產生大量小文件的方法

參考鏈接:How do I force PigStorage to output a few large files instead of thousands of tiny files?    pig中會爲每個輸入文件構建一個mapper, 如果中間沒有reduce過程,則輸入有多少個文件,輸出就有多少個文件( If you have thousands of input files, you
相關文章
相關標籤/搜索