9.3.2 map端連接-CompositeInputFormat連接類

1.1.1         map端連接-CompositeInputFormat連接類 (1)使用CompositeInputFormat連接類需要滿足三個條件: 1)兩個數據集都是大的數據集,不能用緩存文件的方式。 2)數據集都是按照相同的鍵進行排序; 3)數據集有相同的分區數,同一個鍵的所有記錄在同一個分區中,輸出文件不可分割; 要滿足這三個條件,輸入數據在達到map端連接函數之前,兩個數據
相關文章
相關標籤/搜索