Data-Intensive Text Processing with MapReduce第三章(3)-MapReduce算法設計-3.2 PAIRS(對)和STRIPES(條紋)...

3.2 PAIRS(對)和STRIPES(條紋) 在MapReduce程序中同步的一個普遍做法是通過構建複雜的鍵和值這樣一個途徑來使數據自然地適應執行框架。我們在之前的章節中涉及到這個技術,即把部分總數和計數「打包」成一個複合值(例如pair),依次從mapper傳到combiner再傳到reducer。以之前的出版物爲基礎【54,94】,這節介紹兩個常見的設計模式,我們稱爲pairs(對)和st
相關文章
相關標籤/搜索