Mapreduce中shuffle概念及圖詳解、partitioner、倒排索引案例——千峯視頻

Shuffle的細節圖描述   分區案例 高可用配置 將不同的數據最終輸出到不同的目錄    自定義分區到此就可以了。主要是如何進行分類。  倒排索引案 那個網頁排名前面,那個網頁排名後面,根據關鍵詞進行倒排索引 到此就可以了,導出jar包,拉到home目錄下面                                  到此,Combiner也講完了。
相關文章
相關標籤/搜索