走向雲計算之MapReduce應用案例詳解

1、概述 前面關於MapReduce的wordcount程序已經作了比較詳細的分析，這裏再給出MapReduce應用的幾個小案例，來更加深刻的理解MapReduce的設計理念和應用方法。部份內容參考了書籍《hadoop實戰》中的內容。php 2、MapReduce應用之數據去重 在統計大數據集上的數據種類個數、從網站日誌中計算訪問地等這些看似龐雜的任務都會涉及數據去重這個操做。css 一、情境要求

>>阅读原文<<