使用MapReduce對Hadoop下的日誌記錄進行分析處理

一. 簡介 MapReduce是一個高性能的批處理分佈式計算框架，用於對海量數據進行並行分析和處理。與傳統方法相比較，MapReduce更傾向於蠻力去解決問題，通過簡單、粗暴、有效的方式去處理海量的數據。通過對數據的輸入、拆分與組合（核心），將任務分配到多個節點服務器上，進行分佈式計算，這樣可以有效地提高數據管理的安全性，同時也能夠很好地範圍被管理的數據。 mapreduce核心就是map+shu

>>阅读原文<<