hadoop JOB的性能優化實踐

使用了幾個月的hadoopMR，對遇到過的性能問題做點筆記，這裏只涉及job的性能優化，沒有接觸到 hadoop集羣，操作系統，任務調度策略這些方面的問題。 hadoop MR在做大數據量分析時候有限的計算資源情況下只能不斷的優化程序。 優化可以從兩個方面進行： 1.hadoop配置 2.程序代碼 程序代碼包括的方面很多：job設計，算法，數據結構，代碼編寫。 hadoop配置優化 hadoop配

>>阅读原文<<