MapReduce數據傾斜解決方案

一.數據傾斜簡介 1>.什麼是數據傾斜 　　答：大量數據涌入到某一節點，導致此節點負載過重，此時就產生了數據傾斜。 2>.處理數據傾斜的兩種方案 　　第一：重新設計key； 　　第二：設計隨機分區；    二.模擬數據傾斜 數據：   3 5 7 9 1 3 5 7 9 1 3 5 7 9 1 3 5 7 9 1 3 5 7 9 1 3 5 7 9 1 3 5 7 9 1 3 5 7 9 1 3

>>阅读原文<<