Flink--window數據傾斜

1.window數據傾斜 對於集羣系統,一般緩存是分佈式的,即不同節點負責一定範圍的緩存數據。我們把緩存數據分散度不夠,導致大量的緩存數據集中到了一臺或幾臺服務節點上,稱爲數據傾斜。一般來說,數據傾斜是由於負載均衡實施的效果不好引起的。 簡單的講,數據傾斜就是我們在計算數據的時候,數據的分散度不夠,導致大量的數據集中到了集羣中的一臺或者幾臺機器上計算,而集羣中其它節點空閒。這些傾斜了的數據的計算速
相關文章
相關標籤/搜索