storm與spark streaming反壓機制

因特殊業務場景,如大促、秒殺活動與突發熱點事情等業務流量在短時間內劇增,形成巨大的流量毛刺,數據流入的速度遠高於數據處理的速度,對流處理系統構成巨大的負載壓力,如果不能正確處理,可能導致集羣資源耗盡最終集羣崩潰,因此有效的反壓機制(backpressure)對保障流處理系統的穩定至關重要。 Storm和Spark Streaming都提供了反壓機制,實現各不相同 對於開啓了acker機制的stor
相關文章
相關標籤/搜索