storm與spark streaming反壓機制

因特殊業務場景,如大促、秒殺活動與突發熱點事情等業務流量在短期內劇增,造成巨大的流量毛刺,數據流入的速度遠高於數據處理的速度,對流處理系統構成巨大的負載壓力,若是不能正確處理,可能致使集羣資源耗盡最終集羣崩潰,所以有效的反壓機制(backpressure)對保障流處理系統的穩定相當重要。html Storm和Spark Streaming都提供了反壓機制,實現各不相同 git 對於開啓了acker
相關文章
相關標籤/搜索