Spark Streaming與Kafka如何保證數據零丟失

1、At most once - 每條數據最多被處理一次(0次或1次),這種語義下會出現數據丟失的問題; 2、At least once - 每條數據最少被處理一次 (1次或更多),這個不會出現數據丟失,但是會出現數據重複; 3、Exactly once - 每條數據只會被處理一次,沒有數據會丟失,並且沒有數據會被多次處理,這種語義是大家最想要的,但是也是最難實現的。 spark streamin
相關文章
相關標籤/搜索