kafka虞兮嘆一(消費冪等性,不丟失不重複)

一、如何保證kafka消費數據不丟失? kafka通過先消費消息,後更新offset,來保證消息不丟失,但是會重複。   二、如何保證kafka消費數據不重複?(如何保證消息消費時的冪等性) 一、背景: Kafka 實際上有個 offset 的概念,就是每個消息寫進去,都有一個 offset,代表消息的序號,然後 consumer 消費了數據之後,每隔一段時間(定時定期),會把自己消費過的消息的
相關文章
相關標籤/搜索