平臺搭建---Kafka使用---Kafka重複消費和丟失數據

來源css 一、Kafka保證數據不丟失的原理 1.一、kafka消息的位置 用好Kafka,維護其消息偏移量對於避免消息的重複消費與遺漏消費,確保消息的Exactly-once是相當重要的。 kafka的消息所在的位置Topic、Partitions、Offsets三個因素決定。 Kafka消費者消費的消息位置還與consumer的group.id有關。 consumerOffsets與earl
相關文章
相關標籤/搜索