記一次kafka數據丟失問題的排查

數據丟失爲大事,針對數據丟失的問題咱們排查結果以下。 第一:是否存在數據丟失的問題?     存在,且已重現。 第二:是在什麼地方丟失的數據,是不是YDB的問題?     數據丟失是在導入階段,數據並無寫入到Kafka裏面,因此YDB也就不會從Kafka裏面消費到缺失的數據,數據丟失與延雲YDB無關。 第三:是如何發現有數據丟失?     1.測試數據會一共建立365個分區,每一個分區均是9億數據
相關文章
相關標籤/搜索