日誌的清除策略以及壓縮策略

日誌清除策略3d

  • 根據消息的保留時間,當消息在 kafka 中保存的時間超過了指定的時間
    • 就會觸發清理過程
  • 存儲的數據大小,當 topic 所佔的日誌文件大小大於必定的閥值
    • 則能夠開始刪除最舊的消息

日誌壓縮策略日誌

  • 按期將相同的 key 進行合併,只保留最新的 value 值。
  • 日誌的壓縮原理是:
相關文章
相關標籤/搜索