kafka 消息堆積慢消費問題

一. 問題描述         咱們的物料篩選排序系統以前常常會出現操做效果延遲的狀況。在篩選排序數據不對時，咱們通常會查看ES裏存儲的數據和DB裏存儲的數據是否一致，發如今一段時間內確實會存在數據不一致。咱們懷疑是數據流下發存在延遲，因而馬上查看了kafka裏消息增量數量的監控，發現出問題時kafka消息增量通常都堆積比較嚴重，並且看kafka的消息數變化曲線，消息堆積被消費後降低的速度要明顯慢

>>阅读原文<<