kafka消費者鏈接topic分區失敗形成消息大量堆積

晚上7點收到topic堆積告警,經檢查,發現消費者到topic分區斷連,分區覆蓋率降低爲0,因爲業務TPS高,因此幾分鐘內即造成上千萬條消息堆積,業務成功率降低明顯,第一時間懷疑晚上高峯期業務量大,帶寬消耗大,網絡不穩定形成的,因此第一時間增長消費方的超時時間(socket.timeout.ms)並重啓,消費者隨即鏈接成功,從新開始消費,堆積逐漸減少,業務逐漸恢復。性能優化 但一週不到再次出現一樣
相關文章
相關標籤/搜索