【故障公告】redis內存耗盡形成博客後臺沒法保存

很是抱歉,今天上午11:00~11:30左右,因爲 redis 服務器內存耗盡形成博客後臺故障——保存博文時老是提示「請求太過頻繁,請稍後再試」,由此給您帶來麻煩,請您諒解。redis

因爲 redis 監控報警配置沒有及時更新,當 redis 服務器內存耗盡時咱們沒有收到報警通知,因此未能及時發現問題。當咱們發現故障並定位到故障緣由後,當即對 redis 進行了升級(咱們使用的是阿里云云數據庫Redis版),5分鐘左右完成升級,升級後恢復正常。數據庫

又是一次黑色星期四,此次徹底是咱們的運維工做不到位,咱們會吸收教訓,改進運維工做。緩存

【更新】服務器

  • 博客後臺保存博文時使用了基於 Redis 的分佈式鎖 RedLock, 「請求太過頻繁,請稍後再試」報錯是由於拿不到鎖。
  • redis 內存耗滿是因爲一個應用錯誤地使用了這臺 redis,而且緩存條目沒有加過時時間。
相關文章
相關標籤/搜索