基於Spark streaming的SQL服務實時自動化運維

設計背景 spark thriftserver目前線上有10個實例,以往經過監控端口存活的方式很不許確,當出故障時進程不退出狀況不少,而手動去查看日誌再重啓處理服務這個過程很低效,故設計利用Spark streaming去實時獲取spark thriftserver的log,經過log判斷服務是否中止服務,從而進行對應的自動重啓處理,該方案能達到秒級 7 * 24h不間斷監控及維護服務。mysql
相關文章
相關標籤/搜索