spark 生產線上碰到的問題

spark 生產線上碰到的問題 1、第一張錯誤信息圖片 2、第二張錯誤信息圖片 3、第三張錯誤信息圖片 4、第四張sparkUI上顯示的信息 一、產生事故的背景: 　　上線一個疲勞駕駛事件處理的流式分析,由於中間業務處理的代碼邏輯有變更,導致需要重新部署。每次都是將checkpoint中的元數據刪掉，因爲已經過了比較長的時間了，而且又用到updateStateByKey算子，擔心數據算的不準所以刪

>>阅读原文<<