Spark Streaming——Checkpoint

轉載：源文鏈接 一個Streaming Application每每須要7*24不間斷的跑，因此須要有抵禦意外的能力（好比機器或系統掛掉，JVM crash等）。爲了讓這成爲可能，Spark Streaming須要checkpoint足夠多信息至一個具備容錯設計的存儲系統才能讓Application從失敗中恢復。Spark Streaming會checkpoint兩種類型的數據。web Metada

>>阅读原文<<