【總結】Spark容錯機制

容錯方式 容錯 指的是一個系統在部分模塊出現故障時還可否持續的對外提供服務，一個高可用的系統應該具備很高的容錯性；對於一個大的集羣系統來講，機器故障、網絡異常等都是很常見的，Spark這樣的大型分佈式計算集羣提供了不少的容錯機制來提升整個系統的可用性。 node 通常來講，分佈式數據集的容錯性有兩種方式：數據檢查點和記錄數據的更新。 面向大規模數據分析，數據檢查點操做成本很高，須要經過數據中心的網

>>阅读原文<<