SparkCore>RDD容錯機制Checkpoint

文章目錄 引入 代碼演示 查看結果: 總結 引入 持久化的侷限 持久化/緩存能夠把數據放在內存中，雖然是快速的，可是也是最不可靠的；也能夠把數據放在磁盤上，也不是徹底可靠的！例如磁盤會損壞等。node 問題解決 Checkpoint的產生就是爲了更加可靠的數據持久化，在Checkpoint的時候通常把數據放在在HDFS上，這就自然的藉助了HDFS天生的高容錯、高可靠來實現數據最大程度上的安全，實現

>>阅读原文<<