Spark RDD概念學習系列之RDD的容錯機制（十七）
RDD的容錯機制 RDD實現了基於Lineage的容錯機制。RDD的轉換關係，構成了compute chain，可以把這個compute chain認爲是RDD之間演化的Lineage。在部分計算結果丟失時，只需要根據這個Lineage重算即可。 圖1中，假如RDD2所在的計算作業先計算的話，那麼計算完成後RDD1的結果就會被緩存起來。緩存起來的結果會被後續的計算使用。圖中的示意是
相關文章
- 1. Spark RDD概念學習系列之RDD的操作（七）
- 2. Spark RDD概念學習系列之RDD的轉換（十）
- 3. Spark RDD概念學習系列之RDD的5大特點（五）
- 4. Spark RDD概念學習系列之RDD的缺點（二）
- 5. Spark RDD概念學習系列之RDD的創建（六）
- 6. Spark RDD概念學習系列之爲何會引入RDD？（一）
- 7. Spark RDD概念學習系列之rdd持久化、廣播、累加器（十八）
- 8. Spark RDD概念學習系列之Spark的算子的作用（十四）
- 9. Spark SQL概念學習系列之DataFrame與RDD的區別
- 10. Spark RDD概念學習系列之Spark Hash Shuffle內幕完全解密（二十）
- 更多相關文章...
- • 您已經學習了 XQuery，接下來該學習什麼內容呢？ - XQuery 教程
- • 您已經學習了 Web Services, 下一步學習什麼內容呢？ - Web Services 教程
- • Docker容器實戰(七) - 容器眼光下的文件系統
- • 漫談MySQL的鎖機制
相關標籤/搜索
每日一句
-
每一个你不满意的现在，都有一个你没有努力的曾经。
歡迎關注本站公眾號,獲取更多信息
相關文章
- 1. Spark RDD概念學習系列之RDD的操作（七）
- 2. Spark RDD概念學習系列之RDD的轉換（十）
- 3. Spark RDD概念學習系列之RDD的5大特點（五）
- 4. Spark RDD概念學習系列之RDD的缺點（二）
- 5. Spark RDD概念學習系列之RDD的創建（六）
- 6. Spark RDD概念學習系列之爲何會引入RDD？（一）
- 7. Spark RDD概念學習系列之rdd持久化、廣播、累加器（十八）
- 8. Spark RDD概念學習系列之Spark的算子的作用（十四）
- 9. Spark SQL概念學習系列之DataFrame與RDD的區別
- 10. Spark RDD概念學習系列之Spark Hash Shuffle內幕完全解密（二十）