Spark Storage概述
概述 Spark的Storage模塊負責RDD(persist或cache)、Shuffle中間結果、Broadcast變量的存儲及管理。 設計 組件 Storage模塊抽象出BlockManager，提供公有的putXXX、getXXX方法供其他模塊調用而無需關心其實現細節，BlockManager實現涉及的其他主要class如下(按原始數據和元數據管理分) BlockStore 以block爲
相關文章
- 1. Spark----Spark SQL概述
- 2. Docker-- Docker storage driver 概述
- 3. Azure Storage系列之概述
- 4. OpenStack Object Storage（Swift）概述
- 5. 【Spark】Spark七： Spark概述
- 6. Spark Streaming-概述
- 7. Spark SQL概述
- 8. Spark Streaming 概述
- 9. Spark概述
- 10. Spark DAG概述
- 更多相關文章...
- • 數據庫是什麼？數據庫的概念 - MySQL教程
- • Docker info 命令 - Docker命令大全
- • Java Agent入門實戰（二）-Instrumentation源碼概述
- • TiDB 在摩拜單車在線數據業務的應用和實踐
相關標籤/搜索
每日一句
-
每一个你不满意的现在，都有一个你没有努力的曾经。
歡迎關注本站公眾號,獲取更多信息
