Spark的緩存管理解析

Spark的緩存管理解析緩存 [睡着的水-hzjs-2016.08.24]spa 1、CacheManager分析blog 一、CacheManager管理的緩存,而混存能夠是基於內存的緩存,也能夠是基於磁盤的緩存;token 二、CacheManager須要經過BlockManager來操做數據;內存 三、當Task 運行的時候會調用RDD的compute方法進行計算,而compute 方法會調
相關文章
相關標籤/搜索