【Spark】Spark 存儲原理--讀數據過程

本篇結構:java 讀取數據塊過程 內存讀取 磁盤讀取 遠程讀取 1、讀取數據塊過程 BlockManager 的 get 方法是讀數據的入口點,有本地讀取和遠程讀取兩個分叉口。本地讀取使用 getLocalValues 方法,根據存儲級別的不一樣,使用 MemoryStore.getValues 或者 DiskStore.getBytes 讀取數據。web 遠程讀取使用 getRemoteVal
相關文章
相關標籤/搜索