【Spark】Spark 存儲原理--讀數據過程

本篇結構: 讀取數據塊過程 內存讀取 磁盤讀取 遠程讀取 一、讀取數據塊過程 BlockManager 的 get 方法是讀數據的入口點,有本地讀取和遠程讀取兩個分叉口。本地讀取使用 getLocalValues 方法,根據存儲級別的不同,使用 MemoryStore.getValues 或者 DiskStore.getBytes 讀取數據。 遠程讀取使用 getRemoteValues 方法,調
相關文章
相關標籤/搜索