Spark 存儲模型

本文簡單介紹Spark 的數據存儲原理,是《圖解Spark核心技術與案例實戰》一書的讀書筆記。 組件 spark 存儲模型是主從模型,其中Driver是Master,Executor是Slave。Driver負責數據的元信息管理,Slave 負責存儲數據,執行Driver傳遞過來的數據操作命令。 Driver 應用啓動時,SparkContext會在Driver端創建SparkEnv,在Spark
相關文章
相關標籤/搜索