Spark學習筆記 --- 架構原理和工作原理和執行流程

一、架構原理和工作原理     Driver: 一個進程,我們編寫Spark程序運行在Driver上,由Driver進行執行,Driver是作業的主進程,具有Main函數,是程序的入口點,Driver進程啓動後,向Master發送請求,進行註冊,申請資源,在後面的Executor啓動後,會向Driver進行反向註冊,Driver註冊Executor後,正式執行Spark程序,讀取數據源,創建RDD
相關文章
相關標籤/搜索