Spark學習(1)——組件介紹

一、架構圖 組件圖:  架構圖:   二、組件介紹 1.Driver driver是一個進程,我們編寫的spark程序運行在driver上,由dirver進程執行,driver是作業的主進程,具有main函數,是程序的入口點,driver進程啓動後,向master發送請求,進行註冊,申請資源,在後面的executor啓動後,會向dirver進行反註冊,dirver註冊了executor後,正式執行
相關文章
相關標籤/搜索