Spark知識點

1.Spark架構 分佈式spark應用中的組件        在分佈式環境下,Spark集羣採用的是主/從結構。在一個Spark集羣中,有一個節點負責中央協調,調度各個分佈式工作節點。這個中央協調節點被稱爲驅動器(Driver)節點。與之對應的工作節點被稱爲執行器(executor)節點。驅動器節點可以和大量的執行器節點進行通信,它們也都作爲獨立的Java進行運行。驅動器節點和所有的執行器節點一
相關文章
相關標籤/搜索