[Kafka與Spark集成系列四] Spark運行結構

歡迎支持《RabbitMQ實戰指南》以及關注微信公衆號:朱小廝的博客。 在分佈式環境下,Spark集羣採用的是主從架構。如下圖所示,在一個Spark集羣中,有一個節點負責中央協調,調度各個分佈式工作節點,這個中央協調節點被稱爲驅動器(Driver)節點,與之對應的工作節點被稱爲執行器(Executor)節點。驅動器節點可以和大量的執行器節點進行通信,它們也都作爲獨立的進程運行。驅動器節點和所有的執
相關文章
相關標籤/搜索